盲区显示方法、装置、电子设备及可读存储介质与流程

本申请涉及显示，更具体地，涉及一种盲区显示方法、装置、电子设备及可读存储介质。

背景技术：

1、目前，车辆会存在遮挡物体，从而对车辆中的人员形成遮挡，车辆中的人员会存在视野盲区。虽然，可以通过传感设备采集视野盲区的图像显示给车辆中的人员，然而，目前显示视野盲区的图像会存在较强的割裂感，显示效果较差，使得人员的体验较差。

技术实现思路

1、本申请提出了一种盲区显示方法、装置、电子设备及可读存储介质。

2、第一方面，本申请实施例提供了一种盲区显示方法，所述方法包括：基于乘坐于目标车辆的目标人员佩戴的混合现实设备，采集第一图像，其中，所述第一图像为与所述目标人员的眼姿信息对应的图像；基于设置于所述目标车辆的图像采集设备，采集第二图像，其中，所述第二图像为所述目标车辆周围环境中与所述目标人员的视野盲区对应的实景图像；基于所述眼姿信息、所述图像采集设备的位置信息以及所述目标车辆内的遮挡物体，确定形变参数，所述遮挡物体为对所述目标人员的视野进行遮挡形成所述视野盲区的物体；基于所述形变参数对所述第二图像进行调整，得到修正图像，其中，所述修正图像的尺寸大小适配于第一图像中视野盲区对应的局部图像的尺寸大小；对所述第一图像和所述修正图像进行合成，以通过修正图像中视野盲区对应的局部图像替换所述第一图像中视野盲区对应的局部图像，得到目标图像；在所述混合现实设备中显示所述目标图像。

3、可选的，对于一种可能的实施方式，所述对所述第一图像和所述修正图像进行合成，以通过修正图像中视野盲区对应的局部图像替换所述第一图像中视野盲区对应的局部图像，得到目标图像，包括：屏蔽所述第一图像中视野盲区对应的局部图像得到备选图像；将所述修正图像叠加至备选图像中被屏蔽的视野盲区对应的局部图像，与所述备选图像拼接得到所述目标图像。

4、可选的，对于一种可能的实施方式，所述将所述修正图像叠加至备选图像中被屏蔽的视野盲区对应的局部图像，与所述备选图像拼接得到所述目标图像，包括：调整所述备选图像的第一指定参数以及所述修正图像的第二指定参数中至少一个指定参数，以使第一指定参数与第二指定参数一致，其中，所述第一指定参数以及所述第二指定参数均包括曝光度、锐度、色差以及色调中至少一种；在所述第一指定参数以及所述第二指定参数中至少一个指定参数被调整后，将修正图像叠加至备选图像中被屏蔽的视野盲区对应的局部图像，与所述备选图像拼接得到所述目标图像。

5、可选的，对于一种可能的实施方式，所述将所述修正图像叠加至备选图像中被屏蔽的视野盲区对应的局部图像，与所述备选图像拼接得到所述目标图像，包括：将所述修正图像叠加至备选图像中被屏蔽的视野盲区对应的局部图像，与所述备选图像拼接得到中间图像；在所述中间图像中确定拼接区域；对所述拼接区域进行图像平滑处理，得到所述目标图像。

6、可选的，对于一种可能的实施方式，所述在所述混合现实设备中显示所述目标图像，包括：对所述目标图像进行识别；在识别到所述目标图像中存在目标物体的情况下，生成提示信息并向目标人员提供所述提示信息；在所述混合现实设备中显示所述目标图像。

7、可选的，对于一种可能的实施方式，所述在所述混合现实设备中显示所述目标图像之后，还包括：获取所述目标车辆的当前的状态信息，所述状态信息包括车速信息、胎压信息以及导航信息中至少一种；在所述混合现实设备中显示所述状态信息。

8、第二方面，本申请实施例还提供了一种盲区显示装置，所述装置包括：第一采集单元、第二采集单元、形变参数确定单元、调整单元、处理单元以及显示单元。其中，第一采集单元，用于基于乘坐于目标车辆的目标人员佩戴的混合现实设备，采集第一图像，其中，所述第一图像为与所述目标人员的眼姿信息对应的图像；第二采集单元，用于基于设置于所述目标车辆的图像采集设备，采集第二图像，其中，所述第二图像为所述目标车辆周围环境中与所述目标人员的视野盲区对应的实景图像；形变参数确定单元，用于基于所述眼姿信息、所述图像采集设备的位置信息以及所述目标车辆内的遮挡物体，确定形变参数，所述遮挡物体为对所述目标人员的视野进行遮挡形成所述视野盲区的物体；调整单元，用于基于所述形变参数对所述第二图像进行调整，得到修正图像，其中，所述修正图像的尺寸大小适配于第一图像中视野盲区对应的局部图像的尺寸大小；处理单元，用于对所述第一图像和所述修正图像进行合成，以通过修正图像中视野盲区对应的局部图像替换所述第一图像中视野盲区对应的局部图像，得到目标图像；显示单元，用于在所述混合现实设备中显示所述目标图像。

9、第三方面，本申请实施例还提供了一种电子设备，包括：一个或多个处理器；存储器；一个或多个应用程序，其中所述一个或多个应用程序被存储在所述存储器中并被配置为由所述一个或多个处理器执行，所述一个或多个程序配置用于执行第一方面所述的方法。

10、第四方面，本申请实施例还提供了一种计算机可读存储介质，所述计算机可读存储介质中存储有程序代码，所述程序代码可被处理器调用执行上述第一方面所述的方法。

11、本申请实施例提供的盲区显示方法、装置、电子设备及可读存储介质，该方法首先基于乘坐于目标车辆的目标人员佩戴的混合现实设备，采集第一图像；基于设置于目标车辆的图像采集设备，采集第二图像；然后基于眼姿信息、图像采集设备的位置信息以及目标车辆内的遮挡物体，确定形变参数，遮挡物体为对目标人员的视野进行遮挡形成视野盲区的物体；基于形变参数对第二图像进行调整，得到修正图像，其中，修正图像的尺寸大小适配于第一图像中视野盲区对应的局部图像的尺寸大小；对第一图像和修正图像进行合成，以通过修正图像中视野盲区对应的局部图像替换第一图像中视野盲区对应的局部图像，得到目标图像；从而，在混合现实设备中显示目标图像。由于采集得到的图像，与目标人员通过该混合现实设备观察到的画面，是两种类型的图像，若直接将采集得到的盲区的实景图像与观察到的画面进行图像处理，此时若目标人员的眼姿信息发生改变，且图形处理的速度跟驾驶员眼镜晃动速度存在误差，会使得经过图像处理得到的图像出现较强的割裂感。而本申请实施例中，第一图像与第二图像均为采集得到的图像，其中所述第一图像为与所述目标人员的眼姿信息对应的图像；所述第二图像为所述目标车辆周围环境中与所述目标人员的视野盲区对应的实景图像；从而基于所述第二图像对进行图像处理，得到的目标图像是由两个采集得到的图像进行处理得到的。并且，正是由于修正图像的尺寸大小适配于所述第一图像中视野盲区对应的局部图像的尺寸大小，后续可以提高获取到的目标图像的显示效果，并降低目标图像的割裂感。

12、本申请实施例的其他特征和优点将在随后的说明书阐述，并且，部分地从说明书中变得显而易见，或者通过实施本申请实施例而了解。本申请实施例的目的和其他优点可通过在所写的说明书、权利要求书、以及附图中所特别指出的结构来实现和获得。

技术特征：

1.一种盲区显示方法，其特征在于，包括：

2.根据权利要求1所述的方法，其特征在于，所述对所述第一图像和所述修正图像进行合成，以通过修正图像中视野盲区对应的局部图像替换所述第一图像中视野盲区对应的局部图像，得到目标图像，包括：

3.根据权利要求2所述的方法，其特征在于，所述将所述修正图像叠加至备选图像中被屏蔽的视野盲区对应的局部图像，与所述备选图像拼接得到所述目标图像，包括：

4.根据权利要求2所述的方法，其特征在于，所述将所述修正图像叠加至备选图像中被屏蔽的视野盲区对应的局部图像，与所述备选图像拼接得到所述目标图像，包括：

5.权利要求1所述的方法，其特征在于，所述在所述混合现实设备中显示所述目标图像，包括：

6.根据权利要求1所述的方法，其特征在于，所述在所述混合现实设备中显示所述目标图像之后，还包括：

7.一种盲区显示装置，其特征在于，包括：

8.一种电子设备，其特征在于，包括：一个或多个处理器；

9.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质中存储有程序代码，所述程序代码可被处理器调用执行如权利要求1-6任一项所述的方法。

技术总结本申请公开了一种盲区显示方法、装置、电子设备及可读存储介质,涉及显示技术领域。包括：基于乘坐于目标车辆的目标人员佩戴的混合现实设备，采集第一图像，采集第二图像；基于眼姿信息、图像采集设备的位置信息以及目标车辆内的遮挡物体，确定形变参数，遮挡物体为对目标人员的视野进行遮挡形成视野盲区的物体；基于形变参数对第二图像进行调整，得到修正图像；对第一图像和修正图像进行合成，以通过修正图像中视野盲区对应的局部图像替换第一图像中视野盲区对应的局部图像，得到目标图像；在混合现实设备中显示目标图像。显示给目标人员的目标图像是对采集得到的第一图像和第二图像进行图像处理得到的，减小了目标图像的画面割裂感。技术研发人员：许鸿锦,韦雯馨,伍毅,李晓平,李林桥,梁宇婷受保护的技术使用者：广州汽车集团股份有限公司技术研发日：技术公布日：2024/11/4