图像的融合方法、装置、存储介质及电子装置与流程

本发明实施例涉及通信领域，具体而言，涉及一种图像的融合方法、装置、存储介质及电子装置。

背景技术：

1、在相关技术中，三虚拟场景与实时视频实现高质量的融合展示的过程中，大部分情况下通过人工建模的三维场景很难与真实的视频流进行完美的融合。

2、由此可知，相关技术中存在三维虚拟场景与实时视频高质量融合较为困难的问题。

3、针对相关技术中存在的上述问题，目前尚未提出有效的解决方法。

技术实现思路

1、本发明实施例提供了一种图像的融合方法、装置、存储介质及电子装置，以至少解决相关技术中存在的三维虚拟场景与实时视频高质量融合较为困难的问题。

2、根据本发明的一个实施例，提供了一种图像的融合方法，包括：确定目标摄像设备在三维场景中的标定参数；确定所述目标摄像设备采集到的目标图像中包括的每个像素点投影到所述三维场景中所得到投射坐标；基于所述投射坐标以及所述标定参数将所述像素点中包括的超出所述目标摄像设备的投影范围的第一像素点剔除，得到第二像素点；将所述第二像素点中包括的在所述三维场景中被遮挡的第三像素点剔除，得到目标像素点；将所述目标像素点渲染到所述三维场景中，以将所述目标摄像设备采集到的目标图像融合到所述三维场景中。

3、根据本发明的另一个实施例，提供了一种图像的融合装置，包括：第一确定模块，用于目标摄像设备在三维场景中的标定参数；第二确定模块，用于确定所述目标摄像设备采集到的目标图像中包括的每个像素点投影到所述三维场景中所得到投射坐标；第一剔除模块，用于基于所述投射坐标以及所述标定参数将所述像素点中包括的超出所述目标摄像设备的投影范围的第一像素点剔除，得到第二像素点；第二剔除模块，用于将所述第二像素点中包括的在所述三维场景中被遮挡的第三像素点剔除，得到目标像素点；渲染模块，用于将所述目标像素点渲染到所述三维场景中，以将所述目标摄像设备采集到的目标图像融合到所述三维场景中。

4、根据本发明的又一个实施例，还提供了一种计算机可读存储介质，所述计算机可读存储介质中存储有计算机程序，其中，所述计算机程序被设置为运行时执行上述任一项方法实施例中的步骤。

5、根据本发明的又一个实施例，还提供了一种电子装置，包括存储器和处理器，所述存储器中存储有计算机程序，所述处理器被设置为运行所述计算机程序以执行上述任一项方法实施例中的步骤。

6、根据本发明的又一个实施例，还提供了一种计算机程序产品，包括计算机程序，所述计算机程序被处理器执行时实现本申请各个实施例中所述方法的步骤。

7、通过本发明，在确定了目标摄像设备在三维场景中的标定参数以及采集的目标图像像素点对应的投射坐标的情况下，根据标定参数以及投射坐标将目标摄像设备摄影范围被遮挡的像素点以及超出摄影范围的像素点剔除得到目标像素点，将目标像素点渲染至三维场景中即可将目标图像融合到三维场景中。在最大程度保留原始视频画面的前提下，将被遮挡以及投影范围外的像素点剔除，可以实现视频画面与三维场景的完美融合。因此，可以解决相关技术中存在的三维虚拟场景与实时视频高质量融合较为困难的问题，进而达到了完美融合的效果。

技术特征：

1.一种图像的融合方法，其特征在于，包括：

2.根据权利要求1所述的方法，其特征在于，基于所述投射坐标以及所述标定参数将所述像素点中包括的超出所述目标摄像设备的投影范围的第一像素点剔除包括：

3.根据权利要求1所述的方法，其特征在于，基于所述投射坐标以及所述标定参数将所述像素点中包括的超出所述目标摄像设备的投影范围的第一像素点剔除包括：

4.根据权利要求3所述的方法，其特征在于，基于所述标定参数确定所述目标摄像设备在所述三维场景中的目标视锥体包括：

5.根据权利要求4所述的方法，其特征在于，基于所述底面长度、底面宽度、所述第一边向量以及所述第二边向量确定所述目标视锥体包括：

6.根据权利要求3所述的方法，其特征在于，基于所述投射坐标确定在所述三维场景中位于所述目标视锥体之外的所述第一像素点剔除包括：

7.根据权利要求1所述的方法，其特征在于，将所述第二像素点中包括的在所述三维场景中被遮挡的第三像素点剔除包括：

8.根据权利要求1所述的方法，其特征在于，将所述目标像素点渲染到所述三维场景中包括：

9.一种图像的融合装置，其特征在于，包括：

10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质中存储有计算机程序，其中，所述计算机程序被设置为运行时执行所述权利要求1至8任一项中所述的方法。

11.一种电子装置，包括存储器和处理器，其特征在于，所述存储器中存储有计算机程序，所述处理器被设置为运行所述计算机程序以执行所述权利要求1至8任一项中所述的方法。

12.一种计算机程序产品，包括计算机程序，其特征在于，所述计算机程序被处理器执行时实现权利要求1至8任一项中所述方法的步骤。

技术总结本发明实施例提供了一种图像的融合方法、装置、存储介质及电子装置，其中，该方法包括：确定目标摄像设备在三维场景中的标定参数；确定目标摄像设备采集到的目标图像中包括的每个像素点投影到三维场景中所得到投射坐标；基于投射坐标以及标定参数将像素点中包括的超出目标摄像设备的投影范围的第一像素点剔除，得到第二像素点；将第二像素点中包括的在三维场景中被遮挡的第三像素点剔除，得到目标像素点；将目标像素点渲染到三维场景中，以将目标摄像设备采集到的目标图像融合到三维场景中。通过本发明，解决了相关技术中存在的三维虚拟场景与实时视频高质量融合较为困难的问题，进而达到了完美融合的效果。技术研发人员：董浩然,周淼,吴芳德,林骁,姚春龙,周文凯,周伟,陈远波,王建明,余仕敏受保护的技术使用者：浙江大华技术股份有限公司技术研发日：技术公布日：2024/11/18