一种处理方法、装置和电子设备与流程

本发明涉及模型数据处理技术，尤其涉及一种处理方法、装置和电子设备。

背景技术：

1、动作信息识别模型可以识别出输入数据中对象的动作信息，基于该动作信息可以驱动模拟对象呈现出相应的动作。但是，目前此类动作信息识别模型的泛化能力不足，这是因为模型的训练数据不足或者数据包含的信息维度不够丰富，要想使得模型具有良好的泛化能力，需要采集海量且包含多维度信息的训练数据，还需要对这些数据进行动作信息的标注，这使得数据采集、标注难度大，成本高。

技术实现思路

1、本公开提供一种处理方法、装置和电子设备，以至少解决现有技术中存在的以上技术问题。

2、本公开第一方面提供一种处理方法，包括：

3、获得第一动作信息，所述第一动作信息用于使得模拟对象呈现出与所述第一动作信息对应的动作姿态；

4、获得环境信息，构建与所述环境信息对应的模拟环境；

5、根据所述模拟对象和所述模拟环境，获得模拟场景；

6、输出与所述模拟场景对应的第一图像和与所述第一图像中的模拟对象的动作姿态对应的动作信息。

7、其中，所述输出与所述模拟场景对应的第一图像包括：

8、确定图像输出模式，图像输出模式包括模拟图像采集设备的采集参数和模拟环境的环境参数中的一者或多者；

9、基于所述图像输出模式，输出所述模拟场景对应的第一图像。

10、其中，所述模拟对象为三维模拟对象，所述模拟环境为三维模拟环境，方法还包括：

11、获得模拟图像采集设备的位置信息，所述位置信息表征所述模拟图像采集设备在所述三维模拟环境中的位置；

12、根据所述位置信息，输出所述第一图像以及与所述第一图像中所述三维模拟对象对应的深度信息或点云信息。

13、其中，所述根据所述位置信息，输出与所述第一图像中所述三维模拟对象对应的深度信息，包括：

14、根据所述模拟图像采集设备的位置信息确定所述模拟图像采集设备的图像平面中每个像素点的位置信息；

15、根据所述模拟图像采集设备的位置信息和角度信息，获取所述像素点的角度信息；

16、根据所述像素点的位置信息和角度信息确定所述像素点对应的所述三维模拟对象上模拟点的深度信息并输出。

17、其中，所述根据所述位置信息，输出与所述第一图像中所述三维模拟对象对应的深度信息，包括：

18、根据所述模拟图像采集设备的位置信息确定所述模拟图像采集设备的图像平面中每个像素点的位置信息；

19、根据所述模拟图像采集设备的位置信息和角度信息，获取所述像素点的角度信息；

20、根据所述像素点的位置信息和角度信息确定所述像素点对应的所述三维模拟对象上模拟点的深度信息；

21、获取所述模拟点的位置信息，将所述模拟点的深度信息和位置信息作为所述模拟点的点云信息输出。

22、其中，该方法还包括：根据所述第一图像，获得与所述第一图像对应的第二图像，所述第二图像与所述第一图像满足相似条件，且所述第一图像中的模拟对象的动作姿态对应的动作信息与所述第二图像中的模拟对象的动作姿态对应的动作信息相同；

23、输出所述第二图像和所述第二图像中的模拟对象的动作姿态对应的动作信息。

24、其中，所述第一动作信息包括用于使模拟对象呈现出对应动作姿态对应的关键点位信息；或，所述第一动作信息包括多组关键点位信息；

25、所述关键点位信息用于使模拟对象呈现出对应动作姿态，所述多组关键点位信息具有时间顺序关系。

26、其中，该方法还包括，

27、获得所述第一动作信息对应的动作模式，输出第一集合，所述第一集合包括多个第一图像以及第一图像对应的动作模式和动作信息；

28、或者，

29、输出第二集合，所述第二集合包括多个第一图像和第一图像对应的动作信息。

30、本公开第二方面提供一种处理装置，包括：

31、数据获取模块，用于获得第一动作信息，所述第一动作信息用于使得模拟对象呈现出与所述第一动作信息对应的动作姿态；还用于获得环境信息；

32、模拟模块，构建与所述环境信息对应的模拟环境，根据所述模拟对象和所述模拟环境，获得模拟场景；

33、图像采集模块，用于输出与所述模拟场景对应的第一图像和与所述第一图像中的模拟对象的动作姿态对应的动作信息。

34、本公开第三方面提供一种电子设备，包括：

35、处理器；

36、用于存储所述处理器可执行指令的存储器；

37、所述处理器，用于从所述存储器中读取所述可执行指令，并执行所述指令以实现所述的处理方法。

技术特征：

1.一种处理方法，包括：

2.根据权利要求1所述的方法，所述输出与所述模拟场景对应的第一图像包括：

3.根据权利要求2所述的方法，所述模拟对象为三维模拟对象，所述模拟环境为三维模拟环境，方法还包括：

4.根据权利要求3所述的方法，所述根据所述位置信息，输出与所述第一图像中所述三维模拟对象对应的深度信息，包括：

5.根据权利要求4所述的方法，所述根据所述位置信息，输出与所述第一图像中所述三维模拟对象对应的深度信息，包括：

6.根据权利要求1所述的方法，该方法还包括：根据所述第一图像，获得与所述第一图像对应的第二图像，所述第二图像与所述第一图像满足相似条件，且所述第一图像中的模拟对象的动作姿态对应的动作信息与所述第二图像中的模拟对象的动作姿态对应的动作信息相同；

7.根据权利要求1所述的方法，所述第一动作信息包括用于使模拟对象呈现出对应动作姿态对应的关键点位信息；或，所述第一动作信息包括多组关键点位信息；

8.根据权利要求1所述的方法，该方法还包括，

9.一种处理装置，包括：

10.一种电子设备，包括

技术总结本发明公开一种处理方法、装置和电子设备，其中：获得第一动作信息，所述第一动作信息用于使得模拟对象呈现出与所述第一动作信息对应的动作姿态；获得环境信息，构建与所述环境信息对应的模拟环境；根据所述模拟对象和所述模拟环境，获得模拟场景；输出与所述模拟场景对应的第一图像和与所述第一图像中的模拟对象的动作姿态对应的动作信息。技术研发人员：俞径舟,武浩受保护的技术使用者：联想（北京）有限公司技术研发日：技术公布日：2024/9/29