一种图像处理方法及图像处理设备与流程

本申请涉及一种图像处理方法及图像处理设备。

背景技术：

1、在数字主播、数字客服场景下，需要一种更普适且更便捷的数字人生成方法。基于单张图片生成数字人是成本最低、最易用的方案。用户可以基于一张亲人或者喜爱形象的照片生成数字人。

2、目前，在生成数字人时，通常是基于生成式模型进行生成的，但是这种方式不能实现对表情的连续可控，并且不能保证生成图像的精度。

技术实现思路

1、本申请实施例提供一种图像处理方法及图像处理设备。

2、本申请的技术方案是这样实现的：

3、第一方面，本申请实施例提供一种图像处理方法，所述方法包括：

4、获取初始面部特征、以及初始表情特征；

5、响应表情编辑指令，对所述初始表情特征中的情绪控制变量进行编辑，得到目标表情特征；

6、将所述目标表情特征叠加在所述初始面部特征上，生成目标面部图像。

7、在上述图像处理方法中，所述对所述初始表情特征中的情绪控制变量进行编辑，得到目标表情特征，包括：

8、根据所述表情编辑指令确定情绪编辑目标；

9、基于所述情绪编辑目标，对所述初始表情特征中的情绪方向以及情绪强度进行编辑，得到目标表情特征。

10、在上述图像处理方法中，所述基于所述情绪编辑目标，对所述初始表情特征中的情绪方向以及情绪强度进行编辑，得到目标表情特征，包括：

11、确定所述情绪编辑目标中包括的第一情绪方向以及第一情绪强度；

12、确定所述初始表情特征中的情绪方向与所述第一情绪方向之间相差的第一步长、所述初始表情特征中的情绪强度与所述第一情绪强度之间相差的第二步长；

13、控制所述情绪方向基于当前位置游走所述第一步长、控制所述情绪强度基于当前位置游走所述第二步长，得到目标表情特征。

14、在上述图像处理方法中，所述控制所述初始情绪方向基于当前位置游走所述第一步长、控制所述初始情绪强度基于当前位置游走所述第二步长之后，所述方法还包括：

15、确定所述初始情绪方向当前所处的第一位置、所述初始情绪强度当前所处的第二位置；

16、从预设表情特征库中查找所述第一位置以及所述第二位置对应的表情特征作为所述目标表情特征。

17、在上述图像处理方法中，所述表情编辑指令包括连续的一组表情编辑指令，所述对所述初始表情特征中的情绪控制变量进行编辑，得到目标表情特征，包括：

18、根据所述一组表情编辑指令确定一组情绪编辑目标；

19、根据所述一组情绪编辑目标，依次对所述初始表情特征中的情绪控制变量进行编辑，得到所述一组情绪编辑目标对应的一组目标表情特征。

20、在上述图像处理方法中，所述方法还包括：

21、依次将所述一组目标表情特征中的每个目标表情特征叠加在所述基础面部特征上，生成对应的一个目标面部图像；

22、基于多个目标面部图像生成图像视频流。

23、在上述图像处理方法中，所述响应表情编辑指令，对所述初始表情特征中的情绪控制变量进行编辑，得到目标表情特征，包括：

24、确定当前交互的第一对象的实时面部图像；

25、基于所述表情编辑指令对应的情绪编辑目标、以及所述实时面部图像，对所述初始表情特征中的情绪控制变量进行编辑，得到所述目标表情特征。

26、在上述图像处理方法中，所述基于所述表情编辑指令对应的情绪编辑目标、以及所述实时面部图像，对所述初始表情特征中的情绪控制变量进行编辑，得到所述目标表情特征，包括：

27、基于所述表情编辑指令对应的情绪编辑目标、以及所述实时面部图像，确定综合情绪编辑目标；

28、根据所述综合情绪编辑目标，对所述初始表情特征中的情绪控制变量进行编辑，得到所述目标表情特征。

29、在上述图像处理方法中，所述将所述目标表情特征叠加在所述基础面部特征上，生成目标面部图像，包括：

30、基于所述目标表情特征生成目标表情形变场；

31、将所述目标表情形变场叠加在所述基础面部特征上，生成目标面部图像。

32、第二方面，本申请实施例提供一种图像处理设备，所述设备包括：处理器、存储器及通信总线；所述处理器执行存储器存储的运行程序时实现如上述任一项所述的图像处理方法。

33、本申请实施例提供了一种图像处理方法及图像处理设备，该方法包括：获取初始面部特征、以及初始表情特征；响应表情编辑指令，对初始表情特征中的情绪控制变量进行编辑，得到目标表情特征；将目标表情特征叠加在初始面部特征上，生成目标面部图像。

技术特征：

1.一种图像处理方法，所述方法包括：

2.根据权利要求1所述的方法，所述对所述初始表情特征中的情绪控制变量进行编辑，得到目标表情特征，包括：

3.根据权利要求2所述的方法，所述基于所述情绪编辑目标，对所述初始表情特征中的情绪方向以及情绪强度进行编辑，得到目标表情特征，包括：

4.根据权利要求3所述的方法，所述控制所述初始情绪方向基于当前位置游走所述第一步长、控制所述初始情绪强度基于当前位置游走所述第二步长之后，所述方法还包括：

5.根据权利要求1所述的方法，所述表情编辑指令包括连续的一组表情编辑指令，所述对所述初始表情特征中的情绪控制变量进行编辑，得到目标表情特征，包括：

6.根据权利要求5所述的方法，所述方法还包括：

7.根据权利要求1所述的方法，所述响应表情编辑指令，对所述初始表情特征中的情绪控制变量进行编辑，得到目标表情特征，包括：

8.根据权利要求7所述的方法，所述基于所述表情编辑指令对应的情绪编辑目标、以及所述实时面部图像，对所述初始表情特征中的情绪控制变量进行编辑，得到所述目标表情特征，包括：

9.根据权利要求1所述的方法，所述将所述目标表情特征叠加在所述基础面部特征上，生成目标面部图像，包括：

10.一种图像处理设备，所述设备包括：处理器、存储器及通信总线；所述处理器执行存储器存储的运行程序时实现如权利要求1-9任一项所述的方法。

技术总结本申请实施例提供了一种图像处理方法及图像处理设备，该方法包括：获取初始面部特征、以及初始表情特征；响应表情编辑指令，对初始表情特征中的情绪控制变量进行编辑，得到目标表情特征；将目标表情特征叠加在初始面部特征上，生成目标面部图像。技术研发人员：邓巧玲,徐真,宋旭颖受保护的技术使用者：联想（北京）有限公司技术研发日：技术公布日：2024/10/10