一种虚拟形象生成方法、装置、电子设备和存储介质与流程

本发明涉及数据处理，尤其涉及一种虚拟形象生成方法、装置、电子设备和存储介质。

背景技术：

1、随着移动互联网技术以及网络通信技术的不断发展，虚拟形象作为虚拟世界中重要的信息表达载体，在诸如虚拟电商主播、虚拟明星、二次元人物等场景多点应用，并呈现扩展趋势。

2、采用图像处理技术将真人图像转换为虚拟形象，常常会因虚拟形象的细节特征控制不到位而影响转换效果，如何使生成的虚拟形象的特征与真人图像的特征保持一致是本领域技术人员需要重点关注的问题。

3、目前，虚拟形象生成主要使用cg(computer graphics，计算机图形学)技术建模，若要实现个性化，则需要从建模开始修改，制作时间较长，人力成本较高，且对设备硬件要求较高，此外，生成各种姿态的虚拟形象，容易生成坏手，还可能涉及内容违规等问题，需要接入内容安全审核，增加了生成虚拟形象的耗时和运营成本。

技术实现思路

1、本发明提供了一种虚拟形象生成方法，以解决现有的虚拟形象生成方法存在的制作时间较长、容易生成坏手、内容违规以及运营成本高的问题。

2、第一方面，本发明提供了一种虚拟形象生成方法，包括：

3、获取用户输入的对所需虚拟形象的描述文本；

4、基于所述描述文本从虚拟形象特征库中筛选出匹配的虚拟形象，作为模板虚拟形象，所述虚拟形象特征库中的虚拟形象是根据预先训练好的形象生成模型获得的符合预设形象要求的图像；

5、使用蒙版图框在所述模板虚拟形象中选出待重绘的人脸区域；

6、获取用户上传的真人图片并提取所述真人图片的人脸隐式特征；

7、将所述人脸隐式特征和所述模板虚拟形象输入所述形象生成模型，以根据所述人脸隐式特征对所述模板虚拟形象中的所述人脸区域进行重绘，得到与所述真人图片对应的目标虚拟形象。

8、第二方面，本发明提供了一种虚拟形象生成装置，包括：

9、描述文本获取模块，用于获取用户输入的对所需虚拟形象的描述文本；

10、模板虚拟形象匹配模块，用于基于所述描述文本从虚拟形象特征库中筛选出匹配的虚拟形象，作为模板虚拟形象，所述虚拟形象特征库中的虚拟形象是根据预先训练好的形象生成模型获得的符合预设形象要求的图像；

11、人脸区域选中模块，用于使用蒙版图框在所述模板虚拟形象中选出待重绘的人脸区域；

12、人脸隐式特征提取模块，用于获取用户上传的真人图片并提取所述真人图片的人脸隐式特征；

13、目标虚拟形象生成模块，用于将所述人脸隐式特征和所述模板虚拟形象输入所述形象生成模型，以根据所述人脸隐式特征对所述模板虚拟形象中的所述人脸区域进行重绘，得到与所述真人图片对应的目标虚拟形象。

14、第三方面，本发明提供了一种电子设备，所述电子设备包括：

15、至少一个处理器；以及

16、与所述至少一个处理器通信连接的存储器；其中，

17、所述存储器存储有可被所述至少一个处理器执行的计算机程序，所述计算机程序被所述至少一个处理器执行，以使所述至少一个处理器能够执行本发明第一方面所述的虚拟形象生成方法。

18、第四方面，本发明提供了一种计算机可读存储介质，所述计算机可读存储介质存储有计算机指令，所述计算机指令用于使处理器执行时实现本发明第一方面所述的虚拟形象生成方法。

19、本发明实施例提供了一种虚拟形象生成方法，包括：获取用户输入的对所需虚拟形象的描述文本；基于描述文本从虚拟形象特征库中筛选出匹配的虚拟形象，作为模板虚拟形象；使用蒙版图框在模板虚拟形象中选出待重绘的人脸区域；获取用户上传的真人图片并提取真人图片的人脸隐式特征；将人脸隐式特征和模板虚拟形象输入形象生成模型，以根据人脸隐式特征对模板虚拟形象中的人脸区域进行重绘，得到与真人图片对应的目标虚拟形象。预先生成各种不同虚拟形象组成的虚拟形象库，在生成目标虚拟形象，仅需要对人脸区域进行重绘，不需要根据描述文本来实时生成目标虚拟形象，可节约生成时间；此外，虚拟形象特征库中的虚拟形象是根据预先训练好的形象生成模型获得的符合预设形象要求的图像，在生成目标虚拟形象时，可避免容易生成坏手、内容违规的问题，可以保证目标虚拟形象的人体形态是符合预设形象要求的，可减少审核流程，节约运营成本。

20、应当理解，本部分所描述的内容并非旨在标识本发明的实施例的关键或重要特征，也不用于限制本发明的范围。本发明的其它特征将通过以下的说明书而变得容易理解。

技术特征：

1.一种虚拟形象生成方法，其特征在于，包括：

2.如权利要求1所述的虚拟形象生成方法，其特征在于，所述基于所述描述文本从虚拟形象特征库中筛选出匹配的虚拟形象，作为模板虚拟形象，包括：

3.如权利要求2所述的虚拟形象生成方法，其特征在于，所述基于所述第一特征和所述第二特征的匹配度从虚拟形象特征库中筛选出虚拟形象并作为模板虚拟形象，包括：

4.如权利要求1所述的虚拟形象生成方法，其特征在于，所述获取用户上传的真人图片并提取所述真人图片的人脸隐式特征，包括：

5.如权利要求1-4任一项所述的虚拟形象生成方法，其特征在于，所述虚拟形象特征库中的虚拟形象通过以下步骤得到：

6.如权利要求5所述的虚拟形象生成方法，其特征在于，在所述定义用于生成虚拟形象的类别提示词和人物姿态标签之后，还包括：

7.如权利要求1-4任一项所述的虚拟形象生成方法，其特征在于，在得到与所述真人图片对应的目标虚拟形象之后，还包括：

8.一种虚拟形象生成装置，其特征在于，包括：

9.一种电子设备，其特征在于，所述电子设备包括：

10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质存储有计算机指令，所述计算机指令用于使处理器执行时实现权利要求1-7中任一项所述的虚拟形象生成方法。

技术总结本发明公开了一种虚拟形象生成方法、装置、电子设备和存储介质，包括：获取用户输入的对所需虚拟形象的描述文本；基于描述文本从虚拟形象特征库中筛选出匹配的虚拟形象，作为模板虚拟形象；使用蒙版图框在模板虚拟形象中选出待重绘的人脸区域；获取用户上传的真人图片并提取真人图片的人脸隐式特征；将人脸隐式特征和模板虚拟形象输入形象生成模型，以根据人脸隐式特征对模板虚拟形象中的人脸区域进行重绘，得到与真人图片对应的目标虚拟形象。预先生成各种不同虚拟形象组成的虚拟形象库，在生成目标虚拟形象，仅需要对人脸区域进行重绘，不需要根据描述文本来实时生成目标虚拟形象，可节约生成时间；可避免容易生成坏手、内容违规的问题。技术研发人员：黎子骏,马金龙,廖艳冰,张政统,邓其春,吴文亮,曾锐鸿,王伟喆,焦南凯,熊佳,徐志坚,谢睿,陈光尧受保护的技术使用者：广州趣研网络科技有限公司技术研发日：技术公布日：2024/11/18