虚拟形象的唇形驱动方法、装置、电子设备及存储介质与流程

本公开涉及计算机处理，具体涉及虚拟形象的唇形驱动方法、装置、电子设备及存储介质。

背景技术：

1、虚拟形象主要由顶点以及顶点形成的三角面构成，其面部驱动一般是依赖于绑定的模型。所谓绑定，指的是将某种表情与顶点或三角面建立联系，赋予不同的顶点或三角面以权重和变化数值，可以根据表情系数来控制对应的顶点变化，从而达到控制表情的功能。而现有对于表情系数的处理，一般是人工设置动画参数曲线，或进行面部捕捉再对其进行计算得到。这两种方式均涉及到人工处理，导致驱动效果不佳。

技术实现思路

1、有鉴于此，本公开实施例提供了一种虚拟形象的唇形驱动方法、装置、电子设备及存储介质，以解决现有虚拟形象的唇形驱动效果不佳的问题。

2、根据第一方面，本公开实施例提供了一种虚拟形象的唇形驱动方法，包括：

3、获取当前采集到的待处理信息，所述待处理信息包括目标音频或目标音素信息，所述目标音素信息包括音素以及音素时长；

4、对所述待处理信息进行语音分析，确定所述待处理信息对应的国际音标序列；

5、查询目标数据库，确定所述国际音标序列中的各个国际音标的唇形驱动参数，所述目标数据库用于表示国际音标与唇形驱动参数的对应关系，所述唇形驱动参数是通过对所述国际音标对应的面捕数据进行统计分析得到的；

6、根据所述唇形驱动参数生成所述待处理信息对应的目标虚拟形象的唇形。

7、根据第二方面，本公开实施例提供了一种虚拟形象的唇形驱动装置，包括：

8、获取模块，用于获取当前采集到的待处理信息，所述待处理信息包括目标音频或目标音素信息，所述目标音素信息包括音素以及音素时长；

9、分析模块，用于对所述待处理信息进行语音分析，确定所述待处理信息对应的国际音标序列；

10、查询模块，用于查询目标数据库，确定所述国际音标序列中的各个国际音标的唇形驱动参数，所述目标数据库用于表示国际音标与唇形驱动参数的对应关系，所述唇形驱动参数是通过对所述国际音标对应的面捕数据进行统计分析得到的；

11、生成模块，用于根据所述唇形驱动参数生成所述待处理信息对应的目标虚拟形象的唇形。

12、根据第三方面，本公开实施例提供了一种电子设备，包括：存储器和处理器，所述存储器和所述处理器之间互相通信连接，所述存储器中存储有计算机指令，所述处理器通过执行所述计算机指令，从而执行第一方面或者第一方面的任意一种实施方式中所述的虚拟形象的唇形驱动方法。

13、根据第四方面，本公开实施例提供了一种计算机可读存储介质，所述计算机可读存储介质存储计算机指令，所述计算机指令用于使所述计算机执行第一方面或者第一方面的任意一种实施方式中所述的虚拟形象的唇形驱动方法。

14、本公开实施例提供的虚拟形象的唇形驱动方法，通过事先确定目标数据库，实现对采集到的待处理信息进行目标虚拟形象的实时生成，由于目标数据库中的面捕驱动参数是通过对国际音标对应的面捕数据统计分析得到的，使得目标虚拟形象是基于统计分析得到的规则生成的，使得驱动效果更接近真人，从而保证该方法是一种既可以自动生成表情，又能很大程度上还原真实面部捕捉表情的方法。

技术特征：

1.一种虚拟形象的唇形驱动方法，其特征在于，包括：

2.根据权利要求1所述的方法，其特征在于，所述唇形驱动参数满足预设分布，所述根据所述唇形驱动参数生成所述待处理信息对应的目标虚拟形象的唇形，包括：

3.根据权利要求2所述的方法，其特征在于，所述对所述预设分布的唇形驱动参数进行采样，得到目标唇形驱动参数，包括：

4.根据权利要求1所述的方法，其特征在于，所述目标数据库的确定方式包括：

5.根据权利要求4所述的方法，其特征在于，所述对所述样本音频进行语音分析，确定样本国际音标序列以及所述样本国际音标序列中各个样本国际音标的时长，包括：

6.根据权利要求5所述的方法，其特征在于，所述对所述样本音频进行语音分析，确定样本音素序列以及所述样本音素序列中样本音素的时长，包括：

7.根据权利要求5所述的方法，其特征在于，所述对所述样本国际音标序列进行语音分析，确定所述样本音素中各样本国际音标的占比，包括：

8.根据权利要求7所述的方法，其特征在于，所述将所述样本国际音标与所述样本声谱帧进行对齐，确定所述样本国际音标对应的样本声谱帧的数量，包括：

9.根据权利要求4所述的方法，其特征在于，所述对所述样本动画数据帧进行统计分析，确定所述样本国际音标对应的唇形驱动参数，以确定所述目标数据库，包括：

10.一种虚拟形象的唇形驱动装置，其特征在于，包括：

11.一种电子设备，其特征在于，包括：

12.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质存储有计算机指令，所述计算机指令用于使计算机执行权利要求1-9中任一项所述的虚拟形象的唇形驱动方法。

技术总结本公开涉及计算机处理技术领域，具体涉及虚拟形象的唇形驱动方法、装置、电子设备及存储介质，该方法包括获取当前采集到的待处理信息；对所述待处理信息进行分析，确定所述待处理信息对应的国际音标序列；查询目标数据库，确定所述国际音标序列中的各个国际音标的唇形驱动参数，所述目标数据库用于表示国际音标与唇形驱动参数的对应关系，所述唇形驱动参数是通过对所述国际音标对应的面捕数据进行统计分析得到的；根据所述唇形驱动参数生成所述待处理信息对应的目标虚拟形象的唇形。通过事先确定目标数据库，实现对采集到的待处理信息进行目标虚拟形象的实时生成，目标虚拟形象是基于统计分析得到的规则生成的，使得驱动效果更接近真人。技术研发人员：毕成,马泽君受保护的技术使用者：北京有竹居网络技术有限公司技术研发日：技术公布日：2024/4/17