实时表情渲染方法及装置与流程

本申请涉及动画渲染，具体而言，涉及一种实时表情渲染方法及装置。

背景技术：

1、表情渲染是指在计算机图形学和计算机动画中，通过对人物或角色的面部表情进行处理，以达到更生动、真实和情感丰富的效果。表情渲染主要用于电影、动画、游戏和虚拟现实等领域，以提高人物形象的表现力和沟通效果。

2、尽管表情渲染技术已经相当先进，但在模拟真实人类面部表情方面仍然存在一定的限制。一些微妙的表情和情感可能仍然难以准确地捕捉和呈现，导致角色在某些情况下看起来不够自然。此外，在动画或虚拟现实中，实现平滑而自然的表情转换仍然是一个挑战。有时过渡可能显得生硬或不自然，尤其是在需要从一种极端表情切换到另一种时。最后，一些高级的表情渲染技术可能需要大量的计算资源，包括高性能的图形处理单元(gpu)和大量的存储空间。

3、针对上述的问题，目前尚未提出有效的解决方案。

技术实现思路

1、本发明实施例提供了一种实时表情渲染方法及装置，以至少解决实时表情渲染时逼真度不够高的技术问题。

2、根据本发明实施例的一个方面，提供了一种实时表情渲染方法，包括：使用关键点检测算法检测目标对象的面部上的关键点；根据所述关键点的位置，提取面部特征，基于所述面部特征实时识别面部表情；根据所识别出的面部表情，利用物理渲染的方式实时渲染数字人的表情。

3、根据本发明实施例的另一方面，还提供了一种实时表情渲染装置，包括：检测模块，被配置为使用关键点检测算法检测面部上的关键点；识别模块，被配置为根据所述关键点的位置，提取面部特征，基于所述面部特征实时识别面部表情；渲染模块，被配置为根据所识别出的面部表情，利用物理渲染的方式实时渲染数字人的表情。

4、在本发明实施例中，使用关键点检测算法检测目标对象的面部上的关键点；根据所述关键点的位置，提取面部特征，基于所述面部特征实时识别面部表情；根据所识别出的面部表情，利用物理渲染的方式实时渲染数字人的表情，进而解决了渲染出的表情不逼真的技术问题。

技术特征：

1.一种实时表情渲染方法，其特征在于，包括：

2.根据权利要求1所述的方法，其特征在于，使用关键点检测算法检测目标对象的面部上的关键点，包括：

3.根据权利要求1所述的方法，其特征在于，根据所述关键点的位置，提取面部特征，包括以下至少之一：

4.根据权利要求3所述的方法，其特征在于，基于所述面部特征实时识别面部表情包括以下至少之一：

5.根据权利要求1所述的方法，其特征在于，根据所识别出的面部表情，利用物理渲染的方式实时渲染数字人的表情，包括：

6.根据权利要求5所述的方法，其特征在于，所述渲染引擎的参数包括以下至少之一：面部动态表情参数、面部形状参数和面部姿态参数。

7.根据权利要求6所述的方法，其特征在于，利用所述渲染引擎的参数来实时渲染数字人的表情：

8.一种实时表情渲染装置，其特征在于，包括：

9.一种电子设备，其特征在于，包括：

10.一种计算机可读存储介质，其上存储有程序，其特征在于，在所述程序运行时，使得计算机执行如权利要求1至7中任一项所述的方法。

技术总结本申请提供了一种实时表情渲染方法及装置，其中，该方法包括：使用关键点检测算法检测目标对象的面部上的关键点；根据所述关键点的位置，提取面部特征，基于所述面部特征实时识别面部表情；根据所识别出的面部表情，利用物理渲染的方式实时渲染数字人的表情。本申请解决了现有技术中实时表情渲染不逼真的技术问题。技术研发人员：陈若含,李睿受保护的技术使用者：世优（北京）科技有限公司技术研发日：技术公布日：2024/7/29