增强现实人工智能增强用户感知自己的方式的制作方法

1.本公开总体上涉及生成增强现实(ar)场景，并且更具体地涉及用于调整ar场景以修改用户的身体特征的图像的至少一部分来产生身体特征的虚拟网格的方法和系统，所述虚拟网格的大小和形状可改变。

背景技术：

1、2.相关技术描述

2、多年来，增强现实(ar)技术取得了前所未有的增长，并且预计将继续以复合年增长率增长。ar技术是将真实世界的视图与计算机生成的元素(例如，虚拟对象)实时结合的交互式三维(3d)体验。在ar模拟中，真实世界融入了虚拟对象并提供交互式体验。随着ar技术的日益流行，各行业都采用ar技术来增强用户体验。例如，一些行业包括视频游戏、购物和零售、教育、娱乐、医疗保健、房地产、虚拟援助等。

3、例如，视频游戏行业的增长趋势是结合ar游戏，其中ar游戏将预先创建的环境叠加在用户的真实环境之上。ar游戏增强了用户的游戏体验，从而保持游戏的趣味性，因为可基于用户的真实环境来生成新的ar场景。在另一个示例中，日益增长的趋势是将ar技术结合到可帮助用户完成各种个人任务(例如，导航和视觉引导等)的复杂工具和操作中。不幸的是，一些用户可能会发现当他们可能因游戏玩法中的特定挑战或对象而灰心丧气时，在游戏中使用的当前ar技术无法鼓励用户继续游戏玩法。

4、正是在此背景下，提出了本公开的实现方式。

技术实现思路

1、本公开的实现方式包括与生成增强现实(ar)场景以在佩戴ar眼镜的用户的显示器上渲染有关的方法、系统和装置。在一些实施方案中，公开了能够调整ar场景的方法，其中基本上实时地修改用户的身体特征的图像以产生用户的身体特征的虚拟网格。在一些实施方案中，虚拟网格可改变大小和形状以增强在ar环境中的用户的化身的感知。例如，用户可佩戴ar眼镜(例如，ar头戴式显示器)并沉浸在包括真实世界对象和虚拟对象两者的ar环境中。在与ar环境的各种ar场景交互时，系统可被配置为当用户的视野指向用户的身体特征的至少部分时，检测ar环境中的用户(或其他用户)的身体特征(例如，手、手臂、肩膀、胸部、腿、身高、体重等)的图像。在一个实施方案中，系统被配置为修改用户的身体特征的图像的至少一部分以增强身体特征的外观。在一个实施方案中，修改身体特征的图像可改变身体特征的大小和形状，例如，使ar场景中的用户的化身看起来是更大的身材，诸如具有肌肉发达的手臂、肌肉发达的腿、更宽的肩膀等。由于ar场景可包括用户的被修改以增强用户的外观的各种身体特征，因此本文公开的方法概述了增强ar场景中的用户的外观的方法，使得用户自自尊心提高，这可导致用户在与ar环境中的各种游戏任务交互时更有信心且不那么亲切。据信在游戏或与计算机系统交互期间鼓励用户和/或提高他们的自尊心，这些积极效果可用于改善用户的生态以及可能地整体心理健康。

2、因此，当用户与ar环境中的ar场景交互时，可基本上实时地修改被检测到处于ar场景中的用户(或其他用户)的身体特征以产生虚拟网格，该虚拟网格可改变大小和形状以渲染在用户的显示器上。以此方式，当用户与ar场景交互时，用户的自我感知得到改善，从而使用户能够自信地继续游戏玩法。因此，用户可自信地继续游戏玩法而不会感到灰心丧气，因为他们在ar场景中的外观被修改为看起来像强大的游戏角色，例如更强壮、更高、更快、更健康等。在一些实施方案中，其他用户(例如，队友)的身体特征可被修改。在其他实施方案中，可修改对具有挑战性的游戏任务或令人生畏的环境的感知，降低其描绘的强度以使其看起来不那么令人生畏。以此方式，那些可能因为游戏玩法看起来亲切且难以完成而处于放弃他们的游戏玩法边缘的用户将被激励继续他们的游戏玩法

3、在一个实施方案中，提供了一种计算机实现的方法。所述方法包括为佩戴增强现实(ar)眼镜的用户生成ar场景以渲染在显示器上，所述ar场景包括真实世界空间和叠加在所述真实世界空间中的虚拟对象。所述方法包括分析从所述ar眼镜进入所述ar场景中的视野，所述分析被配置为当所述视野指向所述用户的身体特征的至少一部分时检测所述用户的所述身体特征的图像。所述方法包括当如从所述ar眼镜的所述视野看到的，检测到所述用户的所述身体特征处于所述ar场景中时，基本上实时地调整所述ar场景以修改所述用户的所述身体特征的所述图像的至少一部分，其中所述修改包括检测来自所述身体特征的深度数据和原始纹理数据以产生所述身体特征的虚拟网格；所述虚拟网格改变大小和形状并且使用与所述原始纹理数据混合的修改后的纹理数据来渲染。在一个实施方案中，当经由所述ar眼镜观看时，所述用户的所述修改后的身体特征在所述用户看来就像存在于所述真实世界空间中一样。以此方式，当检测到用户的所述身体特征处于所述ar场景中时，所述身体特征在所述ar场景中增强，这可导致所述用户的自我感知改善，继而可为所述用户提供信心以在所述用户的游戏玩法期间克服具有挑战性的任务或障碍。

4、在另一个实施方案中，提供了一种用于显示ar场景的系统。所述系统包括ar头戴式显示器(hmd)；所述ar hmd包括用于为佩戴ar眼镜的用户渲染ar场景的显示器。在一个实施方案中，ar场景包括真实世界空间和叠加在所述真实世界空间中的虚拟对象；并且所述ar hmd被配置为分析从所述ar眼镜进入所述ar场景中的视野。在一个实施方案中，所述分析被配置为当所述视野指向所述用户的身体特征的至少一部分时检测所述用户的所述身体特征的图像。所述系统包括与所述ar hmd相关联的处理单元，所述处理单元用于当如从所述ar眼镜的所述视野看到的，检测到所述用户的所述身体特征处于所述ar场景中时，基本上实时地调整所述ar场景以修改所述用户的所述身体特征的所述图像的至少一部分。在一个实施方案中，所述修改包括检测来自所述身体特征的深度数据和原始纹理数据以产生所述身体特征的虚拟网格，所述虚拟网格改变大小和形状并且使用与所述原始纹理数据混合的修改后的纹理数据来渲染。在一个实施方案中，当经由所述ar眼镜观看时，所述用户的所述修改后的身体特征在所述用户看来就像存在于所述真实世界空间中一样。所述系统包括与所述ar hmd相关联的跟踪单元，所述跟踪单元用于跟踪从所述ar眼镜进入所述ar场景中的所述视野；所述跟踪被配置为识别所述用户的所述身体特征的移动以进一步基本上实时地调整所述ar场景，以便将所述身体特征的所述移动合并在所述经调整的ar场景中。

5、依据以下结合附图的以示例方式图解说明本公开的原理的具体实施方式，本公开的其他方面和优点将变得显而易见。

技术特征：

1.一种计算机实现的方法，所述计算机实现的方法包括：

2.如权利要求1所述的计算机实现的方法，其中所述虚拟网格是用于在所述ar场景中渲染的所述用户的所述身体特征的三维(3d)表示，所述虚拟网格表示在所述ar场景中的所述用户的化身的至少一部分。

3.如权利要求1所述的计算机实现的方法，其中所述虚拟网格的所述大小和所述形状相对于对应的所述身体特征增大或减小用户偏好的量值。

4.如权利要求1所述的计算机实现的方法，其中所述虚拟网格的所述大小和所述形状是基于所述用户的简档和游戏玩法数据来确定的。

5.如权利要求1所述的计算机实现的方法，其中所述修改后的纹理数据和所述原始纹理数据的所述混合致使所述虚拟网格看起来沿着所述修改后的纹理数据和所述原始纹理数据之间的边界动态地集成。

6.如权利要求1所述的计算机实现的方法，其中所述分析被配置为当所述用户的所述视野指向一个或多个附加用户的身体特征的至少一部分时，进一步检测所述一个或多个附加用户的所述身体特征的图像，以修改所述一个或多个附加用户的身体特征的所述图像。

7.如权利要求1所述的计算机实现的方法，所述计算机实现的方法还包括：

8.如权利要求7所述的计算机实现的方法，其中对所述ar场景的所述描绘的强度的所述调整增加或减少所述用户的与所述ar场景相关联的感知难度。

9.如权利要求7所述的计算机实现的方法，其中使用一个或多个传感器来捕获所述一个或多个测量值，所述一个或多个传感器用于跟踪心率、或血压、或氧饱和度、或呼吸、或体温、或眼睛注视、或面部表情、或声音、或控制器移动、或身体移动、或与用户相关联的控制器输入，或者它们中的两者或更多者的组合。

10.如权利要求7所述的计算机实现的方法，其中调整所述一个或多个测量值以产生对应于所述用户的化身的一个或多个虚拟测量值，所述一个或多个虚拟测量值被具有更大运动耐力的用户感知。

11.如权利要求7所述的计算机实现的方法，其中对所述ar场景的所述描绘的强度的所述调整增加或减少所述用户的与所述ar场景相关联的感知难度，同时所述用户与所述经调整的ar场景的交互的身体强度基本上保持相同。

12.如权利要求1所述的计算机实现的方法，所述计算机实现的方法还包括：

13.如权利要求1所述的计算机实现的方法，其中修改所述身体特征的所述图像还包括通过所述用户的模型来处理所述用户的简档、所述用户的捕获的测量值和游戏玩法数据，所述模型被配置为识别来自所述用户的所述简档、所述用户的所述捕获的测量值和所述游戏玩法数据的特征以对所述用户的属性进行分类，所述用户的所述属性用于选择修改所述身体特征和调整所述ar场景的描绘的强度。

14.一种用于显示增强现实(ar)场景的系统，所述系统包括：

15.如权利要求14所述的系统，其中所述ar hmd包括被配置为检测来自所述身体特征的所述深度数据和所述原始纹理数据的三维(3d)相机。

16.如权利要求14所述的系统，其中所述虚拟网格是用于在所述ar场景中渲染的所述用户的所述身体特征的三维(3d)表示，所述虚拟网格表示在所述ar场景中的所述用户的化身的至少一部分。

17.如权利要求14所述的系统，其中所述虚拟网格的所述大小和所述形状相对于对应的所述身体特征增大或减小用户偏好的量值。

18.如权利要求14所述的系统，其中所述修改后的纹理数据和所述原始纹理数据的所述混合致使所述虚拟网格看起来沿着所述修改后的纹理数据和所述原始纹理数据之间的边界动态地集成。

19.如权利要求14所述的系统，其中响应于在所述ar场景的用户交互期间所述用户的一个或多个捕获的测量值，调整所述ar场景的描绘的强度以产生所述经调整的ar场景。

20.如权利要求14所述的系统，其中所述分析被配置为当所述用户的所述视野指向一个或多个附加用户的身体特征的至少一部分时，检测所述一个或多个附加用户的所述身体特征的图像，以修改所述一个或多个附加用户的身体特征的所述图像。

技术总结提供了用于生成增强现实(AR)场景的方法和系统，其中可调整所述AR场景以修改用户的身体特征的图像的至少一部分来产生所述身体特征的虚拟网格。所述方法包括为佩戴增强现实(AR)眼镜的用户生成AR场景以渲染在显示器上，所述AR场景包括真实世界空间和叠加在所述真实世界空间中的虚拟对象。所述方法包括分析从所述AR眼镜进入所述AR场景中的视野，所述分析被配置为当所述视野指向所述用户的身体特征的至少一部分时检测所述用户的所述身体特征的图像。所述方法包括当如从所述AR眼镜的所述视野看到的，检测到所述用户的所述身体特征处于所述AR场景中时，基本上实时地调整所述AR场景以修改所述用户的所述身体特征的所述图像的至少一部分，其中所述修改包括检测来自所述身体特征的深度数据和原始纹理数据以产生所述身体特征的虚拟网格；所述虚拟网格改变大小和形状并且使用与所述原始纹理数据混合的修改后的纹理数据来渲染。在一个实施方案中，当经由所述AR眼镜观看时，所述用户的所述修改后的身体特征在所述用户看来就像存在于所述真实世界空间中一样。以此方式，当检测到用户的所述身体特征处于所述AR场景中时，所述身体特征在所述AR场景中增强，这可导致所述用户的自我感知改善，继而可为所述用户提供信心以在所述用户的游戏玩法期间克服具有挑战性的任务或障碍。技术研发人员：J·A·帕拉西奥斯受保护的技术使用者：索尼互动娱乐股份有限公司技术研发日：技术公布日：2024/4/29