信息处理装置、信息处理方法以及计算机可读存储介质与流程
- 国知局
- 2024-08-02 14:33:47
本申请涉及信息处理领域,更具体地,涉及一种利于以高真实感实时提供虚拟空间声场的信息处理装置、信息处理方法以及计算机可读存储介质。
背景技术:
1、随着虚拟现实技术的发展,如何为诸如元宇宙的虚拟空间的用户提供各种真实体验如真实声音体验日益受到关注。
2、通常来说,高真实性的声场可以使用复杂信息通过复杂的模拟算法来生成。然而,由于高精度的模拟需要较大计算量,因此实时性较低。此外,利用理想模型简单计算声场的方式尽管可以满足实时性要求,但这样计算的声场的真实性较低。
3、因此,期望能够提供一种能够同时满足真实性和实时性要求的生成虚拟空间声场的方式。
技术实现思路
1、在下文中给出了关于本公开的简要概述,以便提供关于本公开的某些方面的基本理解。但是,应当理解,这个概述并不是关于本公开的穷举性概述。它并不是意图用来确定本公开的关键性部分或重要部分,也不是意图用来限定本公开的范围。其目的仅仅是以简化的形式给出关于本公开的某些概念,以此作为稍后给出的更详细描述的前序。
2、本公开的实施例的目的是提供一种信息处理装置、信息处理方法以及计算机可读存储介质,其可以以高真实感实时提供诸如元宇宙的虚拟空间中的声场。
3、根据本公开的实施例的一个方面,提供了一种信息处理装置,该信息处理装置包括处理电路,该处理电路被配置成:基于关于真实空间中的声源的声源信息以及指示虚拟空间中存在的对象的虚拟空间信息,利用声场合成模型,获得虚拟空间中的声场,其中,声场合成模型是利用通过高精度计算获得的虚拟空间中的声场作为学习数据,通过机器学习预先获得的。
4、根据本公开的实施例的另一方面,提供了一种信息处理方法,其包括:基于关于真实空间中的声源的声源信息以及指示虚拟空间中存在的对象的虚拟空间信息,利用声场合成模型,获得虚拟空间中的声场,其中,声场合成模型是利用通过高精度计算获得的虚拟空间中的声场作为学习数据,通过机器学习预先获得的。
5、根据本公开的实施例的再一方面,还提供了一种存储有可执行指令的非暂态计算机可读存储介质,该可执行指令当由处理器执行时,使得处理器执行上述信息处理方法或上述信息处理装置的各个功能。
6、根据本公开的其它方面,还提供了用于实现上述根据本公开的方法的计算机程序代码和计算机程序产品。
7、根据本公开的实施例的至少一方面,可以利用基于高精度学习数据预先获得的声场合成模型,基于声源信息和虚拟空间信息获得虚拟空间声场,从而借由预先训练好的声场合成模型的高精度实时计算能力(即,快速近似高精度模拟的结果),以高真实感实时提供诸如元宇宙的虚拟空间中的声场。
8、在下面的说明书部分中给出本公开实施例的其它方面,其中,详细说明用于充分地公开本公开实施例的优选实施例,而不对其施加限定。
技术特征:1.一种信息处理装置,包括:
2.根据权利要求1所述的信息处理装置,其中,处理电路还被配置为:基于从布置在真实空间中的不同位置的多个声音收集装置获得的声音信号,利用盲声源检测确定真实空间中的声源而获得所述声源信息。
3.根据权利要求1所述的信息处理装置,其中,声场合成模型是基于卷积神经网络的模型。
4.根据权利要求3所述的信息处理装置,其中,处理电路还被配置为:基于关于真实空间中的声源的声源信息,生成用于表示无对象情况下虚拟空间中的理想声场的理想声场图。
5.根据权利要求4所述的信息处理装置,其中,处理电路还被配置为:基于指示虚拟空间中的对象的位置和属性的虚拟空间信息,生成用于表示虚拟空间的空间结构的空间结构图。
6.根据权利要求5所述的信息处理装置,其中,处理电路还被配置为:将具有相同分辨率的理想声场图和空间结构图输入到声场合成模型,以得到声场合成模型输出的虚拟空间中的声场。
7.根据权利要求1所述的信息处理装置,其中,处理电路还被配置为:基于关于真实空间中的训练声源的信息和训练虚拟空间的空间结构经过高精度计算,获得训练虚拟空间中的声场,作为所述学习数据。
8.根据权利要求1所述的信息处理装置,其中,处理电路还被配置为:
9.一种信息处理方法,包括:
10.一种存储有可执行指令的非暂态计算机可读存储介质,所述可执行指令在由处理器执行时,使得所述处理器执行如权利要求9所述的信息处理方法。
技术总结本公开涉及用于信息处理装置、信息处理方法以及计算机可读存储介质。根据本公开的信息处理装置包括处理电路,其被配置为:基于关于真实空间中的声源的声源信息以及指示虚拟空间中存在的对象的虚拟空间信息,利用声场合成模型,获得虚拟空间中的声场,其中,声场合成模型是利用通过高精度计算获得的虚拟空间中的声场作为学习数据,通过机器学习预先获得的。技术研发人员:沈凌浩受保护的技术使用者:索尼(中国)有限公司技术研发日:技术公布日:2024/7/25本文地址:https://www.jishuxx.com/zhuanli/20240801/243163.html
版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌抄袭侵权/违法违规的内容, 请发送邮件至 YYfuon@163.com 举报,一经查实,本站将立刻删除。
下一篇
返回列表