对声场的高阶立体混响表示进行压缩和解压缩的方法和设备与流程
- 国知局
- 2024-06-21 10:40:26
本发明涉及对声场的高阶立体混响表示进行压缩和解压缩的方法和设备。
背景技术:
1、高阶立体混响(表示为hoa)提供了表示三维立体声的一种方式。其它的技术是波场合成(wfs)或者像22.2的基于声道的方法。相比于基于声道的方法,hoa表示提供了独立于特定扬声器配置的优点。然而,这种灵活性是以牺牲解码过程为代价的,对于在特定扬声器配置上的hoa表示的回放,需要解码过程。与需要的扬声器数量通常很大的wfs方法相比,hoa也可以被提供给只包括较少扬声器的配置。hoa的其它优点是,在没有针对对耳机的双耳呈现的任何修改的情况下,也可以采用相同的表示。
2、hoa是基于按照截短的球面谐波(sh)展开的、复杂谐波平面波振幅的空间密度的表示。每个展开系数是角频率的函数,所述角频率的函数可以通过时域函数来等价表示。因此,不失一般性地,实际上可以假设完整的hoa声场表示由o个时域函数组成,其中o表示展开系数的数量。在下文中,这些时域函数将会等同地称为hoa系数序列。
3、hoa表示的空间分辨率随着展开的最大阶n的增长而提高。不幸地,展开系数o的数量随着阶n二次方地增长,具体地是o=(n+1)2。例如,典型的使用阶n=4的hoa表示需要o=25的hoa(展开)系数。根据上述考虑,给定期望的单声道采样速率fs以及每个样本的比特数量nb,针对hoa表示的传输的总比特率由o·fs·nb确定。使用每个样本nb=16个比特、以样本速率fs=48khz传输阶n=4的hoa表示将会导致19.2mbits/s的比特率,这对于许多实际应用(例如流传输)来说非常的高。因此,非常需要hoa表示的压缩。
技术实现思路
1、处理hoa表示(具有n>1)的压缩的现有方法是很少的。由e.hellerud,i.burnett,asolvang and u.p.svensson,"encoding higher order ambisonics with aac",124thaes convention,amsterdam,2008提出的最直接的方法是使用高级音频编码(aac)执行各个hoa系数序列的直接编码,所述高级音频编码(aac)是感知编码算法。然而,该方法固有的问题是从未听见的信号的感知编码。重建的回放信号经常通过hoa系数序列的加权和来获得,并且当解压缩的hoa表示在特定的扬声器配置上呈现时,有很大的可能会暴露感知编码噪音。针对感知编码噪音暴露的主要问题是各个hoa系数序列之间的高互相关性。由于各个hoa系数序列中的编码噪音信号经常是相互之间不相关的,因此可能会出现感知编码噪音的有益的叠加,同时无噪音hoa系数序列在叠加处消除。其它的问题是,这些互相关性导致感知编码器效率下降。
2、为了使两种效果的程度降到最低,在ep 2469742 a2中提出了在感知编码之前,将hoa表示变换为离散空间域中的等价表示。从形式上看,该离散空间域是在一些离散方向处采样的、复杂谐波平面波振幅的空间密度的时域等价物。因此离散空间域由o个传统时域信号来表示,如果扬声器恰好位于与针对空间域变换假设的方向相同的方向,则传统时域信号可以解释为从采样方向冲击的大体平面波,并且传统时域信号将会与扬声器信号相对应。
3、向离散空间域的变换降低了各个空间域信号之间的互相关性,但是没有完全消除这些互相关性。相对高的互相关性的示例是方向在由空间域信号覆盖的相邻方向中间的方向的定向信号。
4、两种方法的主要缺点是:感知编码信号的数量是(n+1)2,并且针对压缩的hoa表示的数据速率随着立体混响阶n二次方地增长。
5、为了降低感知编码信号的数量,专利申请ep 2665208 a1提出了将hoa表示分解为给定的最大数量的主导定向信号和残余环境分量。要感知编码的信号数量的降低是通过降低残余环境分量的阶来实现的。该方法背后的原理是:在通过较低阶hoa表示使用足够精度来表示残余的同时,保持关于主导定向信号的高空间分辨率。
6、只要满足关于声场的假设,该方法会很好的工作,即,假设声场由少量的主导定向信号(代表使用完整的阶n编码的大体平面波函数)和没有任何方向性的残余环境分量组成。然而,如果在分解之后残余环境分量仍然包含一些主导定向分量,则阶降低会导致在分解之后的呈现处明显可以感知到的错误。违反了假设的hoa表示的典型示例是以低于n的阶编码的大体平面波。这样的阶低于n的大体平面波可以产生于艺术创作,以便使得声源看起来更广泛,并且这样的阶低于n的大体平面波还可以随着通过球形麦克风记录hoa声场表示而出现。在两种示例中,由大量高度相关的空间域信号来表示声场(其解释还可以参见spatial resolution of higher order ambisonics)。
7、本发明要解决的问题是消除专利申请ep 2665208 a1中描述的过程引起的缺点,由此也避免了上述其它引用的现有技术的缺点。该问题是由说明书中所公开的方法解决的。说明书中公开了利用这些方法的对应的设备。
8、本发明改进了专利申请ep 2665208 a1中描述的hoa声场表示压缩过程。首先,像ep 2665208 a1中描述的,针对主导声源的存在对hoa表示进行分析,估计所述主导声源的方向。利用主导声源方向的信息,将hoa表示分解为多个表示大体平面波的主导定向信号和残余分量。然而,将该残余hoa分量的阶变换到离散空间域,而不是立即降低该残余hoa分量的阶,以便获得在表示残余hoa分量的均匀采样方向处的大体平面波函数。此后,根据主导定向信号预测这些平面波函数。该操作的原因在于,残余hoa分量的一部分可能与主导定向信号高度相关。
9、所述预测可以是简单的预测,从而只产生少量的辅助信息。在最简单的情况下,预测由适当的缩放和延时组成。最后,预测误差变换回hoa域,并且当作残余环境hoa分量,针对所述残余环境hoa分量执行阶降低。
10、有利的是,从残余hoa分量中减去可预测的信号的效果是减小其总功率并且保持主导定向信号的数量,并且通过这种方式来减少由于阶降低导致的分解误差。
11、在原则上,本发明的压缩方法适用于压缩声场的高阶立体混响(表示为hoa)表示,所述方法包括以下步骤:
12、-根据hoa系数的当前时帧,估计主导声源方向;
13、-基于所述hoa系数并且基于所述主导声源方向,将所述hoa表示分解为时域中的主导定向信号和残余hoa分量,其中所述残余hoa分量变换到离散空间域,以便在表示所述残余hoa分量的均匀采样方向处获得平面波函数,并且其中所述平面波函数是根据所述主导定向信号预测的,由此提供描述所述预测的参数,并且对应的预测误差变换回hoa域;
14、-将所述残余hoa分量的当前阶降低到更低的阶,得到降阶残余hoa分量;
15、-对所述降阶残余hoa分量进行去相关,以获得对应的残余hoa分量时域信号;
16、-对所述主导定向信号和所述残余hoa分量时域信号进行感知编码,从而提供压缩的主导定向信号和压缩的残余分量信号。
17、原则上,本发明的压缩设备适用于压缩声场的高阶立体混响(表示为hoa)表示,所述设备包括:
18、-适于根据hoa系数的当前时间帧来估计主导声源方向的装置;
19、-适于基于所述hoa系数并且基于所述主导声源方向,将所述hoa表示分解为时域中的主导定向信号和残余hoa分量的装置,其中所述残余hoa分量变换到离散空间域,以便在表示所述残余hoa分量的均匀采样方向处获得平面波函数,并且其中所述平面波函数是根据所述主导定向信号预测的,由此提供描述所述预测的参数,并且对应的预测误差变换回hoa域;
20、-适于将所述残余hoa分量的当前阶降低到更低的阶,得到降阶残余hoa分量的装置;
21、-适于对所述降阶残余hoa分量进行去相关,以获得对应的残余hoa分量时域信号的装置;
22、-适于对所述主导定向信号和所述残余hoa分量时域信号进行感知编码,从而提供解压缩的主导定向信号和解压缩的残余分量信号的装置;
23、原则上,本发明的解压缩方法适用于解压缩根据上述压缩方法压缩的高阶立体混响表示,所述解压缩方法包括以下步骤:
24、-对所压缩的主导定向信号和所压缩的残余分量信号进行感知解码,从而提供解压缩的主导定向信号和表示空间域中的残余hoa分量的解压缩的时域信号;
25、-对所述解压缩的时域信号进行重新相关,来获得对应的降阶残余hoa分量;
26、-将所述降阶残余hoa分量的阶增大到原始的阶,从而提供对应的解压缩残余hoa分量;
27、-使用所述解压缩主导定向信号、所述原始阶解压缩残余hoa分量、所述估计的主导声源方向和描述所述预测的所述参数来组成对应的hoa系数的解压缩且重新组成的帧。
28、在原则上,本发明的解压缩设备适于解压缩根据上述压缩方法压缩的高阶立体混响表示,所述解压缩设备包括:
29、-适于对所压缩的主导定向信号和所压缩的残余分量信号进行感知解码,从而提供解压缩的主导定向信号和表示空间域中的残余hoa分量的解压缩的时域信号的装置;
30、-适于对所述解压缩的时域信号进行重新相关,以获得对应的降阶残余hoa分量的装置;
31、-适于将所述降阶残余hoa分量的阶增大到原始的阶,从而提供对应的解压缩的残余hoa分量的装置;
32、-适于通过使用所述解压缩的主导定向信号、所述原始阶解压缩的残余hoa分量、所述估计的主导声源方向和描述所述预测的所述参数,来组成对应的hoa系数的解压缩且重新组成的帧的装置。
33、在对应的从属权利要求中公开了有利的附加实施例。
本文地址:https://www.jishuxx.com/zhuanli/20240618/21103.html
版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌抄袭侵权/违法违规的内容, 请发送邮件至 YYfuon@163.com 举报,一经查实,本站将立刻删除。
下一篇
返回列表