我们常说,距离产生延时,而在模拟音频大举转向数字音频、网络音频的,网络信号的延迟也为音频领域赋予了新的现象,尤其应用在远程会议这样的音频传输系统当中,它能将一次次回授剥离成一次次听似回声的现象,这就是网络音频回声。该图片经我司设计员制作后作者再编辑通常由A地发出的声源A在几乎不经过延迟处理的本地系统中,通过A地音箱扩声;而其经过网络终端编码送向远端时,除了考虑A地的上传时间X,还得考虑B地的下载时间Y。在这样一个架构在Internet网络传输环境中的声音,其到达B地扩声音箱出来的信号则是A+X+Y。经B地本地话筒拾取后的该信号,再由B地的上传网速(时间)Z、A地的下载时间W传送回A地扩声音箱,其表现出的信号则会出现一次A信号,及一次赋予了(X+Y+Z+W)时间的A信号。假设A地—B地传输时间总和为200ms,B地—A地传输时间总和为200ms,则信号的一去一回,体现在A扩声音箱中至少会存在A和A+400ms的信号,若反馈信号电平足够强,则再被话筒拾取,这将不止产生一次的回声,而是多次规律的回声现象。该图片来源于Motivity产品DP处理器AEC调试界面AEC即AcousticEchoCancellation(声学回声消除)技术简称。
搜索“声学回声消除”的相关文献,一共找到了3402篇。上海电脑声学回声噪声
AEC定义声学回声(AcousticEcho)电话的扬声器的声音(包括反射声),被麦克风拾取传送给远端,使得远端说话人又听到自己的声音,广义回声指的是设备喇叭和自身麦克风的耦合现象都称为回声。回声消除AEC(AcousticEchoCancellation)一般指的是声学回声消除,其主要用于抑制产品本身发出的声音,使得产品在播放音频时依然可以进行语音交互;随着秒新月异的科技发展,各项技术成果不断地应用在我们日益拓展的各领域需求当中,刷新着我们的生活和工作。地球村的崛起,不断以互联网、物联网等方式揭示着万物相连的关系。无论是飞机、高铁还是电话、网络,都成为托起地球新村时空纵横的重要载体。怎样拉近人与人之间的关系,如何建立起更行之有效的联络方式,提高远程协同工作、信息传达效率成为了一个重要命题。远程会议的出现在很大程度上为这种多极化办公互动提供了质量的平台保障,在借助互联网便捷的远程通信架构下,通讯数据安全,稳定可靠,很长一段时间广受用户青睐。然而美中不足的是,这样的(声音)系统仍逃不出的还是自然声学上的问题。有和业内朋友聊天中谈到,今后的扩声系统也许只保留两级传统装置了,那就是声电转换和电声转换的拾音和还原。
上海电脑声学回声噪声非线性声学回声消除方面的资料非常少。
WebRtcAec_Process接口如上,参数reported_delay_ms为当前设备需要调整延时的目标值。如某Android设备固定延时为400ms左右,400ms已经超出滤波器覆盖的延时范围,至少需要调整300ms延时,才能满足回声消除没有回声的要求。固定延时调整在WebRTCAEC算法开始之初作用一次,为什么target_delay是这么计算?inttarget_delay=startup_size_ms*self->rate_factor*8;startup_size_ms其实就是设置下去的reported_delay_ms,这一步将计算时间毫秒转化为样本点数。16000hz采样中,10ms表示160个样本点,因此target_delay实际就是需要调整的目标样本点数(aecpc->rate_factor=aecpc->splitSampFreq/8000=2)。我们用330ms延时的数据测试:如果设置默认延时为240ms,overhead_elements次被调整了-60个block,负值表示向前查找,正好为60*4=240ms,之后线性滤波器固定index=24,表示24*4=96ms延时,二者之和约等于330ms。②大延时检测是基于远近端数据相似性在远端大缓存中查找相似的帧的过程,其算法原理有点类似音频指纹中特征匹配的思想。大延时调整的能力是对固定延时调整与线型滤波器能力的补充,使用它的时候需要比较慎重。需要控制调整的频率,以及控制造成非因果的风险。
运用声学处理来控制回声和混响,当有某个房间或建造一个录音棚时,如出现下述问题,就需要进行声学处理:(1)在墙边拍一下手,然后可听到颤动回声。这是由于声音在硬的平行墙面之间的来回撞击而产生的。(2)录音棚有非常活跃的环境,诸如像一个车库或是混凝土结构的地下室之类,可以听到很多的房间混响。(3)录音棚体积很小。(4)从录音作品中可以听到外界的噪声。(5)低音吉他放大器和音箱的声音有隆隆声。(6)缺乏在数英尺之外作不拾取噪声或不拾取过量房间混响的拾音的自由度。(7)在传声器信号中可听到大量的泄漏声。一些泄漏的例子,如吉他传声器拾取了鼓声,或是由于铙镲传声器拾取了电吉他的声音。如果有上述情况出现,则可按如下的建议来改善录音室的声学状况。混响和回声是由于房间表面的声音反射引起的,因此,强吸声的表面会有助于化解这些问题。高频吸收如要吸收高频,可使用诸如多孔的褶皱(凹凸不平的)的泡沫垫材料。这些材料是高可燃性的,所以,要作阻燃处理。把它们钉住或粘贴在墙面上,或者把它们固定在框架上。从效果上看,使用厚的泡沫材料要比薄的好。装在墙上的,这取决于声音撞击到泡沫材料上的角度。在泡沫材料嵌板之间要留有一些空隙。
我们把声学回声消除这个技术变成一张实体的插件(设备插卡),在系统中,为实现次回声过滤。
23.避免厅堂音质缺陷的方法主要是从厅堂的体形设计和吸声材料布置两方面入手,消除产生音质缺陷的条件。例如,为了消除回声,应在可能引起回声的部位布置强吸声材料,使反射声减弱经;另一种方法是调整反射面角度,将后墙与顶棚交接处作成比较大的倾角,将声音反射给后区观众,彻底消除回声,取得化害为利的效果。为了消除声聚集现象,应尽量控制厅堂界的曲面弧度,采用凸形结构,并在弧面上布置合适的吸音材料。为了消除音质缺陷,可根据厅堂内声源的位置。采用几何作图法,用声线的分布找出各种声缺陷的条件和部位,再采取必要的措施进行抑制。24.回声指强度和时间差大到足可以引起听觉将它与直达声区分开来的反射声。从单一声源产生的一连串可分辩的回声则叫多重回声,当室内两个界面之间距离大于一定数值,且吸声量不足时,在其中间声源发出的声音就可能产生多重回声。回声会影响听音注意力,影响声音的清晰度,破坏立体声聆听的声像定位效果。25.颤动回声当声源在平行界面或一平面与一凹面之间发生反射,界面距离大于一定数值时会出现颤动回声。发生颤动回声时,声音有连续的重叠声,并有颤抖的感觉。颤动回声会引起听力疲劳,使人感到厌烦。
双耦合声学回声消除算法的主要贡献体现在两个方面。河南智能音响声学回声抑制算法
什么是非线性声学回声,它产生的原理、研究现状以及技术难点等问题。上海电脑声学回声噪声
反映到听感上就是回声(远端判断成近端)或丢字(近端判断为远端)。(2)计算近端信号d(n)与估计的回声信号e(n)的相干性,如图5(b),第二行为估计的回声信号e(n),第三行为二者相干性cohde,很明显近端的部分几乎全部逼近,WebRTC用比较严格的门限(>=)即可将区分绝大部分近端帧,且误判的概率比较小,WebRTC工程师设置如此严格的门限想必是宁可一部分双讲效果,也不愿意接受回声残留。从图5可以体会到,线性滤波之后可以进一步凸显远端参考信号x(n)与估计的回声信号e(n)的差异,从而提高远近端帧状态的判决的可靠性。存在的问题与改进理想情况下,远端信号从扬声器播放出来没有非线性失真,那么e(n)=s(n)+v(n),但实际情况下e(n)与d(n)很像,只是远端区域有一些幅度上的变化,说明WebRTCAEC线性部分在这个case中表现不佳,如图6(a)从频谱看低频段明显削弱,但中高频部分几乎没变。而利用变步长的双滤波器结构的结果会非常明显,如图6(b)所示无论是时域波形和频谱与近端信号x(n)都有很大差异,目前aec3和speex中都采用这种结构,可见WebRTCAEC中线性部分还有很大的优化空间。如何衡量改进的线性部分效果?这里我们对比了现有的固定步长的NLMS和变步长的NLMS。近端信号d。
上海电脑声学回声噪声