Fraunhofer upHear语音质量增强技术助力Mail.ru首款智能扬声器实现远场语音指令和通话功能 – Fraunhofer Audio Blog
© Mail.ru

Fraunhofer upHear语音质量增强技术助力Mail.ru首款智能扬声器实现远场语音指令和通话功能

全双工通信使用户可通过Capsula智能音箱进行语音通话

Mail.ru集团是俄罗斯大型线上服务提供商,拥有该地区最受欢迎的VKontakte和Odnoklassniki社交网络。近日,Mail.ru推出其首款智能音箱: Capsula。Fraunhofer upHear语音质量增强技术(VQE)令设备获得最优质的麦克风信号,并提供干净的语音信号给Mail.ru语音助手Marusia,且让该智能音箱支持远场语音通话。

在通信模式中,Fraunhofer upHear VQE的全双工通信功能确保语音呼叫中的会话伙伴始终享受最佳音频质量。该功能通过回声、混响和噪音消除来实现,即使用户与智能音箱之间的距离产生变化仍能确保感知响度不发生变化。

在智能助手模式下,upHear VQE提供的优质音频使Marusia能够准确地听到来自房间任何地方的语音指令。该技术通过消除远场操作的干扰声和音箱自身信号的回声,实现了语音插入功能。因此,不论指令从房间的哪个位置发出,即使是在智能音箱播放音乐时,关键字定位器和语音识别器都会接收到干净的音频信号。

关于Fraunhofer upHear语音质量增强技术

Fraunhofer upHear VQE能够处理麦克风信号,令通信设备在全频带下实现远场全双工对话,还令设备在播放音乐时也能完成语音插入和远场语音命令。这一切是通过结合先进的多通道声学回声抵消、声源定位、降噪、去混响、自动增益控制和波束赋形等手段而实现。该技术适用于很多应用场景,包括移动和智能助手设备的自然语言理解,以及会议解决方案。upHear VQE的灵活性使其可被用于移动电话和智能助手设备(如智能音箱、Soundbar、摄像头和电视)中的麦克风阵列,还可以针对设备实际计算资源情况来灵活调整配置。upHear VQE可用于单声道、立体声、环绕声以及沉浸声设备中。

Header image © Manuela Wamser – Fraunhofer IIS

This post is also available in: English

关注我们