通过 Fraunhofer沉浸式声像定位器制作基于对象的实时三维声

Fraunhofer IDMT 与 Fraunhofer IIS 联合开发了 Fraunhofer 沉浸式声像定位器,结合传统制作工具,实现在直播应用中制作三维声节目

无论是面向广播还是流媒体,实时制作音频内容不仅需要专业知识,还需要绝对可靠且不受干扰的设备。但并非现场制作中的每个调音台都集成了三维声制作所需的声像定位器(3D panner)。为了让仅配备立体声或 5.1 环绕声制作调音台的广播公司能够制作三维声内容,Fraunhofer IIS 和 Fraunhofer IDMT 联合开发了 Fraunhofer沉浸式声像定位器 (FIP)。它基于 Fraunhofer IDMT 成熟的空间声波技术,即基于对象的音响系统的制作与还放技术,主要应用于剧院和娱乐场所。Fraunhofer IIS 和 Fraunhofer IDMT 将该系统适配现场直播的内容制作,其中涉及了对用户界面进行改进,并添加相应接口到现有的制作设备中。

灵活的模块化解决方案

FIP 由灵活的硬件解决方案组成,具有多种音频接口选项,支持 MADI 以及支持IP (AoIP)接口。它能够对多达 64 个音频对象进行3D声像定位( 3D panning)并将其渲染到多达 32 个输出通道。可以为沉浸式扬声器系统或针对立体声耳机的双耳渲染制作音频对象。用户可以在3D声像定位器(3D panner)中创建各种扬声器配置,也可以根据需求自定义预设。这意味着除了标准 5.1 之外,FIP 还支持在现场制作中创建 5.1 + 2H、5.1 + 4H 或 22.2 等三维声格式。高级设置选项,例如设定自适应低音管理或叠加压限器在输出声道中,能够实现实时制作三维声混音。基于浏览器的直观用户界面不受平台限制,其模块化结构意味着它可以灵活地适应个性化需求和满足特殊节目制作。此外,该系统可以在任何终端设备上操作。例如,通过平板电脑访问 FIP 会显示具有多点触控功能的用户界面。由于 FIP 可以通过 IP 和 Web 界面远程操作,因此允许多名制作人同时、异地进行三维声混音的共享制作。该特点也顺应了新冠疫情期间远程制作需求增长的趋势。异地混音制作将有助于保持现场员工之间的距离并降低差旅预算。

操作简单优化调整

结合 MPEG-H 音频制作与监听单元,三维声可以变成一个完全可定义的、基于对象的交互式 MPEG-H 音频场景。在用户界面端,三维声的呈现遵从制作人的定义。制作团队能够创建和定位单个音频对象,这些单独的对象或它们的组合可以被标注声音属性以及分配单独的图标和颜色。这使得跟踪单个演员或团体的音频变得更加容易,即使在复杂的制作中亦是如此。制作团队可以在录制之前创建、保存和调用所有设置。在直播期间,音频对象可以在三维空间中移动,并使用创新的设想进行定位,进而实现通过跟踪舞台动态来创造高度逼真的聆听体验。固定某些参数是对于制作团队非常有用的功能,例如音频对象与地面的距离。通过上述方式,FIP可以在现有制作设备上实现三维声内容的制作。

This post is also available in: Deutsch English