2017年9月14日--在2017年IBC期间,世界知名的音频及媒体技术研究机构Fraunhofer IIS与法国超媒体创新机构b<>com技术研究所联合展示了基于国际沉浸式音频标准MPEG-H中HOA技术的端到端空间音频制作、传输、还放以及渲染系统。由整套工具生产的首个虚拟现实内容是由法国VR工作室DVGroup制作的VR情景喜剧《Vaudeville》。在虚拟现实产业论坛(VRIF)准则草案的规范下,该内容成功传输至VR头戴设备。
VRIF致力于实现高质量虚拟现实内容的生产和交付,同时十分重视其在开放生态系统中的互操作性。虽然VRIF不是一个标准开发组织,但其成员倡导为高质量的视听虚拟现实服务创建一个可互操作的端到端生态系统。在2017年IBC期间,VRIF将发布VR准则草案,而Fraunhofer IIS和b<>com则将联合展示第一个基于该准则草案的虚拟现实内容。草案链接:http://www.vr-if.org/guidelines/。
在IBC期间展示的虚拟现实内容通过三星Gear VR头戴设备呈现,并为观众带来身临其境的娱乐体验。该内容通过b<>com空间音频工具箱进行HOA格式的混音制作,并遵循基于由Fraunhofer IIS主导研发的MPEG-H 3D音频技术的VRIF 3D音频基本规范。从技术角度来讲,该3D音频基本规范是MPEG规定的全向媒体格式(OMAF)的一部分。
MPEG-H音频是一个真正全面的音频编解码系统,它能够传输通道式音频、ambisonics以及带有元数据的音频对象,并使用户在创建互动式和沉浸式音频体验的过程中拥有最大的自由度。目前,MPEG-H电视音频系统已经成功在韩国的UHD广播电视网络中正式商用,它也是ATSC 3.0和 DVB-UHD电视标准的一部分,且适用于OTT内容。MPEG-H的先进性能包括:
• 沉浸式声音:MPEG-H包含的3D音频组件能够带来沉浸式声音体验。
• 互动式音频:用户可以根据自身需求调整混音比例
• 通用传输:MPEG-H能够在任何环境和设备上呈现最佳还放效果
为了让VR还放系统端的集成工作变得更加简单,Fraunhofer IIS为其提供了VR音频SDK,从而使其拥有解码MPEG-H 3D音频的能力以及最佳的音频渲染效果,进而打造优质的VR体验。而b<>com空间音频工具箱则是全球顶尖的HOA音频前期和后期制作解决方案。
b<>com超媒体领域负责人 Ludovic Noblet表示:“HOA(基于场景的音频)格式是打造身临其境的VR体验的关键所在。能够与DVGroup和Fraunhofer强强联手,并向公众首次展示遵循VRIF准则草案的端到端生态系统及内容,我深感荣幸。”
Fraunhofer USA数字媒体技术新媒体业务高级总监,Jan Nordmann表示:“与b<>com合作开发基于MPEG-H音频的端到端VR音频系统是一个非常好的集体创新案例。更重要的是,DVGroup能够通过该系统成功将其作品的沉浸体验带入一个前所未有的新高度。”
DVGroup的François Klein表示:“我们鼓励作者使用空间音频技术来诠释他们的故事。本次关于《Vaudeville》的合作旨在将360度3D体验提升至业界顶尖水平,而b<>com开发的空间音频工具很好地提供了日常360-VR内容中普遍欠缺的空间感。得益于Fraunhofer的支持,我们终于能够为用户带来真正的沉浸式音频体验。”
在2017年9月15日至19日举办的阿姆斯特丹IBC展会期间,与会观众能够在8号馆G14的b<>com展位和8号馆B80的Fraunhofer展位体验带有MPEG-H沉浸式音频效果的《Vaudeville》 VR内容。
关于 Fraunhofer
Fraunhofer IIS音频及媒体技术部门致力于音频领域的研究长达25年之久,作为该领域权威机构,Fraunhofer IIS是mp3技术的发明者和AAC(高级音频编码)技术的联合开发者。目前,Fraunhofer IIS媒体技术已经遍布于全球超过100亿台设备中,并且每年拥有超过10亿台新增授权设备。除了在全球范围内久负盛名的mp3 和AAC技术以外,Fraunhofer还拥有系列音频体验增强技术,其中包括:Cingo®(空间VR音频)、Symphoria®(车载3D音频)、 xHE-AAC (自适应流媒体和数字广播)、3GPP EVS VoLTE编解码器(全高清语音通话)以及能够带来互动式和沉浸式音频的MPEG-H电视音频系统。
凭借撰写数字电影领域的DCI(数字影院促进会)验证测试方案,以及开发全球广泛应用的 easyDCP软件解决方案, Fraunhofer IIS在电影数字化进程中做出了巨大的贡献。而动态图像技术领域的最新研究成果是光场数据处理工具:Realception®。
Fraunhofer-Gesellschaft是目前欧洲最大的研究机构,Fraunhofer IIS是其69个研究部门中的一个,总部位于德国埃尔兰根。
关于b<>com
凭借强大的研发和创新能力, (IRT) b<>com始终致力于为欧洲数字化变革做出贡献。b<>com拥有230名研究人员,开发了许多能够让日常生活变得更为简单的工具、产品和服务。他们专注于两个领域的研究: 超媒体(超高清图像,3D声音,智能内容,虚拟和增强现实)和更敏捷的超高速网络(云,网络安全,超高速移动,网络弹性以及物联网)。在众多技术应用领域中,e – health让b < > com成功参与到药物的数字革命中。官网:https://b-com.com/en