VR元年剛剛到來(lái)，但Fraunhofer IIS已經(jīng)準(zhǔn)備了很多年

?

3 月 24 日，2016 年中國(guó)國(guó)際廣播電視信息網(wǎng)絡(luò)展覽會(huì)（CCBN）在北京拉開帷幕，來(lái)自德國(guó)的音頻和多媒體技術(shù)研究機(jī)構(gòu) Fraunhofer IIS 在大會(huì)上展示了成功為全球半數(shù)電視機(jī)提供環(huán)繞聲的主流音頻技術(shù) HE-AAC，賦予用戶更多智能選擇權(quán)利并帶來(lái)引人入勝的 3D 聲音盛宴的未來(lái)電視音頻標(biāo)準(zhǔn) MPEG-H，以及能夠?yàn)樘摂M現(xiàn)實(shí)設(shè)備帶來(lái)卓越音頻體驗(yàn)的 Fraunhofer Cingo 技術(shù)。

對(duì)于 Fraunhofer IIS，有些人可能略感到陌生。其實(shí)，從 90 年代 mp3 音頻格式誕生開始，我們就一直沒有離開過(guò) Fraunhofer IIS 的支持。沒錯(cuò)，F(xiàn)raunhofer IIS 就是 mp3 技術(shù)、H.264 視頻編解碼技術(shù)以及白光 LED 技術(shù)的發(fā)明者。

mp3 技術(shù)的主要發(fā)明者，AAC（高級(jí)音頻編碼）技術(shù)的聯(lián)合開發(fā)者

不過(guò)，F(xiàn)raunhofer IIS 并不是一家技術(shù)企業(yè)，而是德國(guó)的一所大型研究機(jī)構(gòu)，同時(shí)也是目前歐洲最大的研究機(jī)構(gòu)，來(lái)自弗勞恩霍夫應(yīng)用研究促進(jìn)協(xié)會(huì)（Fraunhofer-Gesellschaft）的一個(gè)分支部門。Fraunhofer IIS 總部位于德國(guó)埃爾蘭根，在 40 個(gè)不同地方設(shè)有 67 個(gè)研究院，擁有超過(guò) 24,000 名員工，年度研發(fā)預(yù)算高達(dá) 21 億歐元。

迄今為止，F(xiàn)raunhofer IIS 在音頻編解碼領(lǐng)域已經(jīng)擁有超過(guò) 25 年的經(jīng)驗(yàn)，超過(guò) 1000 家公司在使用 Fraunhofer IIS 的授權(quán)許可軟件，全球超過(guò) 80 億臺(tái)的設(shè)備部署了 HE-AAC 技術(shù)?？梢哉f(shuō)，F(xiàn)raunhofer IIS 已經(jīng)成為了通過(guò)低比特率傳輸高質(zhì)量音頻的編碼和信號(hào)處理領(lǐng)域的權(quán)威機(jī)構(gòu)其發(fā)明的 mp3 和 AAC 音頻編解碼技術(shù)在移動(dòng)多媒體系統(tǒng)中無(wú)處不在。

目前，F(xiàn)raunhofer IIS 最引人關(guān)注的全新技術(shù)包括：提供虛擬環(huán)繞音效的 Fraunhofer Cingo、打造車載 3D 音頻的 Fraunhofer Symphoria、為電話通話帶來(lái) CD 般音質(zhì)的 AAC-ELD 及 EVS，以及讓電視觀眾能夠隨意調(diào)整節(jié)目的背景音量，并享受多維度交互沉浸式音效的 MPEG-H 技術(shù)。

有了沉浸式音頻，VR 設(shè)備的極致體驗(yàn)就成功了一半

Fraunhofer 集成電路研究所（IIS）亞太區(qū)市場(chǎng)及業(yè)務(wù)發(fā)展總監(jiān) Toni Fiedler 表示，下一代廣播電視音頻將是互動(dòng)及沉浸式聲音的時(shí)代，而沉浸式音頻能夠?yàn)?VR 設(shè)備帶來(lái)極致的體驗(yàn)。

德國(guó) Fraunhofer 集成電路研究所（IIS）亞太區(qū)市場(chǎng)及業(yè)務(wù)發(fā)展總監(jiān) Toni Fiedler

那么，沉浸式音頻究竟對(duì)虛擬現(xiàn)實(shí)設(shè)備有多重要？

Toni Fiedler 解釋說(shuō)，沉浸式音頻能夠營(yíng)造出至少 50%的虛擬現(xiàn)實(shí)體驗(yàn)。試想一下，如果聲音畫面不匹配，那么虛擬效果將瞬間消失。所以，音視頻之間的脫節(jié)問(wèn)題非常值得關(guān)注，只有聲音處理得當(dāng)，用戶才能夠真正領(lǐng)略身臨其境的虛擬現(xiàn)實(shí)體驗(yàn)。目前，針對(duì) VR 音頻面臨的 3D 聲音捕獲、后期制作、傳輸、還放這四大技術(shù)挑戰(zhàn)，F(xiàn)raunhofer IIS 其實(shí)已經(jīng)做足了多年的技術(shù)積累，可以分別提供了沉浸式聲音捕獲、數(shù)字音頻工作站、HE-AAC 和 MPEG-H、Fraunhofer Cingo 技術(shù)來(lái)應(yīng)對(duì)四大挑戰(zhàn)。

Fraunhofer 集成電路研究所（IIS）音頻和多媒體營(yíng)銷傳播總監(jiān) Matthias Rose 向媒體介紹，F(xiàn)raunhofer VR 音頻制作工具可以實(shí)現(xiàn)在虛擬空間中動(dòng)態(tài)放置基礎(chǔ)聲道（5.1 聲道和 7.1 聲道）和聲音對(duì)象，而 MPEG HE-AAC 技術(shù)可以高效傳輸高質(zhì)量的立體聲或者 5.1 環(huán)繞聲，目前已經(jīng)廣泛應(yīng)用并免費(fèi)提供給 VR 應(yīng)用開發(fā)者使用，包括安卓手機(jī)、平板及 iOS、Chromecast、Android TV、Fire TV、Windows 桌面、手機(jī)、Mac OS X 以及大多數(shù) HTML5 網(wǎng)頁(yè)瀏覽器。

德國(guó) Fraunhofer 集成電路研究所（IIS）音頻和多媒體營(yíng)銷傳播總監(jiān) Matthias Rose

Matthias Rose 解釋說(shuō)，真實(shí)的沉浸式聲景對(duì)于任何 VR 設(shè)備都是至關(guān)重要的，而它也成為了營(yíng)造完美虛擬現(xiàn)實(shí)體驗(yàn)的決定性因素之一。Cingo 技術(shù)的工作原理是結(jié)合頭部運(yùn)動(dòng)計(jì)算還放 3D 音頻內(nèi)容，從而為聽眾營(yíng)造了一個(gè)能夠從各個(gè)方向感知聲音的 3D 空間。

Matthias Rose 強(qiáng)調(diào)，憑借 Fraunhofer Cingo 技術(shù)，平板電腦和智能手機(jī)將能夠播放真正的 3D 聲音盛宴，包括憑借立體聲揚(yáng)聲器或頭戴式耳機(jī)享受卓越的環(huán)繞聲或 3D 聲音聽覺體驗(yàn)、響度優(yōu)化功能能夠?qū)F(xiàn)有的立體聲內(nèi)容變的更為自然和清晰。此外，Cingo 還能夠支持頭部追蹤并且在任何方位和距離對(duì)音頻對(duì)象進(jìn)行還放。

?

?

在美國(guó)阿斯彭（CO）舉辦的冬季極限運(yùn)動(dòng)項(xiàng)目中捕獲 3D 聲音

?

Fraunhofer VR 音頻制作工具

3D audio 加上高度信息 (更多的聲道及音頻對(duì)象) 能夠顯著提升聲場(chǎng)的現(xiàn)實(shí)感

據(jù)悉，F(xiàn)raunhofer Cingo 作為一款即用型軟件，已全面面向移動(dòng)設(shè)備生產(chǎn)商、芯片供應(yīng)商和多媒體服務(wù)供應(yīng)商開放。目前已經(jīng)被 Google Nexus 手機(jī)和平板、Samsung Gear VR、LG 360 VR 所采用，同時(shí) Google Play Movies、Korean Telecom、SK Telecom 及 LG U+等服務(wù)提供商也在通過(guò) Cingo 實(shí)現(xiàn)視頻流媒體。

觀眾現(xiàn)場(chǎng)體驗(yàn) Fraunhofer Cingo 技術(shù)支持的 VR 設(shè)備

賦予用戶更多選擇權(quán)利的未來(lái)電視音頻標(biāo)準(zhǔn)－MPEG-H

據(jù)介紹，MPEG-H 音頻系統(tǒng)專門為未來(lái)廣播電視和流媒體設(shè)備而設(shè)計(jì)，它能夠?qū)崿F(xiàn)基于對(duì)象的沉浸式音頻效果。通過(guò) MPEG-H，用戶能夠根據(jù)自己的喜好調(diào)節(jié)混音并且顯著提升聲音的真實(shí)性和感染力。同時(shí)，MPEG-H 能夠根據(jù)不同的設(shè)備和環(huán)境定制最佳的聲音還放，進(jìn)而提供“通用傳輸”。

此外，MPEG-H 音頻標(biāo)準(zhǔn)還是 Cingo 3D 音頻還放的最佳拍檔，它能夠在當(dāng)今傳輸 2D 環(huán)繞聲使用的比特率下為移動(dòng)設(shè)備傳輸身臨其境的沉浸式 3D 聲音。除了音頻聲道，MPEG-H 還可以傳遞音頻對(duì)象以及高階高保真環(huán)繞立體聲信號(hào)。

Toni Fiedler 總結(jié)到，智能廣電已演變?yōu)槲磥?lái)廣播電視服務(wù)的主流趨勢(shì)，用戶期待更多的選擇權(quán)利以及更加真實(shí)的音頻內(nèi)容。能夠?qū)?Fraunhofer IIS 的下一代音頻技術(shù)引入中國(guó)，加速中國(guó)智慧廣電的發(fā)展勢(shì)并為中國(guó)用戶帶來(lái)更為極致的電視和流媒體音頻體驗(yàn)，我們深感榮幸。

與非網(wǎng)版權(quán)所有，請(qǐng)勿轉(zhuǎn)載

更多有關(guān) VR 的資訊，歡迎訪問(wèn) 與非網(wǎng) VR 技術(shù)專區(qū)