Fraunhofer IIS創(chuàng)新音頻技術讓沉浸式聲音靠近生活

隨著科技的進步，人們對于音視頻的要求不再僅僅只看得見和聽得到，而更加追求視覺和聽覺的雙重享受，追求那種身臨其境的感覺，也就是我們常提到的沉浸式體驗。而要達到沉浸式體驗，音頻的效果至關重要。

沉浸式音頻技術近年來逐漸擴大其應用范圍，迅速發(fā)展到固定裝置、廣播，甚至現(xiàn)場演出等領域里。2018 年 6 月 28 日，世界著名的音頻及媒體技術研究機構 Fraunhofer IIS 在 2018 年上海世界移動大會（MWC SH）上展示了能夠為移動和家庭用戶帶來極致音頻體驗的系列技術：為廣播電視和 OTT 領域打造沉浸式和互動式音效的 MPEG-H 電視音頻系統(tǒng)，通過一個 3D 條形音箱營造家庭端影院級音效的沉浸式音頻虛擬器 upHear，為手機用戶帶來全高清語音通話質(zhì)量的增強型語音編解碼器 EVS 技術, 以及為數(shù)字廣播和移動流媒體應用帶來卓越音頻解決方案的 xHE-AAC 技術。

MPEG-H Audio——下一代交互及沉浸式音頻系統(tǒng)

隨著 MPEG-H 成功集成于 ATSC3.0 和 DVB 標準，并于 2017 年 5 月起應用于韓國基 ATSC 3.0 的全新地面超高清電視系統(tǒng)中，MPEG-H 技術成為了全球首個成功商用的下一代廣播電視音頻技術。今年 3 月，基于 MPEG-H 技術的 Fraunhofer 技術提案入選入選中國廣電三維聲傳輸段標準草案。目前，搭載了 MPEG-H 技術的專業(yè)廣電設備（編碼器、解碼器和監(jiān)聽解決方案）和消費電子產(chǎn)品（家用機頂盒和電視機）已經(jīng)先后問世。

Fraunhofer 工作人員指出，MPEG-H Audio 系統(tǒng)能夠帶來身臨其境的沉浸感并賦予用戶選擇的權利，用戶可以切換不同的音頻預設以及調(diào)節(jié)對白音量，在家庭影院、智能手機、平板電腦還是虛擬現(xiàn)實設備上都能傳遞最佳的聲音體驗。

俄羅斯世界杯期間，韓國 SBS 電視臺通過基于 ATSC 3.0 標準的超高清視頻技術直播該項賽事，由 Fraunhofer 主導研發(fā)的 MPEG-H 電視音頻系統(tǒng)的高級功能為用戶帶來沉浸式和交互式音頻體驗。SBS 的觀眾成為全球范圍內(nèi)首批在常規(guī)電視節(jié)目中享受沉浸式 3D 音頻和個性化音頻體驗的用戶。他們除了能夠選擇適合自己的音頻預設以外，通過 MPEG-H 的對白增強功能還可以根據(jù)自身需求優(yōu)化對白混音效果，該功能也將幫助聽力障礙人士更好地理解節(jié)目內(nèi)容。

Fraunhofer IIS 中國區(qū)業(yè)務代表 Toni Fiedler 先生表示：“目前，我們正在與 CCTV 團隊緊鑼密鼓地開展 2018 年俄羅斯世界杯期間中國三維聲音頻實時信號的測試工作，從而驗證草案標準在實際直播過程中的可行性。與此同時，我們也在探討如何將全新音頻技術更好地通過新媒體應用呈獻給更為廣泛的觀眾群體。我們期待著中國三維聲標準在不久的將來能夠順利發(fā)布，并盡快為中國用戶帶來下一代音頻體驗?！?/p>

Fraunhofer IIS 中國區(qū)業(yè)務代表 Toni Fiedler 先生

?

upHear 讓單個條形音箱營造沉浸式影院音效

Fraunhofer upHear 沉浸式音頻虛擬器是與編碼器無關的音頻后處理器技術，它能夠集成于條形音箱和電視機等大眾消費電子設備中，為用戶帶來真實且具有包容感的 3D 聲音。Fraunhofer upHear 具有以下特征：

·根據(jù)具體硬件設計而優(yōu)化的沉浸式音頻還放；

·與音頻編碼器無關的音頻后處理技術，原生支持 MPEG-H 內(nèi)容；

·支持傳統(tǒng)內(nèi)容立體聲和環(huán)繞聲內(nèi)容的上混；

·為嵌入式系統(tǒng)設計的優(yōu)化目標代碼庫（例如：ADI 和 TI DSPs）。

憑借 Fraunhofer upHear 沉浸式音頻虛擬器，用戶可以在家中通過一個條形音箱享受影院般真實的沉浸式和互動式音效。在未來，支持 MPEG-H 解碼的移動設備和 OTT 應用也能夠帶來同樣真實的聽覺盛宴。

在 MWC 現(xiàn)場，觀眾們在 Fraunhofer 切實地感受到了 upHear 沉浸式音頻虛擬器的魅力，不管是音樂、電影、電視劇和普通音頻，都可以感受到那種身臨其境的感覺。

除了體驗，我們還在現(xiàn)場看到了基于 Fraunhofer upHear 打造的智能音箱 demo——Yandex.IO。Yandex 實驗產(chǎn)品總監(jiān) Konstantin Kruglov 此前曾表示：“我們在 Yandex.IO 遠場麥克風陣列技術上測試了多種語音增強解決方案，最終發(fā)現(xiàn) FraunhoferupHear 技術能夠最有效地幫助 Alice 實現(xiàn)從智能手機到智能家居應用的轉(zhuǎn)型。不論你是站在設備前方、房間角落亦或是在糟糕的聲學條件下，Alice 都能聽清你的口令。”

xHE-AAC 為流媒體和數(shù)字廣播提升音頻質(zhì)量

xHE-AAC 是 MPEG AAC 音頻編解碼器的最新版本，它的加入使 AAC 系列編解碼器的立體聲傳輸碼率適用范圍得到進一步拓展，從低至 12 kbit/s 直至 300 kbit / s，從而讓視頻點播(SVOD)和流媒體音樂提供商在網(wǎng)絡狀況不佳或 2G/3G 網(wǎng)絡下也能為消費者帶來優(yōu)質(zhì)可靠的體驗。此外，MPEG-D DRC 為 xHE-AAC 帶來的強制響度控制功能能夠確保用戶收聽到音量一致的還放內(nèi)容，其提供的動態(tài)范圍控制配置文件能夠確保用戶在嘈雜環(huán)境中享受優(yōu)質(zhì)的聆聽體驗。

目前，Android P 原生支持 Fraunhofer xHE-AAC 音頻編解碼器，開發(fā)人員能夠立即在 Android P 全新的 FDK API 中運用這些新功能。