VR元年剛剛到來，但Fraunhofer IIS已經(jīng)準備了很多年

?

3 月 24 日，2016 年中國國際廣播電視信息網(wǎng)絡展覽會（CCBN）在北京拉開帷幕，來自德國的音頻和多媒體技術研究機構 Fraunhofer IIS 在大會上展示了成功為全球半數(shù)電視機提供環(huán)繞聲的主流音頻技術 HE-AAC，賦予用戶更多智能選擇權利并帶來引人入勝的 3D 聲音盛宴的未來電視音頻標準 MPEG-H，以及能夠為虛擬現(xiàn)實設備帶來卓越音頻體驗的 Fraunhofer Cingo 技術。

對于 Fraunhofer IIS，有些人可能略感到陌生。其實，從 90 年代 mp3 音頻格式誕生開始，我們就一直沒有離開過 Fraunhofer IIS 的支持。沒錯，F(xiàn)raunhofer IIS 就是 mp3 技術、H.264 視頻編解碼技術以及白光 LED 技術的發(fā)明者。

mp3 技術的主要發(fā)明者，AAC（高級音頻編碼）技術的聯(lián)合開發(fā)者

不過，F(xiàn)raunhofer IIS 并不是一家技術企業(yè)，而是德國的一所大型研究機構，同時也是目前歐洲最大的研究機構，來自弗勞恩霍夫應用研究促進協(xié)會（Fraunhofer-Gesellschaft）的一個分支部門。Fraunhofer IIS 總部位于德國埃爾蘭根，在 40 個不同地方設有 67 個研究院，擁有超過 24,000 名員工，年度研發(fā)預算高達 21 億歐元。

迄今為止，F(xiàn)raunhofer IIS 在音頻編解碼領域已經(jīng)擁有超過 25 年的經(jīng)驗，超過 1000 家公司在使用 Fraunhofer IIS 的授權許可軟件，全球超過 80 億臺的設備部署了 HE-AAC 技術?？梢哉f，F(xiàn)raunhofer IIS 已經(jīng)成為了通過低比特率傳輸高質量音頻的編碼和信號處理領域的權威機構其發(fā)明的 mp3 和 AAC 音頻編解碼技術在移動多媒體系統(tǒng)中無處不在。

目前，F(xiàn)raunhofer IIS 最引人關注的全新技術包括：提供虛擬環(huán)繞音效的 Fraunhofer Cingo、打造車載 3D 音頻的 Fraunhofer Symphoria、為電話通話帶來 CD 般音質的 AAC-ELD 及 EVS，以及讓電視觀眾能夠隨意調整節(jié)目的背景音量，并享受多維度交互沉浸式音效的 MPEG-H 技術。

有了沉浸式音頻，VR 設備的極致體驗就成功了一半

Fraunhofer 集成電路研究所（IIS）亞太區(qū)市場及業(yè)務發(fā)展總監(jiān) Toni Fiedler 表示，下一代廣播電視音頻將是互動及沉浸式聲音的時代，而沉浸式音頻能夠為 VR 設備帶來極致的體驗。

德國 Fraunhofer 集成電路研究所（IIS）亞太區(qū)市場及業(yè)務發(fā)展總監(jiān) Toni Fiedler

那么，沉浸式音頻究竟對虛擬現(xiàn)實設備有多重要？

Toni Fiedler 解釋說，沉浸式音頻能夠營造出至少 50%的虛擬現(xiàn)實體驗。試想一下，如果聲音畫面不匹配，那么虛擬效果將瞬間消失。所以，音視頻之間的脫節(jié)問題非常值得關注，只有聲音處理得當，用戶才能夠真正領略身臨其境的虛擬現(xiàn)實體驗。目前，針對 VR 音頻面臨的 3D 聲音捕獲、后期制作、傳輸、還放這四大技術挑戰(zhàn)，F(xiàn)raunhofer IIS 其實已經(jīng)做足了多年的技術積累，可以分別提供了沉浸式聲音捕獲、數(shù)字音頻工作站、HE-AAC 和 MPEG-H、Fraunhofer Cingo 技術來應對四大挑戰(zhàn)。

Fraunhofer 集成電路研究所（IIS）音頻和多媒體營銷傳播總監(jiān) Matthias Rose 向媒體介紹，F(xiàn)raunhofer VR 音頻制作工具可以實現(xiàn)在虛擬空間中動態(tài)放置基礎聲道（5.1 聲道和 7.1 聲道）和聲音對象，而 MPEG HE-AAC 技術可以高效傳輸高質量的立體聲或者 5.1 環(huán)繞聲，目前已經(jīng)廣泛應用并免費提供給 VR 應用開發(fā)者使用，包括安卓手機、平板及 iOS、Chromecast、Android TV、Fire TV、Windows 桌面、手機、Mac OS X 以及大多數(shù) HTML5 網(wǎng)頁瀏覽器。

德國 Fraunhofer 集成電路研究所（IIS）音頻和多媒體營銷傳播總監(jiān) Matthias Rose

Matthias Rose 解釋說，真實的沉浸式聲景對于任何 VR 設備都是至關重要的，而它也成為了營造完美虛擬現(xiàn)實體驗的決定性因素之一。Cingo 技術的工作原理是結合頭部運動計算還放 3D 音頻內容，從而為聽眾營造了一個能夠從各個方向感知聲音的 3D 空間。

Matthias Rose 強調，憑借 Fraunhofer Cingo 技術，平板電腦和智能手機將能夠播放真正的 3D 聲音盛宴，包括憑借立體聲揚聲器或頭戴式耳機享受卓越的環(huán)繞聲或 3D 聲音聽覺體驗、響度優(yōu)化功能能夠將現(xiàn)有的立體聲內容變的更為自然和清晰。此外，Cingo 還能夠支持頭部追蹤并且在任何方位和距離對音頻對象進行還放。

?

?

在美國阿斯彭（CO）舉辦的冬季極限運動項目中捕獲 3D 聲音

?

Fraunhofer VR 音頻制作工具

3D audio 加上高度信息 (更多的聲道及音頻對象) 能夠顯著提升聲場的現(xiàn)實感

據(jù)悉，F(xiàn)raunhofer Cingo 作為一款即用型軟件，已全面面向移動設備生產商、芯片供應商和多媒體服務供應商開放。目前已經(jīng)被 Google Nexus 手機和平板、Samsung Gear VR、LG 360 VR 所采用，同時 Google Play Movies、Korean Telecom、SK Telecom 及 LG U+等服務提供商也在通過 Cingo 實現(xiàn)視頻流媒體。

觀眾現(xiàn)場體驗 Fraunhofer Cingo 技術支持的 VR 設備

賦予用戶更多選擇權利的未來電視音頻標準－MPEG-H

據(jù)介紹，MPEG-H 音頻系統(tǒng)專門為未來廣播電視和流媒體設備而設計，它能夠實現(xiàn)基于對象的沉浸式音頻效果。通過 MPEG-H，用戶能夠根據(jù)自己的喜好調節(jié)混音并且顯著提升聲音的真實性和感染力。同時，MPEG-H 能夠根據(jù)不同的設備和環(huán)境定制最佳的聲音還放，進而提供“通用傳輸”。

此外，MPEG-H 音頻標準還是 Cingo 3D 音頻還放的最佳拍檔，它能夠在當今傳輸 2D 環(huán)繞聲使用的比特率下為移動設備傳輸身臨其境的沉浸式 3D 聲音。除了音頻聲道，MPEG-H 還可以傳遞音頻對象以及高階高保真環(huán)繞立體聲信號。

Toni Fiedler 總結到，智能廣電已演變?yōu)槲磥韽V播電視服務的主流趨勢，用戶期待更多的選擇權利以及更加真實的音頻內容。能夠將 Fraunhofer IIS 的下一代音頻技術引入中國，加速中國智慧廣電的發(fā)展勢并為中國用戶帶來更為極致的電視和流媒體音頻體驗，我們深感榮幸。

與非網(wǎng)版權所有，請勿轉載

更多有關 VR 的資訊，歡迎訪問 與非網(wǎng) VR 技術專區(qū)