3D音頻是為VR全景內容提供沉浸感和臨場感的一個關鍵因素,所以我們有必要理解3D音頻格式,以及它們對音頻內容創建和渲染的應用。下面我們來看一下三種3D音頻格式,并分析Ambisonics對VR全景音頻的重要性。

1. 多聲道
在基于聲道的聲音表達中,信息單元是揚聲器。每個聲道與揚聲器相關聯,系統在幾個揚聲器上混合各種聲道來實現聲音表達。聲道越多,空間音效感就越強。基于聲道的聲音表達是過去50年,甚至更久遠時所采用的傳統聲音表達方式。立體聲,5.1,7.1格式是基于聲道的水平表示。通過增加額外的過頂揚聲器可以實現3D,如11.1格式(在7.1聲道的基礎上再增加4個天花板揚聲器)。
多聲道音頻表達的一個主要缺點是,它依賴于揚聲器設置,并且每個設置類型需要一個混合,而基于Object和Ambisonics的內容則獨立于揚聲器設置。
2. 基于Object的聲音表達
在基于Object的聲音表達中,信息單元是聲源。場景由幾個聲源及有關其位置和渲染環境等信息組成。系統通過在用戶位置計算所有聲源的組合來實現3D音頻渲染。但它同時需要使用大量的CPU資源。場景越復雜(聲源數量)和越逼真(混響精度),需要的CPU資源就越多。
3. Higher Order Ambisonics (HOA)
與上述兩種聲音表達形式不同,Ambisonics格式不依賴于單個聲源的描述,它能夠再現用戶位置的生成聲場。我們將用于描述聲場的數學形式稱為球面調和函數,而信息單位則是球面表示的組分數(或階數)。組分越多或者階數越高,你獲得的聲場空間呈現精度就越高。
這并不是什么新概念,它在過去幾十年間一直用于專業音效社區。他們將這種音域的獨立表達稱為B格式,而它實際上是第一階的Higher Order Ambisonics。
4. Ambisonics對VR全景而言是非常有吸引力的解決方案
谷歌和索尼等VR全景行業的主要廠商都在擁抱Higher Order Ambisonics(HBO)這個概念,并正在開發相應的商業應用,如將HOA作為默認音頻格式的YouTube360。這種選擇的背后存在幾個原因,最重要的是以下幾點:
它提供了最佳的3D音頻逼真感與計算資源平衡。對于B格式(第一階表達)的4聲道,你可以逼真地再現一個3D聲場,而Object的4通道或4揚聲器設置很難做到這一點。
它是一種層次結構,具備獨特的可擴展性。你可以選擇相應的空間精度水平來匹配平臺資源,如CPU負載和帶寬等等。當你希望提供高端PC或標準智能手機的內容,或者當你有可變帶寬來傳輸內容時,這非常方便。與基于Object的聲音表達相比,如果你沒有足夠的資源來處理完整內容,唯一可用的選項是不處理其中一些對象,而這會導致聲場的完整性發生變化(缺少信息) 。
對于錄制的3D音頻內容而言,Ambisonics是再現這種音效的最佳格式,因為真實的音頻世界最好是選擇聲場來表達,而非聲音對象的組合或揚聲器位置。
這對頭部追蹤十分友好。在球面調和函數域中,頭部運動將建模為聲場的旋轉,而這是非常簡單的操作。
它獨立于揚聲器設置:一個內容可以解碼成任何揚聲器布局。
與基于Object的聲音表達不同,Ambisonics保留了內容的完整性。當內容由聲音對象,位置和聲學參數組成時,最終用戶體驗取決于根據所有這些信息重建聲場的算法。在Ambisonics中,最終的用戶體驗是烘培至內容之中。
5. 總結
我們相信多聲道將逐漸成為不太適合VR音頻需求的傳統格式,而基于Obeject和Ambisonics才是VR所需的格式。我們對未來的看法是:
內容創建階段將主要采用聲音對象,將其作為交互式聲場創建的便捷方式,并將略微使用Ambisonics“導入”現實錄音。
諸如VR全景 360度這樣的“錄制”內容渲染將越來越多地選擇Ambisonics格式,因為其可擴展的特性使其非常適合廣泛的平臺。YouTube選擇Ambisonics已經說明了這一點。
對于VR全景游戲等交互式內容的渲染,基于Object的3D音頻格式非常有意義。但對于由眾多聲音對象組成的復合聲場而言,其渲染需要大量的計算,并需要大眾市場所不一定能提供的資源。就這個問題,我們可以將基于Object的全部或部分表達轉換為Ambisonics,并利用渲染的可擴展性來適配CPU資源。
酷雷曼3DVR全景營銷系統的應用讓商企更快速樹立品牌形象,提升知名度以及客戶信任感,并通過融合營銷轉化應用和具有針對性的行業解決方案,更快速的實現客戶轉化以及留存,幫助商家結合互聯網實現與消費者快速結合,品牌快速傳播,產品實現快速交付。
免責聲明:酷雷曼登載此文目的在于傳遞信息,未標注原創或具體來源的稿件來源于網絡,并不意味著贊同文章內觀點或作為描述其真實性的輔助材料。

助力每一位VR全景創業者成功
用全景讓品牌深入人心
電話:18516908881
POPULAR ARTICLA LIST
HOT RECOMMENDATION
FEATURED CASE
酷雷曼VR 4.0
3D互聯網時代VR數字化升級平臺
請填寫真實有效的信息,我們會盡快與您聯系
服務熱線:
18516908881
聯系地址:
北京市豐臺區益澤路55號順和國際財富中心A座550
杭州市濱江區江陵路星耀城一期3幢2203-2204
武漢市東湖高新區關南一路當代夢工場七號樓502
關注我們:
京公網安備 11010602006035