你尚未認(rèn)證為創(chuàng)作人或影視公司,認(rèn)證即可享有:
VR(虛擬現(xiàn)實(shí))電影通過對(duì)完整空間的展現(xiàn),讓觀眾獲得身臨虛擬現(xiàn)實(shí)空間的沉浸感。配合這一感受的聲音制作采用三維環(huán)繞聲格式,使其最大限度地接近人們?cè)诂F(xiàn)實(shí)生活中的聽音體驗(yàn)。耳機(jī)還放是VR電影聲音還放的基本模式,通過頭部相關(guān)傳輸函數(shù)(HRTF)編碼,3D環(huán)繞聲以兩聲道的虛擬環(huán)繞聲形式重放出來(lái),同時(shí)配合頭部跟蹤的數(shù)據(jù)回傳進(jìn)行調(diào)整,使聲音不會(huì)隨著觀眾頭部的轉(zhuǎn)動(dòng)而轉(zhuǎn)動(dòng),而是保持在原先的方位上,給觀眾帶來(lái)聲音獨(dú)立于耳機(jī)存在的幻覺。VR電影的聲音制作和傳統(tǒng)電影類似,都包含前期錄音和后期制作兩個(gè)環(huán)節(jié),后期制作完成后要輸出聲音母帶,并與畫面打包合成,才最終獲得可用于發(fā)行的母版。除了與傳統(tǒng)電影相類似的聲音設(shè)計(jì)和錄音、編輯、混錄之外,虛擬現(xiàn)實(shí)電影的聲音制作在工藝流程上要考慮如何拾取三維聲場(chǎng)里的聲音、聲音編輯時(shí)如何觀看3D畫面、如何讓聲音和畫面取得同步、在頭部跟蹤中聲音如何跟隨觀影視角的變化、如何處理聲音的空間感、如何進(jìn)行三維聲音混錄、怎樣監(jiān)聽,以及怎樣輸出聲音母帶、選取什么樣的輸出格式等。
拾音環(huán)節(jié)
對(duì)任何電影聲音制作來(lái)說,前期拾音只是完成素材的準(zhǔn)備。無(wú)論是同期錄音時(shí)主要針對(duì)對(duì)白的拾音,還是單獨(dú)進(jìn)行的音響效果錄音、環(huán)境聲錄音,以及后期制作時(shí)的ADR錄音、擬音等,都是為聲音編輯準(zhǔn)備素材。在VR電影中,對(duì)聲音所處聲場(chǎng)信息的展現(xiàn)比傳統(tǒng)電影的要求更高。這些聲場(chǎng)信息可以通過后期制作來(lái)模擬,也可以在恰當(dāng)?shù)穆晥?chǎng)環(huán)境中直接記錄。
針對(duì)直接記錄現(xiàn)場(chǎng)三維聲場(chǎng)空間信息,有三種拾音模式可供選擇:一種是采用雙耳拾音技術(shù)(Binaural Recording)的人工頭或類人工頭拾音,一種是采用聲場(chǎng)合成技術(shù)的原場(chǎng)(Ambisonics)傳聲器拾音,還有一種是通過設(shè)置能記錄水平和高度信息的環(huán)繞傳聲器組來(lái)拾音。
人工頭拾音技術(shù)模擬人耳聽覺的外部模型,在人工頭模型的仿真耳道外部入口處或耳道內(nèi)部末端放置拾音振膜,從而獲得和人耳聽覺類似的拾音效果。人工頭拾音包含了相應(yīng)的HRTF信息,該信息是人工頭拾音能再現(xiàn)三維聲場(chǎng)信息的關(guān)鍵,但該信息很難與觀眾自身的HRTF信息完全吻合,因此在聲場(chǎng)重現(xiàn)上存在一些誤差。另外,人工頭拾音只適合于耳機(jī)還放,如果采用揚(yáng)聲器還放,會(huì)因?yàn)橛^眾自身的HRTF信息帶來(lái)聲染色,導(dǎo)致聲場(chǎng)信息的畸變。人工頭拾音的優(yōu)點(diǎn)是清晰明了、簡(jiǎn)單便攜,操作也十分簡(jiǎn)便?,F(xiàn)有的人工頭話筒包括Neumann的KU 100(如圖1所示),另外還有將振膜通過支架直接固定在真人頭耳道位置的方式。毫無(wú)疑問對(duì)于這樣的拾音,在拾音位置和方向的選擇上要和相應(yīng)的鏡頭進(jìn)行完美匹配,比如在同一位置由攝影機(jī)模擬出雙眼的視點(diǎn),人工頭模擬出雙耳的聽點(diǎn),才能獲得聲畫同步的效果。用于VR的人工頭拾音技術(shù)可以采用多方向的雙耳拾音,例如3Dio公司推出的四方雙耳立體聲話筒(QB:Quad-binaural-microphone)(如圖2所示),它由指向0°、90°、180°、270°的4組雙耳立體聲話筒組成,從而與360°的畫面視角相匹配。其局限在于它只對(duì)水平面提供了視角轉(zhuǎn)換時(shí)的信號(hào)轉(zhuǎn)換,在垂直面上沒有這樣的轉(zhuǎn)換,從而使得垂直面上的視角變化沒有相應(yīng)的聲音跟隨,另外這種簡(jiǎn)化的人工頭結(jié)構(gòu)損失了大量的面部和輪廓干涉,影響了自然HRTF采集的完整性。
原場(chǎng)傳聲器技術(shù)20世紀(jì)70年代誕生于英國(guó),它是一種球形三維環(huán)繞聲拾音技術(shù)。一階原場(chǎng)系統(tǒng)(FOA:First Order Ambisonics)包含四個(gè)心形指向的振膜,分別指向左前(LF)、左后(LB)、右前(RF)、右后(RB),所拾取的原始信號(hào)叫做A格式(A-format),經(jīng)過處理后得到的輸出信號(hào)稱為B格式(B-format)。B格式包含4個(gè)通道的信息,即全方向的W信號(hào)、前后深度的X信號(hào)、左右寬度的Y信號(hào)和上下高度的Z信號(hào),形成一種擴(kuò)展后的三維化M/S拾音制式,從而獲得水平面和垂直面的三維信息,再解碼成不同的方位信息來(lái)與監(jiān)聽揚(yáng)聲器的設(shè)置相匹配。這一拾音制式在適應(yīng)不同格式的揚(yáng)聲器設(shè)置上具有很大的靈活度,它輸出的信號(hào)可以根據(jù)需要解碼成2.0、5.1、7.1甚至22.2的格式,也可以編碼成Binaural格式。常見的原場(chǎng)話筒有帶4個(gè)振膜的CoreSound TetraMic(如圖3所示)、TSL SoundField SPS 200,以及具有更多通道數(shù)的高階原場(chǎng)系統(tǒng)(HOA:High Order Ambisonics),例如Eigenmike Microphone(如圖4所示)。一階原場(chǎng)系統(tǒng)的缺點(diǎn)是空間解析度不夠好,高階系統(tǒng)通過增加通道數(shù)來(lái)解決這一問題,通道數(shù)和階數(shù)的關(guān)系是:
通道數(shù) = (階數(shù) + 1)2
因此,二階原場(chǎng)系統(tǒng)包含9個(gè)通道,三階原場(chǎng)系統(tǒng)包含16個(gè)通道,四階原場(chǎng)系統(tǒng)包含25個(gè)通道,如此遞增,使得系統(tǒng)輸出的數(shù)據(jù)量大大增加,運(yùn)算的復(fù)雜程度也大為提高。目前國(guó)外最高做到五階原場(chǎng)話筒,用32個(gè)話筒采集,再通過矩陣變換獲得36個(gè)輸出通道。由于記錄了全方位的信息,用于VR的原場(chǎng)系統(tǒng)可以支持任何方向的視角轉(zhuǎn)換。
Oculus公司的軟件工程師Pete Stirling對(duì)雙耳拾音技術(shù)(采用3Dio FreeSpace Omni)和聲場(chǎng)合成技術(shù)(采用CoreSound TetraMic)做的拾音對(duì)比實(shí)驗(yàn)表明,在空間定位的精確度方面,四方雙耳技術(shù)(QB:Quad Binaural)具有人工頭拾音的一些缺點(diǎn),比如由于人工頭和真人頭之間的差異導(dǎo)致空間定位的誤差,以及前后方位的混淆,最大的問題出現(xiàn)在隨著視角轉(zhuǎn)換兩組雙耳話筒混合時(shí)的相位抵消,造成銜接部分聲場(chǎng)定位不清晰。相比而言,聲場(chǎng)合成技術(shù)沒有這些問題,在三維空間的表現(xiàn)上有明顯的優(yōu)勢(shì),但一階原場(chǎng)話筒的空間還原精確度不夠高。在音質(zhì)方面,雙耳話筒會(huì)有一些染色,而原場(chǎng)話筒的頻響非常平直。這兩種方式都能很好地拾取現(xiàn)場(chǎng)反射聲,獲得良好的臨場(chǎng)感。
利用上下兩層傳聲器組合來(lái)拾音的方式類似于傳統(tǒng)環(huán)繞聲拾音方式,組合的模式也往往借鑒已有的三維揚(yáng)聲器布局,比如模仿7.1.4的布局,下層設(shè)置7只傳聲器,上層設(shè)置4只。這類拾音方式獲得的聲音聲道分離度較好,但在聲場(chǎng)整體感和連貫度上有所欠缺。
除了現(xiàn)場(chǎng)直接拾取3D環(huán)繞聲之外,出于影片敘事的需要,往往還要補(bǔ)充拾取更多的聲音細(xì)節(jié)。采用的方法和傳統(tǒng)電影的拾音方法類似,比如利用有線或無(wú)線話筒拾音,單獨(dú)補(bǔ)錄一些音響效果用于后期的編輯等。通過現(xiàn)場(chǎng)拾音和補(bǔ)錄,聲音素材可能來(lái)源于雙耳話筒、原場(chǎng)話筒以及非原場(chǎng)型的吊桿話筒、領(lǐng)夾式話筒、平板話筒、立體聲話筒、環(huán)繞聲話筒等。后期制作時(shí),非3D格式的聲音素材需要進(jìn)行空間化處理,包括那些從音響資料庫(kù)里挑選的素材,使之成為來(lái)自三維空間的聲音(spatial audio)。
聲音編輯與混錄環(huán)節(jié)
VR電影聲音編輯在技術(shù)上和傳統(tǒng)電影聲音編輯的不同之處在于:
3D視頻還放及其與音頻工作站的同步
音視頻頭部跟蹤,即視頻觀看視角和音頻聽音角度的同步轉(zhuǎn)換
聲音的空間化處理(需要相應(yīng)的軟件支持)
聲音母版的格式選擇,比如Dolby Atmos Print Master、Ambisonics等
實(shí)時(shí)雙耳渲染(binaural rendering)監(jiān)聽
3D視頻還放及與音頻工作站的同步
用于聲音編輯的3D視頻還放,最好是將球形視頻展開之后在電腦屏幕上還放,同時(shí)能利用鼠標(biāo)調(diào)整觀看角度。很顯然帶著頭戴式顯示設(shè)備是無(wú)法完成聲音編輯的。支持上述還放模式的視頻軟件有KolorEyes(已被GoPro公司收購(gòu),也叫GoProVRPlayer)等。同時(shí),Spook公司開發(fā)的SpookSyncVR軟件,以O(shè)SC(Open Sound Control的簡(jiǎn)稱)通信協(xié)議將Kolor Eyes播放器和Reaper音頻工作站同步起來(lái),不僅能進(jìn)行播放時(shí)間碼的同步,還能進(jìn)行音視頻視聽角度的同步,使三維聲音編輯變得非常直觀、靈活,聲音編輯師在編輯過程中可以實(shí)時(shí)了解還放效果。
在音視頻視聽角度的同步上,SpookSyncVR將視角方位參數(shù)與音頻工作站上安裝的ATK(Ambisonic Tool Kits)插件的聽音方位參數(shù)鎖定在一起。pitch對(duì)應(yīng)于tumble,代表上下偏轉(zhuǎn),yaw對(duì)應(yīng)于rotate,代表水平偏轉(zhuǎn)。兩者在360°范圍內(nèi)的變化完成了三維空間里的視聽角度變化。參數(shù)鎖定之后,音視頻視聽角度就能實(shí)現(xiàn)同步轉(zhuǎn)換了,ATK上的空間顯示界面能直觀地體現(xiàn)出這種變化。
有的軟件可以播放展開的三維視頻,但不支持調(diào)整觀看角度,而是在視頻上標(biāo)出角度坐標(biāo),更精細(xì)的設(shè)計(jì)還包括標(biāo)出網(wǎng)格讓三維坐標(biāo)更清晰。觀看這樣的視頻,聲音編輯師或混錄師無(wú)法看到實(shí)時(shí)頭部跟蹤的畫面,因此需要對(duì)不同坐標(biāo)的畫面有足夠的經(jīng)驗(yàn),結(jié)合頭戴式顯示設(shè)備的觀看體驗(yàn)來(lái)完成聲音制作。杜比VR全景聲工具里的Video Player可以和Pro Tools同步在一起,以等量矩形投影的模式在顯示器上觀看展開的畫面,或者通過Oculus頭戴式顯示設(shè)備來(lái)觀看3D視頻,它可以把頭部位置信息傳送到杜比VR全景聲工具的VR Renderer中,實(shí)時(shí)渲染出帶頭部跟蹤的監(jiān)聽效果。
音頻工作站及空間處理插件
VR聲音編輯的工具首先是能支持多路母線輸出的音頻工作站以及能完成三維空間聲音處理的插件。常見的音頻工作站有ProToolsHD、Nuendo、Reaper等,只要能支持多路母線輸出的工作站都可用于VR聲音制作。ProTools最多支持8路(7.1)母線輸出,Nuendo最多支持12路(11.1)母線輸出,Reaper最多支持64路母線輸出。Dolby Atmos需要的輸出通路最少12路(7.1.4)、最多64路,Ambisonics需要的輸出通路最少4路(一階原場(chǎng)系統(tǒng)),Binaural需要兩路輸出通路。
VR聲音制作的重點(diǎn)是在三維空間內(nèi)的聲像定位( 3D panning)和三維空間感處理(3D reverb),這兩項(xiàng)工作需要單獨(dú)的全景聲制作軟件來(lái)完成。用于VR的杜比全景聲軟件(Dolby Atmos for VR)包含四個(gè)工具,分別是Dolby Atmos Panner Plug-in for Pro Tools、VR Renderer、Monitor Application和Video Player,分別完成3D聲像定位和元數(shù)據(jù)生成、將音頻和元數(shù)據(jù)進(jìn)行Dolby Atmos混錄并輸出編碼為標(biāo)準(zhǔn)“杜比數(shù)字+”(Dolby Digital Plus)的雙耳渲染信號(hào)、對(duì)所有混錄對(duì)象的空間定位和電平動(dòng)態(tài)進(jìn)行監(jiān)看、視頻還放。其聲像定位所參考的三維空間是以鞋盒(shoe box)為模型的矩形立方體,在此混錄師可同時(shí)管理至多128路音頻文件,其中音床(bed)部分為9.1聲道的靜態(tài)基礎(chǔ)聲,聲道輸出是固定的,對(duì)象(object)部分最多可使用其余的118路,這是單獨(dú)的動(dòng)態(tài)音頻,可以在矩形立方體的任意位置完成定位、移動(dòng)等。監(jiān)聽時(shí)可以分別對(duì)音床和對(duì)象進(jìn)行監(jiān)聽,并能實(shí)現(xiàn)實(shí)時(shí)雙耳渲染監(jiān)聽。輸出的聲音母版格式為DolbyAtmos Print Master,考慮到適配其他平臺(tái),杜比VR全景聲工具還能將制作完成的全景聲輸出成Ambisonics的B格式(目前只支持一階原場(chǎng)格式),以滿足YouTube等平臺(tái)的需求,以及形成5.1、7.1的下混輸出。Dolby Atmos VR Panner作為ProTools的插件使用,而新版Nuendo已實(shí)現(xiàn)原生支持Dolby Atmos Panner功能,不需要安裝插件,用一根網(wǎng)線和杜比渲染與母版處理設(shè)備(RMU)相連即可進(jìn)行Atmos格式的聲音制作??臻g化方面,杜比VR全景聲工具不帶空間處理功能,需要用單獨(dú)的混響器或房間仿真軟件來(lái)形成空間感。AudioEase公司新近推出的Indoor旗艦卷積混響插件,最大可提供9路混響輸出,原生支持Dolby Atmos格式。
Ambisonics作為一種比較方便的中間格式,吸引了一些廠家來(lái)開發(fā)Ambisonics插件包。注意Ambisonics的三維空間模型和DolbyAtmos的三維空間模型有所不同,它是以聽音位置為中心的圓球體,通過水平方位角(azimuth)、高度(elevation)、距離(distance)可以定義聲像在球體中的位置,通過寬度(width)可以定義聲像的大小。這兩種空間模型會(huì)帶來(lái)不同的聽音感受,例如與聽音者保持相同距離的前方聲像移動(dòng),在Dolby Atmos格式中,聲像可以從左到右沿直線移動(dòng),而在Ambisonics格式中,這個(gè)移動(dòng)是以圓弧的軌跡進(jìn)行。市面上已有的Ambisonics軟件有二、三十種,用作工作站插件的有ATK(The Ambisonic Toolkit,用于Reaper工作站)、NoiseMakers公司的Ambi Pan和Ambi Head(有VST、AU、AAX格式)、其他公司的ambiXplugin suite(VST格式)、TOA plugins(VST格式)、Ambisonic Studio B2X plugins(VST、AU格式)、WigWare(VST格式)等。各插件的功能有一定區(qū)別,但都是圍繞Ambisonics格式所做的聲像定位、格式轉(zhuǎn)換、雙耳渲染監(jiān)聽等。ATK插件通過一階原場(chǎng)信號(hào)編碼(FoaEncode)能把普通話筒拾取的信號(hào)、合成信號(hào)等統(tǒng)統(tǒng)轉(zhuǎn)換成Ambisonics格式,讓不同來(lái)源的信號(hào)可以和原場(chǎng)話筒拾取的信號(hào)在同一個(gè)平臺(tái)上編輯。要注意雙耳話筒拾取的信號(hào)由于包含有自然HRTF,無(wú)法在編輯中與采用非雙耳技術(shù)拾取的信號(hào)相兼容。ATK的空間成像工具(imaging)可以讓聲像沿某條軸線旋轉(zhuǎn),生成相對(duì)于軸線對(duì)稱的鏡像、控制聲像大小等。在監(jiān)聽上,ATK可以通過一階原場(chǎng)信號(hào)解碼(FoaDecode)選擇不同的解碼監(jiān)聽,如binaural、標(biāo)準(zhǔn)雙聲道、5.0監(jiān)聽等。NoiseMakers的Ambi Pan將單聲道或雙聲道立體聲信號(hào)轉(zhuǎn)換成AmbisonicsB格式以4路信號(hào)輸出,能實(shí)現(xiàn)在三維空間的聲像定位、聲像寬度控制等。AmbiHead將制作完成的Ambisonics信號(hào)渲染成binaural信號(hào),進(jìn)行實(shí)時(shí)監(jiān)聽。渲染過程中還能進(jìn)行空間寬度控制、沿Z軸的旋轉(zhuǎn)等,它里面包含了專用于精確回放B格式信號(hào)的HRTF濾波器,也可以通過SOFA導(dǎo)入用戶自定義的HRTF參數(shù),達(dá)到個(gè)人化雙耳渲染的目的。
NoiseMakers的PANO(Procedural Ambient Noise Orchestra)Player 是一款實(shí)時(shí)多通路音效合成軟件,預(yù)置了液體、風(fēng)、火的效果,還可以讀取用Pano Composer制作的其他效果。它可以對(duì)這些效果實(shí)現(xiàn)從binaural信號(hào)到最多7.1路信號(hào)的輸出,并在空間位置和寬度上進(jìn)行實(shí)時(shí)控制。
NoiseMakers還推出了一款將普通單聲道、立體聲、環(huán)繞聲(5.1或7.1)信號(hào)轉(zhuǎn)換成雙耳信號(hào)的插件Binauralizer,轉(zhuǎn)換過程中可以控制聲像的寬度和位置,選擇內(nèi)置的HRTF函數(shù)或?qū)胗脩鬑RTF函數(shù)。
空間化方面,一些軟件配備了Ambisonics格式的混響處理功能,如Wigware的Ambisonics Reverb混響包,可以方便地對(duì)原場(chǎng)信號(hào)添加混響。
另一個(gè)3D音頻制作工具套裝為Two Big Ears公司開發(fā)的3Dception Spatial Workstation。隨著Two Big Ears公司被Facebook收購(gòu),該套裝也改名為Facebook 360 Spatial Workstation,為VR影視及游戲免費(fèi)提供制作工具、編碼器和渲染引擎。3Dception作為ProTools、Reaper、Nuendo等工作站的插件使用,能完成聲音的三維空間定位和房間仿真,并且支持Oculus Rift、三星Gear VR等主流頭顯,可以基于頭部跟蹤數(shù)據(jù)對(duì)音頻進(jìn)行實(shí)時(shí)渲染。
Oculus Audio DAW Spatializer是一款VST或AAX格式的房間仿真插件,可以配合工作站使用來(lái)完成聲音的空間化處理。房間仿真功能對(duì)聲音所處的空間模型進(jìn)行定義,設(shè)置出房間大小和墻面的吸聲情況,結(jié)合3Dpanner的使用,調(diào)節(jié)X、Y、Z軸參數(shù)來(lái)完成聲音在房間里的定位,以及通過聲壓級(jí)衰減來(lái)確定聲源的距離,可以對(duì)基于對(duì)象的聲源進(jìn)行空間化處理,獲得聲音的方位感和空間感。
監(jiān)聽
VR電影多采用耳機(jī)監(jiān)聽,因此要對(duì)工作站的監(jiān)聽信號(hào)進(jìn)行實(shí)時(shí)雙耳渲染(biaural render)并輸出給耳機(jī)。用于VR聲音制作的插件提供了雙耳渲染輸出,渲染方法是通過加入現(xiàn)有的HRTF函數(shù)來(lái)仿真,使耳機(jī)中的聲音重現(xiàn)編輯及混錄時(shí)聲音在三維空間中所處的位置。
雙耳渲染可以在兩個(gè)環(huán)節(jié)完成,一個(gè)在制作環(huán)節(jié),一個(gè)在用戶端。前者在VR聲音制作插件中進(jìn)行雙耳渲染,比如杜比VR全景聲插件的VR Renderer功能,還可以使用頭戴式顯示設(shè)備如Oculus Rift監(jiān)看全景視頻,同時(shí)進(jìn)行頭部跟蹤仿真監(jiān)聽用戶端不同視角的聆聽效果。后者將雙耳渲染功能集成在用戶端app中,將接收到的源信號(hào)(Dolby Atmos信號(hào)、B格式信號(hào)等)進(jìn)行雙耳渲染,實(shí)現(xiàn)虛擬全景聲監(jiān)聽和頭部跟蹤。
聲音導(dǎo)出環(huán)節(jié)
編輯與混錄完成之后,需要導(dǎo)出聲音母版,母版格式如Dolby Atmos、Ambisonics等,然后與視頻進(jìn)行封裝,得到MP4、MPEG-TS(Mpeg Transport Stream,也可簡(jiǎn)寫為TS)、VPx等格式的文件送往播放平臺(tái)。杜比VR全景聲制作工具輸出的母版格式為Dolby Atmos Print Master,然后將母版文件編碼為“杜比數(shù)字+”,封裝格式支持MP4和TS,也支持在線流媒體分發(fā)格式HLS(http live streaming)、Smooth Streaming和Mpeg DASH,其Atmos數(shù)據(jù)流包含了所有的對(duì)象信息,可以獲得精確的定位。Ambisonics用于與相應(yīng)格式的播放設(shè)備或平臺(tái)兼容,由于它將音床和對(duì)象打包在一起,定位的精確度不如Atmos數(shù)據(jù)流。Dolby Atmos VR APP SDK中包含了雙耳信號(hào)編碼和回放渲染,可以接收陀螺儀的數(shù)據(jù)來(lái)獲得不同聽音角度的聲音。
Ambisonics的母版輸出有兩種類型,即ambiX(WYZX標(biāo)準(zhǔn))和FuMa(WXYZ標(biāo)準(zhǔn)),都是4通路的ambisonics數(shù)據(jù)流。將該數(shù)據(jù)流解碼之后進(jìn)行HRTF仿真,就獲得了用于耳機(jī)監(jiān)聽的雙耳信號(hào)。有的app播放平臺(tái)集成了ambisonics解碼和binaural編碼功能,能直接接收ambisonics信號(hào),如Youtube 360 videos支持ambiX信號(hào),并將該格式的文件轉(zhuǎn)換成binaural信號(hào)輸出。
在HRTF編碼上,由于ambisonics系統(tǒng)的特性,進(jìn)行雙耳渲染可以達(dá)到很好的效果。例如,將WXYZ信號(hào)進(jìn)行解碼,輸出8路信號(hào),即以圓心為中心向外伸展的八個(gè)均分方向(前、前左、左、后左、后、后右、右、前右),然后進(jìn)入HRTF編碼器,經(jīng)HRTF函數(shù)處理后輸出左、右耳信號(hào)給監(jiān)聽。德比大學(xué)(University of Derby)的Bruce Wiggins博士在ambisonics轉(zhuǎn)binaural的仿真實(shí)驗(yàn)中發(fā)現(xiàn),解碼后的一階原場(chǎng)信號(hào)對(duì)雙耳時(shí)間差(ITD)的表現(xiàn)較好,但無(wú)法正確還原基于雙耳聲級(jí)差(ILD)的一些頻率。解碼后的三階原場(chǎng)信號(hào)能準(zhǔn)確還原各個(gè)角度的雙耳時(shí)間差響應(yīng),對(duì)雙耳聲級(jí)差響應(yīng)的還原程度有所提高,但在某些頻率上還有出入。如果階數(shù)增加到八階,則對(duì)雙耳時(shí)間差和雙耳聲級(jí)差響應(yīng)都能準(zhǔn)確還原。
隨著VR電影聲音制作的發(fā)展,相關(guān)的制作工具還會(huì)進(jìn)一步開發(fā)出來(lái),現(xiàn)有的制作工具功能也會(huì)進(jìn)一步完善和強(qiáng)化,比如音頻工作站輸出母線的增加、3D混響器的開發(fā)等,不同平臺(tái)之間的交換性也會(huì)增強(qiáng)。從前期拾音、后期編輯混錄到母版輸出及平臺(tái)播放的一體化解決方案,正在成為技術(shù)專家關(guān)注的重點(diǎn)。同時(shí),游戲聲音制作的工具和制作方式也開始為VR電影聲音所借鑒,為聲音的表現(xiàn)提供更加多元而便捷的途徑。
相信對(duì)VR技術(shù)的掌握對(duì)于未來(lái)短視頻的制作將會(huì)有很大的幫助。
轉(zhuǎn)自:VR資源網(wǎng)
內(nèi)容由作者原創(chuàng),轉(zhuǎn)載請(qǐng)注明來(lái)源,附以原文鏈接
http:///news/1614.html全部評(píng)論
分享到微信朋友圈
表情
添加圖片
發(fā)表評(píng)論