如今,有一個(gè)詞被越來(lái)越多地提及:沉浸感(immersion)。從字面意義上理解,沉浸感就是指能讓人“身臨其境”的感受,或者用一種更加“玄學(xué)”的說(shuō)法,能夠讓自己的意識(shí)短暫地進(jìn)入另一個(gè)世界,體驗(yàn)另一種場(chǎng)景。
沉浸感在大部分的娛樂(lè)或?qū)W習(xí)活動(dòng)中,都是非常重要的。比如,在閱讀一本書時(shí),你需要讓自己逐漸沉浸到書的內(nèi)容中,完全進(jìn)入書中的世界,才能充分享受到閱讀的樂(lè)趣,對(duì)書中的內(nèi)容產(chǎn)生深刻的理解。在看一部電影時(shí),你需要被電影“抓住”,逐漸忘記自己身處電影院的現(xiàn)實(shí),完全進(jìn)入銀幕中的世界和故事,才能完整地體會(huì)到這部電影全部的妙處。
沉浸感越高,人們學(xué)習(xí)和吸收信息的效率就越高。所以,在科技發(fā)展的過(guò)程中,人們嘗試用各種手段,來(lái)提升這種“沉浸感”。但麻煩就在于,但這種感覺(jué)過(guò)于主觀,是無(wú)法被量化的。同一本書,有的人能沉浸進(jìn)去,有的人則看了兩行就心煩意亂;同一部電影,有的人全程無(wú)尿點(diǎn),有的人睡了兩個(gè)小時(shí)的好覺(jué)……
沒(méi)法量化,就只能通過(guò)途徑。拋開(kāi)“腦補(bǔ)”不談,人類接受外界信息的途徑主要就是五個(gè):聽(tīng)覺(jué)、視覺(jué)、嗅覺(jué)、味覺(jué)和觸覺(jué),要營(yíng)造和提升“沉浸感”,當(dāng)然也得從這五方面入手。而視覺(jué)和聽(tīng)覺(jué)是目前的科技最先到達(dá)的地方,我們這一期就先來(lái)聊聊聽(tīng)覺(jué)相關(guān)的科技。
營(yíng)造沉浸感,聽(tīng)覺(jué)是一個(gè)關(guān)鍵性的技術(shù)手段。留聲機(jī)的發(fā)明,終于把音樂(lè)“帶出”了音樂(lè)廳,但只是“聽(tīng)個(gè)響”的音樂(lè)顯然無(wú)法給人帶來(lái)仿佛身處現(xiàn)場(chǎng)的沉浸感,于是不少工程師便開(kāi)始想辦法。目前公認(rèn)的立體聲技術(shù)發(fā)明者是英國(guó)電氣工程師艾倫·布魯姆倫,他在1933年獲得專利的這項(xiàng)技術(shù),是通過(guò)兩個(gè)揚(yáng)聲器表現(xiàn)出聲音的方向和深度,從而讓聽(tīng)眾獲得更真實(shí)的聲場(chǎng)感受。
對(duì)于欣賞音樂(lè)而言,立體聲帶來(lái)的沉浸感提升是巨大的。音樂(lè)不再只是單薄的、平面的,而是可以分辨出層次和方向的。當(dāng)電影誕生之后,具有立體聲音響的影院也帶給了觀眾更好的體驗(yàn),而電影工業(yè)反過(guò)來(lái)又成為了音響技術(shù)的重要推動(dòng)者。
要讓觀眾在看電影時(shí)體會(huì)到真正的“身臨其境”,僅僅靠雙聲道的立體聲其實(shí)是不太夠的。1975 年,杜比實(shí)驗(yàn)室(Dolby)針對(duì)電影音軌發(fā)明了杜比四聲道環(huán)繞立體聲(Dolby Stereo),將四個(gè)聲道的聲音編碼在兩個(gè)聲道并記錄在膠片上,解碼時(shí)通過(guò)影院銀幕左中右和環(huán)繞劇場(chǎng)的揚(yáng)聲器營(yíng)造四聲道環(huán)繞立體聲,從而實(shí)現(xiàn)在膠片有限的空間內(nèi)記錄的環(huán)繞立體聲。
而當(dāng)影音行業(yè)由模擬信號(hào)階段全面向數(shù)字信號(hào)轉(zhuǎn)換時(shí),另一家名為DTS的公司也發(fā)布了一套多聲道音頻技術(shù),名字同樣叫做DTS(Digital Theater System)。DTS通過(guò)與斯皮爾伯格1993年上映的電影《侏羅紀(jì)公園》與觀眾們見(jiàn)面,而在一年之前的1992年,《蝙蝠俠歸來(lái)》就采用了杜比數(shù)字(Dolby Digital, AC-3)技術(shù), 這個(gè)技術(shù)巧妙利用了膠片上的有限空間,實(shí)現(xiàn)了一個(gè)5.1數(shù)字音軌和一個(gè)模擬備份音軌共存。在后面很長(zhǎng)的時(shí)間內(nèi),杜比和DTS成為了在音頻技術(shù)領(lǐng)域的一對(duì)競(jìng)爭(zhēng)對(duì)手。
《侏羅紀(jì)公園》的海報(bào)是最早出現(xiàn)DTS標(biāo)志的電影海報(bào)
而當(dāng)技術(shù)繼續(xù)進(jìn)步,“空間音頻”成為了新一代音頻技術(shù)的關(guān)鍵詞。
如果說(shuō)立體聲代表著聽(tīng)覺(jué)科技的1.0時(shí)代,環(huán)繞立體聲代表著聽(tīng)覺(jué)科技的2.0時(shí)代,那么空間音頻技術(shù)的出現(xiàn),就標(biāo)志著聽(tīng)覺(jué)科技進(jìn)入了3.0時(shí)代。這三者在營(yíng)造聲音的沉浸感方面,是階梯式遞進(jìn)的。
蘋果為Homepod所演示的空間音頻場(chǎng)景
空間音頻是指一種使用沉浸式音頻技術(shù),以人為音場(chǎng)核心,能夠精準(zhǔn)呈現(xiàn)出三維空間的廣闊聲場(chǎng)效果,還原出更具現(xiàn)場(chǎng)感、距離感、方向感、移動(dòng)感的音樂(lè)體驗(yàn)。最賣力地推廣空間音頻技術(shù)的廠家自然是蘋果公司,它們的智能音箱Homepod系列和藍(lán)牙耳機(jī)EarPods系列都以支持空間音頻為賣點(diǎn)——實(shí)際上,“空間音頻”這個(gè)名字,最早也是由蘋果提出的。蘋果的空間音頻技術(shù)是軟硬件結(jié)合的,在增加聲音深度和空間感上的做法是——通過(guò)傳感器對(duì)播放設(shè)備進(jìn)行定位,確定設(shè)備的位置和使用者的位置,然后通過(guò)算法自動(dòng)調(diào)整聲音的位置和聲場(chǎng)的大小,使聽(tīng)眾感受到沉浸式的聽(tīng)覺(jué)體驗(yàn)。
高振幅低音單元、電機(jī)、內(nèi)置低音均衡器麥克風(fēng)、波束成形五高音單元陣列
而蘋果的空間音頻技術(shù),另一個(gè)貢獻(xiàn)者就是杜比。蘋果的空間音頻技術(shù)是蘋果與杜比合作的結(jié)果,而在2012年推出的杜比全景聲則事實(shí)上是更早的沉浸式音頻技術(shù)。相較于立體聲和環(huán)繞聲的二維平面聲場(chǎng),杜比全景聲通過(guò)增加聲音高度這一維度,讓聲音真正從平面走向三維,還原了真實(shí)世界里人們聽(tīng)聲的條件。杜比全景聲的另外一個(gè)特點(diǎn)是它打破了聲道的限制,并引入“聲音對(duì)象(audio object)”的概念。任何單個(gè)的聲音都可以被定義為聲音對(duì)象,創(chuàng)作者可以在三維空間中任意位置對(duì)每個(gè)聲音對(duì)象進(jìn)行獨(dú)立、靈活的定義——大小、遠(yuǎn)近、在空間中的定位和移動(dòng)軌跡等。值得一提的是,除了影院,杜比全景聲可以在更多的設(shè)備上實(shí)現(xiàn),包括手機(jī)、平板電腦、電視機(jī)以及汽車內(nèi)。杜比實(shí)驗(yàn)室商業(yè)合作及全球銷售副總裁Javier Foncillas表示,除了蘋果手機(jī)之外,國(guó)內(nèi)主要的終端品牌如小米、OPPO、聯(lián)想、海信、TCL、創(chuàng)維等都推出了支持杜比全景聲的產(chǎn)品,而蔚來(lái)、理想汽車和小鵬等國(guó)產(chǎn)新能源汽車也推出了搭載杜比全景聲的車型。
杜比全景聲相比于立體聲技術(shù),讓聲音更具環(huán)繞感和沉浸感
不僅如此,如今也有越來(lái)越多的流媒體平臺(tái)支持了杜比全景聲。Javier Foncillas表示,在影視內(nèi)容領(lǐng)域,騰訊視頻、愛(ài)奇藝和優(yōu)酷等中國(guó)主流的流媒體視頻平臺(tái)都在提供杜比視界、杜比全景聲的娛樂(lè)內(nèi)容。音樂(lè)內(nèi)容方面,在Apple Music上線支持杜比全景聲的空間音頻功能之后,目前國(guó)內(nèi)的QQ音樂(lè)、酷我音樂(lè)以及網(wǎng)易云音樂(lè)也都相繼上線杜比全景聲音樂(lè)內(nèi)容服務(wù)。而去年9月,杜比和英雄體育VSPO達(dá)成了長(zhǎng)期戰(zhàn)略合作伙伴關(guān)系,為手游的電競(jìng)賽事直播帶來(lái)沉浸式視聽(tīng)體驗(yàn)。在2022年王者榮耀職業(yè)聯(lián)賽KPL夏季總決賽和2022年王者榮耀世界冠軍杯KIC總決賽中,在騰訊視頻和B站的直播和點(diǎn)播都支持了杜比全景聲。
杜比實(shí)驗(yàn)室負(fù)責(zé)商業(yè)合作及全球銷售的全球副總裁Javier Foncillas
當(dāng)然,想要獲得更沉浸式的體驗(yàn),光有“聽(tīng)覺(jué)”還是不夠的,視覺(jué)自然也是更重要的一環(huán)。從4K到杜比視界/HDR10+,從IMAX到杜比影院,從VR到XR……關(guān)于視覺(jué)的沉浸式體驗(yàn)變得更加豐富,而那就是另一個(gè)故事了。
|