人類對外界最直接的感知來自視覺，我們通常說的「沉浸感」指的就是包括視覺在內(nèi)的感官體驗(yàn)。如果想真正讓人身臨其境，聲音也是不可忽視的。很多人在電影院、游戲中體驗(yàn)過「3D 音效」，但它對環(huán)境、設(shè)備都有很高的要求。最近騰訊推出一種 3D 音效算法，可以讓你在普通耳機(jī)上也能感受 3D 音效。
我們用聲音來感知位置靠的是雙耳效應(yīng)，聲音大小、到達(dá)兩只耳朵的時間等信息不一樣，據(jù)此可以判斷出聲源的距離。騰訊音視頻實(shí)驗(yàn)室用算法模擬了這些參數(shù)，在不依靠特殊硬件的基礎(chǔ)上直接實(shí)現(xiàn) 3D 音效，我們需要的僅僅是一副普通的雙聲道耳機(jī)。
3D 音效算法的應(yīng)用場景有很多，首先是看視頻的體驗(yàn)。電影院中震撼的聲音效果是靠特殊的環(huán)境和專業(yè)硬件實(shí)現(xiàn)的，但對于用戶來說更方便的場景是在手機(jī)上觀看。很多手機(jī)至今還使用單揚(yáng)聲器，即使戴了雙聲道耳機(jī)，很多聲音的細(xì)節(jié)也會被模糊掉，人只能聽到來自左中右三個方向的聲音。利用 3D 音效可以模擬出立體聲的效果，將視頻中的各種聲道還原到相應(yīng)的位置，對于用戶來說，在手機(jī)上也能體驗(yàn)影院般的聽覺效果。
除了視頻，3D 音效對游戲體驗(yàn)的提升更大。比如最近很火的吃雞游戲，雖然槍聲、腳步的 3D 效果可以用游戲引擎來實(shí)現(xiàn)，但玩家間的語音卻無法體現(xiàn)位置，如果把 3D 音效算法應(yīng)用到實(shí)時語音中，玩家就可以通過聲音來判斷敵人的位置，游戲的沉浸感也會更強(qiáng)。
想象一下，如果斗地主、麻將游戲中也加入 3D 音效，會不會更有現(xiàn)場感？
在 VR 體驗(yàn)中，視覺感受和現(xiàn)實(shí)脫節(jié)會帶來眩暈感，平平的聲音雖然不至于造成頭暈，但也會影響整體體驗(yàn)。視覺的問題解決后，3D 音效的加入會讓 VR 體驗(yàn)更真實(shí)。騰訊即將上線的一款 VR 游戲就會用到 3D 音效算法的技術(shù)。
用算法實(shí)現(xiàn) 3D 音效最重要的意義就是擺脫了硬件的限制。騰訊音視頻實(shí)驗(yàn)室為很多直播、社交平臺提供服務(wù)，距離 3D 音效算法落地用戶應(yīng)該也不會太遠(yuǎn)。
|
