人類對外界最直接的感知來自視覺,我們通常說的「沉浸感」指的就是包括視覺在內的感官體驗。如果想真正讓人身臨其境,聲音也是不可忽視的。很多人在電影院、游戲中體驗過「3D 音效」,但它對環境、設備都有很高的要求。最近騰訊推出一種 3D 音效算法,可以讓你在普通耳機上也能感受 3D 音效。
我們用聲音來感知位置靠的是雙耳效應,聲音大小、到達兩只耳朵的時間等信息不一樣,據此可以判斷出聲源的距離。騰訊音視頻實驗室用算法模擬了這些參數,在不依靠特殊硬件的基礎上直接實現 3D 音效,我們需要的僅僅是一副普通的雙聲道耳機。
3D 音效算法的應用場景有很多,首先是看視頻的體驗。電影院中震撼的聲音效果是靠特殊的環境和專業硬件實現的,但對于用戶來說更方便的場景是在手機上觀看。很多手機至今還使用單揚聲器,即使戴了雙聲道耳機,很多聲音的細節也會被模糊掉,人只能聽到來自左中右三個方向的聲音。利用 3D 音效可以模擬出立體聲的效果,將視頻中的各種聲道還原到相應的位置,對于用戶來說,在手機上也能體驗影院般的聽覺效果。
除了視頻,3D 音效對游戲體驗的提升更大。比如最近很火的吃雞游戲,雖然槍聲、腳步的 3D 效果可以用游戲引擎來實現,但玩家間的語音卻無法體現位置,如果把 3D 音效算法應用到實時語音中,玩家就可以通過聲音來判斷敵人的位置,游戲的沉浸感也會更強。
想象一下,如果斗地主、麻將游戲中也加入 3D 音效,會不會更有現場感?
在 VR 體驗中,視覺感受和現實脫節會帶來眩暈感,平平的聲音雖然不至于造成頭暈,但也會影響整體體驗。視覺的問題解決后,3D 音效的加入會讓 VR 體驗更真實。騰訊即將上線的一款 VR 游戲就會用到 3D 音效算法的技術。
用算法實現 3D 音效最重要的意義就是擺脫了硬件的限制。騰訊音視頻實驗室為很多直播、社交平臺提供服務,距離 3D 音效算法落地用戶應該也不會太遠。
|