如今,有一個詞被越來越多地提及:沉浸感(immersion)。從字面意義上理解,沉浸感就是指能讓人“身臨其境”的感受,或者用一種更加“玄學”的說法,能夠讓自己的意識短暫地進入另一個世界,體驗另一種場景。
沉浸感在大部分的娛樂或學習活動中,都是非常重要的。比如,在閱讀一本書時,你需要讓自己逐漸沉浸到書的內容中,完全進入書中的世界,才能充分享受到閱讀的樂趣,對書中的內容產生深刻的理解。在看一部電影時,你需要被電影“抓住”,逐漸忘記自己身處電影院的現實,完全進入銀幕中的世界和故事,才能完整地體會到這部電影全部的妙處。
沉浸感越高,人們學習和吸收信息的效率就越高。所以,在科技發展的過程中,人們嘗試用各種手段,來提升這種“沉浸感”。但麻煩就在于,但這種感覺過于主觀,是無法被量化的。同一本書,有的人能沉浸進去,有的人則看了兩行就心煩意亂;同一部電影,有的人全程無尿點,有的人睡了兩個小時的好覺……
沒法量化,就只能通過途徑。拋開“腦補”不談,人類接受外界信息的途徑主要就是五個:聽覺、視覺、嗅覺、味覺和觸覺,要營造和提升“沉浸感”,當然也得從這五方面入手。而視覺和聽覺是目前的科技最先到達的地方,我們這一期就先來聊聊聽覺相關的科技。
營造沉浸感,聽覺是一個關鍵性的技術手段。留聲機的發明,終于把音樂“帶出”了音樂廳,但只是“聽個響”的音樂顯然無法給人帶來仿佛身處現場的沉浸感,于是不少工程師便開始想辦法。目前公認的立體聲技術發明者是英國電氣工程師艾倫·布魯姆倫,他在1933年獲得專利的這項技術,是通過兩個揚聲器表現出聲音的方向和深度,從而讓聽眾獲得更真實的聲場感受。
對于欣賞音樂而言,立體聲帶來的沉浸感提升是巨大的。音樂不再只是單薄的、平面的,而是可以分辨出層次和方向的。當電影誕生之后,具有立體聲音響的影院也帶給了觀眾更好的體驗,而電影工業反過來又成為了音響技術的重要推動者。
要讓觀眾在看電影時體會到真正的“身臨其境”,僅僅靠雙聲道的立體聲其實是不太夠的。1975 年,杜比實驗室(Dolby)針對電影音軌發明了杜比四聲道環繞立體聲(Dolby Stereo),將四個聲道的聲音編碼在兩個聲道并記錄在膠片上,解碼時通過影院銀幕左中右和環繞劇場的揚聲器營造四聲道環繞立體聲,從而實現在膠片有限的空間內記錄的環繞立體聲。
而當影音行業由模擬信號階段全面向數字信號轉換時,另一家名為DTS的公司也發布了一套多聲道音頻技術,名字同樣叫做DTS(Digital Theater System)。DTS通過與斯皮爾伯格1993年上映的電影《侏羅紀公園》與觀眾們見面,而在一年之前的1992年,《蝙蝠俠歸來》就采用了杜比數字(Dolby Digital, AC-3)技術, 這個技術巧妙利用了膠片上的有限空間,實現了一個5.1數字音軌和一個模擬備份音軌共存。在后面很長的時間內,杜比和DTS成為了在音頻技術領域的一對競爭對手。
《侏羅紀公園》的海報是最早出現DTS標志的電影海報
而當技術繼續進步,“空間音頻”成為了新一代音頻技術的關鍵詞。
如果說立體聲代表著聽覺科技的1.0時代,環繞立體聲代表著聽覺科技的2.0時代,那么空間音頻技術的出現,就標志著聽覺科技進入了3.0時代。這三者在營造聲音的沉浸感方面,是階梯式遞進的。
蘋果為Homepod所演示的空間音頻場景
空間音頻是指一種使用沉浸式音頻技術,以人為音場核心,能夠精準呈現出三維空間的廣闊聲場效果,還原出更具現場感、距離感、方向感、移動感的音樂體驗。最賣力地推廣空間音頻技術的廠家自然是蘋果公司,它們的智能音箱Homepod系列和藍牙耳機EarPods系列都以支持空間音頻為賣點——實際上,“空間音頻”這個名字,最早也是由蘋果提出的。蘋果的空間音頻技術是軟硬件結合的,在增加聲音深度和空間感上的做法是——通過傳感器對播放設備進行定位,確定設備的位置和使用者的位置,然后通過算法自動調整聲音的位置和聲場的大小,使聽眾感受到沉浸式的聽覺體驗。
高振幅低音單元、電機、內置低音均衡器麥克風、波束成形五高音單元陣列
而蘋果的空間音頻技術,另一個貢獻者就是杜比。蘋果的空間音頻技術是蘋果與杜比合作的結果,而在2012年推出的杜比全景聲則事實上是更早的沉浸式音頻技術。相較于立體聲和環繞聲的二維平面聲場,杜比全景聲通過增加聲音高度這一維度,讓聲音真正從平面走向三維,還原了真實世界里人們聽聲的條件。杜比全景聲的另外一個特點是它打破了聲道的限制,并引入“聲音對象(audio object)”的概念。任何單個的聲音都可以被定義為聲音對象,創作者可以在三維空間中任意位置對每個聲音對象進行獨立、靈活的定義——大小、遠近、在空間中的定位和移動軌跡等。值得一提的是,除了影院,杜比全景聲可以在更多的設備上實現,包括手機、平板電腦、電視機以及汽車內。杜比實驗室商業合作及全球銷售副總裁Javier Foncillas表示,除了蘋果手機之外,國內主要的終端品牌如小米、OPPO、聯想、海信、TCL、創維等都推出了支持杜比全景聲的產品,而蔚來、理想汽車和小鵬等國產新能源汽車也推出了搭載杜比全景聲的車型。
杜比全景聲相比于立體聲技術,讓聲音更具環繞感和沉浸感
不僅如此,如今也有越來越多的流媒體平臺支持了杜比全景聲。Javier Foncillas表示,在影視內容領域,騰訊視頻、愛奇藝和優酷等中國主流的流媒體視頻平臺都在提供杜比視界、杜比全景聲的娛樂內容。音樂內容方面,在Apple Music上線支持杜比全景聲的空間音頻功能之后,目前國內的QQ音樂、酷我音樂以及網易云音樂也都相繼上線杜比全景聲音樂內容服務。而去年9月,杜比和英雄體育VSPO達成了長期戰略合作伙伴關系,為手游的電競賽事直播帶來沉浸式視聽體驗。在2022年王者榮耀職業聯賽KPL夏季總決賽和2022年王者榮耀世界冠軍杯KIC總決賽中,在騰訊視頻和B站的直播和點播都支持了杜比全景聲。
杜比實驗室負責商業合作及全球銷售的全球副總裁Javier Foncillas
當然,想要獲得更沉浸式的體驗,光有“聽覺”還是不夠的,視覺自然也是更重要的一環。從4K到杜比視界/HDR10+,從IMAX到杜比影院,從VR到XR……關于視覺的沉浸式體驗變得更加豐富,而那就是另一個故事了。
|