發布日期:2022-04-18 點擊率:53
人們說:VR 的寒冬來了。最近看到一句非常好的描述:“一度承載著創業者和投資人太多期待與熱情的 VR 行業,經歷了如過山車般的一年。”
核心技術瓶頸突破之前,VR 還將在泡沫收縮過后進行理智思考。而 3D 音頻,作為 VR 產業的關鍵性技術節點,值得在今天被關注。
你將看到如下內容:
為什么說 VR 回春關鍵在于 3D 音頻技術?
3D 環繞立體聲技術發展這么多年了,為什么最近才火?
深藍DeeperBlue 為你盤點了 7 家做 3D 音頻的公司,到底哪家靠譜?
在百度上搜索 “VR 寒冬” 有 1,660,000 個結果。
《資本變臉:6 個月,VR 從狂歡到慘淡》(極客公園, 2016 年 09 月 07 日),《吸引了無數資本和創業者的 VR 行業,似乎已進入寒冬》(中國企業家,2016 年 08 月 26 日),《 VR 創業公司的寒冬來了?聽聽資本大咖怎么說!》(網易新聞,2016 年 05 月 27日),《小心被套! VR 將迎來寒冬》(搜狐新聞,2016 年 05 月 11 日)……
人們猶記得 2015 年下半年到 2016 年年初的 VR 熱:從創業者到投資人,大家都對 VR 有著無限的熱情與希望。而從計算機背景出生轉行做 VR 的人真不在少數:他們正是看準了這塊 “熱土”, 從大公司走出,一頭鉆進 VR 行業。
行業缺少優質標的,關鍵性技術節點遠未突破,VR 如同一個牙牙學語的嬰兒,尚在襁褓之中,遠未成熟。與其說 VR 凜冬已到,不如說之前的泡沫正在合理地被擠破。
這里的 “關鍵性技術節點” 其中之一,就是空間音頻技術。在今天,人們更愿意叫它 3D 音頻。
蘋果音樂和 VR 工作室 Vrse 聯手為 U2 樂隊制作了一段 VR 音樂視頻《Song for Someone》。圖為 MV 片段中 U2 在空無一人的多倫多體育場的演唱。
正如著名 VR 制作公司 Jaunt 的音頻首席工程師亞當·桑默(Adam Somers)說的:“(在 VR 這件事上面),聽覺占了五成,視覺占剩下五成。”
聽覺決定了人類對空間的定位、對物體距離的感知等等。視覺給出一個線索,聽覺則去證實這個線索是否真實存在。如果少了視覺的沉浸感,那么一切畫面的真實性就蕩然無存。不解決聽覺問題,虛擬現實就不能成為虛擬現實。可以這么說,3D 音頻決定了我們念叨著的 VR 時代是否真正到來。
首先科普一下 3D 音頻
什么是 3D 音頻?簡單來說,3D 音頻是對聲音最逼真的模擬技術,能讓聽眾完全還原到與現場相似的聲場。類似的叫法還有全景聲方案、Immersive Audio(沉浸式音頻)。你能到完全聽到逼真到 “現實” 的聲音,而不是 “現實主義” 的。
目前世界范圍內最成熟的空間音頻制作公司之一,VisiSonics 的創始人之一拉瑪尼 · 杜瑞斯沃米(Ramani Duraiswami)有一句話:“當你聽到的聲音是極度真實的時候,耳機就消失了。”
人耳對聲音信號有一套自己的分析系統,來得以對聲音進行分析與定位。從空間任意一點傳到人耳(鼓膜前)的信號都可以用一個濾波系統來描述,音源+濾波器(傳遞函數)得到的就是聲音到達兩耳鼓膜前的信號。
HRTF 圖示。人耳對聲音信號有一套自己的分析系統,來得以對聲音進行分析與定位。
我們不必關心聲音是如何傳遞到雙耳的,而只需要知道:音源與到達我們雙耳之前的信號是有差別的;并且我們的左耳和右耳聽到的聲音是不一樣的。這可能是源于我們的進化,視覺沒有辦法在黑夜中定位,而耳朵可以通過左右耳的聲音不同,進行定位與防御。
這個濾波器(傳遞函數)叫 HRTF ( head-related transfer function )。如果我們有空間所有方位到雙耳的濾波器組,就能得到一個濾波矩陣,從而還原來自整個空間方位的聲音信號。
HRTF 是極具個人性的。每個人成長中都會形成一套自己對聽力的感知。并且,我們每個人的頭部大小不一樣、耳間距不一樣,耳朵的輪廓、里面的旋渦狀也不一樣。加上,我們在成長當中養成了自己獨特的聽力習慣。可以這么說,每個人聽到的同樣物體發出的聲音,其實都有細微差別。
如何還原人耳真實聽到的聲音?科學家對此的探索不是今天的新事。在將近一個世紀之前,1933 年,AT&T 貝爾實驗室就把這項技術帶到了芝加哥世博會上。這家公司的人聲研究部做了一個機械化的仿真人頭——他們把這個假人取名叫 “Oscar”。Oscar 的耳朵里裝上了兩個麥克風,坐在展示房間中,錄取周圍的聲音。Oscar 聽到什么,他就能錄到什么。
AT&T 貝爾實驗室提供的解決方案叫做雙耳錄音技術(Binaural Audio)。
雙耳錄音技術模擬人類真正的頭部的形狀、左右耳的耳間距,可以收錄到近乎于真正的人類聽到的聲音。這是一種有效的“笨方法”,物理層面上即還原了 HRTF。沿著這條路徑,德國麥克風公司紐曼 (Neumann) 在 1973 年到 1992 年間,連續在雙耳錄音技術上做出了各種突破——更好的收音設備、把麥克風放置于仿真假人耳內鼓膜上等等。
1933年,AT&T實驗室的雙耳錄音技術仿真人,Oscar。
雙耳錄音技術在這個世紀中一直處于緩慢的速度發展,原因在于,沒有強大的產業需求。一直等到這一波 VR 熱潮的來臨,它才重上舞臺。 由于 Oculus Rift , 索尼 Morpheus 以及三星 Gear 帶來的 VR 普及,3D 音頻技術迎來了它的 “文藝復興” ——于是它又被稱作了 VR 音頻。
下一篇: PLC、DCS、FCS三大控
上一篇: 索爾維全系列Solef?PV