創(chuàng)建臨場感的關(guān)鍵 Virtuleap聯(lián)合創(chuàng)始人談空間音頻設(shè)計(jì)

　　2018年11月20日，XR從業(yè)者都意識(shí)到，空間音頻設(shè)計(jì)是創(chuàng)建臨場感的關(guān)鍵。Virtuleap聯(lián)合創(chuàng)始人兼首席執(zhí)行官阿米爾·波索格扎德(AMIR BOZORGZADEH)不久前參加了NYVR Expo，并再次深深意識(shí)到空間音頻之于VR/AR的重要性。波索格扎德日前撰文強(qiáng)調(diào)了這一點(diǎn)，以下是映維網(wǎng)的具體整理：

　　喬治·盧卡斯曾經(jīng)說過“聲音占體驗(yàn)的一半”，而這句話獲得了無數(shù)的認(rèn)同。如果這是實(shí)施，這將對(duì)VR和AR設(shè)置的等式產(chǎn)生什么影響呢?

　　因?yàn)槌两�式世界是現(xiàn)實(shí)世界的創(chuàng)意模擬，聲音和聽覺函數(shù)發(fā)揮的作用遠(yuǎn)遠(yuǎn)超過我們的預(yù)期。

　　在我參加的NYVR Expo中，聲音設(shè)計(jì)師與聽力和聽覺科學(xué)博士勞拉·辛諾特(Laura Sinnott)表示：“聲音通常是事后之物。聲音看不見。它是分子的振動(dòng)，我們不能把它握在手中，它只是在時(shí)間上存在，并且是運(yùn)動(dòng)中物體的聲波表達(dá)。”

　　確實(shí)，我們需要承認(rèn)這樣一個(gè)事實(shí)：對(duì)于成長于充斥著各類雜音的現(xiàn)代世界的我們，我們的大腦通過麻痹或關(guān)閉大部分頻譜來進(jìn)行應(yīng)對(duì)和適應(yīng)。一切都是為了精簡我們的日常生活。

　　1. 聽覺復(fù)興

　　辛諾特最近向我解釋了基礎(chǔ)聽覺對(duì)我們存在的重要性：它不僅是一種交流媒介，同時(shí)是我們情感幸福，認(rèn)知的關(guān)鍵，同時(shí)與我們當(dāng)前的現(xiàn)實(shí)相比，它與過去更具相關(guān)性，甚至對(duì)我們的生存也更為重要。她指出，音頻是第一種在子宮中發(fā)育的感覺，其主要是與我們的本能中心相連。盡管它是一種我們已經(jīng)失去了顯著敏感性的感覺，但XR有可能幫助恢復(fù)它。

　　辛諾特表示：“聽覺是最原始的感官之一。盡管晚于平衡系統(tǒng)，但它的進(jìn)化很有可能早于視覺。無論是為網(wǎng)絡(luò)設(shè)計(jì)沉浸式音頻，還是設(shè)計(jì)傳統(tǒng)的單聲道無線廣播，設(shè)計(jì)師都需要對(duì)聲音的強(qiáng)大有一定的理解。”

　　即使這種主要感官器官在我們的集體意識(shí)中已經(jīng)降級(jí)為扮演第二小提琴角色，對(duì)于上月充滿了空間音頻專家的NYVR Expo令我相信，XR可以重新為聽覺的復(fù)興打開一扇大門。在一個(gè)主題環(huán)節(jié)中，幻燈片上寫著：“我們的眼睛只能看到我們面前的元素，但我們的耳朵可以把世界帶到我們身邊。”

　　2. 空間音頻設(shè)計(jì)是關(guān)鍵

　　在嘗試創(chuàng)建能夠令我們大腦確信所處之地為真實(shí)世界的體驗(yàn)時(shí)，XR創(chuàng)作者很快就會(huì)認(rèn)識(shí)到聲音從來就不是二等公民。他們明白這一點(diǎn)。在上月一篇我非常推薦大家閱讀的博文中，臺(tái)灣配樂師與音頻設(shè)計(jì)師張宥程寫道：“如果沒有合適的音頻設(shè)計(jì)，敘事體驗(yàn)將失去其魅力，而世界也不會(huì)那么令人信服。”

　　延伸閱讀：從聲效、音樂、氛圍、對(duì)話談VR體驗(yàn)的音頻設(shè)計(jì)經(jīng)驗(yàn)與教訓(xùn)

　　如果空間音頻不存在，或者更糟糕的是，在某種形式或形態(tài)上不匹配，這將會(huì)成比例地對(duì)臨場感的質(zhì)量產(chǎn)生影響。我們的身體本能和情感心智同樣會(huì)參與至沉浸式內(nèi)容，因此糟糕的空間音頻設(shè)計(jì)可能不合適和令人感到不舒服，比如說偽劣的視頻拼接。

　　3. 聲音是核心體驗(yàn)層

　　事實(shí)上，空間音頻是我們認(rèn)知的基礎(chǔ)層次，它對(duì)我們存儲(chǔ)和回憶過去的能力有重大影響。

　　電影，電視，廣告和新媒體作曲家兼多樂器演奏家杰夫·麥克帕登(Jeff McSpadden)說道：“正如‘體驗(yàn)之錐’圖表所示，當(dāng)你為體驗(yàn)添加音頻時(shí)，學(xué)習(xí)留存率就會(huì)提高。視覺和聲音的結(jié)合帶來了進(jìn)一步的提升(這就是為什么視頻變得如此受歡迎的原因)，但當(dāng)學(xué)習(xí)者沉浸在視覺和聽覺之中時(shí)，就像大多數(shù)XR一樣，這可以帶來90%的學(xué)習(xí)留存。”

　　麥克帕登是沉浸式音頻設(shè)計(jì)的先驅(qū)，同時(shí)是Composure和Prime8的首席執(zhí)行官。前者是一家利用空間音頻和交互式音頻來減輕壓力和提升幸福感的科技公司;后者則是一家專注于聲音視覺項(xiàng)目的創(chuàng)意實(shí)驗(yàn)室。

　　他解釋道：“對(duì)于Composure，我們正在研究交互式空間音頻在當(dāng)作為沉浸式體驗(yàn)焦點(diǎn)時(shí)的強(qiáng)大功能。我們的目標(biāo)是創(chuàng)造定制的音樂體驗(yàn)，幫助減輕用戶壓力并促進(jìn)積極情緒狀態(tài)。有大量證據(jù)表明，被動(dòng)地聆聽音樂有助于控制壓力，但當(dāng)他們主動(dòng)參與時(shí)，放松和集中注意力的效果將會(huì)增加。”

　　AR可穿戴設(shè)備同樣有所幫助。麥克帕登描述了一種增強(qiáng)聽覺體驗(yàn)，而非予以替換的解決方案。比如說17年3月宣布的Bose AR眼鏡，他們同時(shí)完成了5000萬美元的融資以培育一個(gè)相關(guān)的生態(tài)系統(tǒng)。

　　麥克帕登認(rèn)為Bose的入局對(duì)每一個(gè)人都有好處，尤其是盲人。空間音頻可以在培訓(xùn)，教育和娛樂等方面為其提供巨大的幫助。Bose AR眼鏡可以成為加速增強(qiáng)音頻成為我們?nèi)粘Ｉ�活一部分的墊腳石。

　　4. 擴(kuò)展心理聲學(xué)研究

　　XR同時(shí)可以作為科學(xué)和研究領(lǐng)域的延伸，幫助科學(xué)家更好地理解聲學(xué)體驗(yàn)。正如辛諾特所描述的那樣，當(dāng)你移除物理空間并且沒有物體反射聲波時(shí)，環(huán)境將會(huì)發(fā)生什么情況呢?這時(shí)XR就可以派上用場。

　　劍橋大學(xué)和紐約市立大學(xué)的心理學(xué)家與音樂家大衛(wèi)·格林伯格(David M. Greenberg)博士表示：“消聲室改變了通常聽到的聲音的頻率。XR技術(shù)能夠控制音樂的頻率和振動(dòng)特性，從而真正改善聲音和音樂。”

　　但無論是面向消費(fèi)者的應(yīng)用，企業(yè)實(shí)施還是心理聲學(xué)研究，沉浸式設(shè)計(jì)將毫無疑問地提升我們對(duì)聲音作用的理解，并同時(shí)提高我們對(duì)其價(jià)值和潛力的認(rèn)識(shí)。