Facebook：體三維相機的潛力不僅僅是VR 對傳統視頻行業同樣有巨大顛覆潛能

　　2018年12月19日，在九月底，Facebook揭曉了與RED合作開發的體三維360度相機。名為Manifold的新系統不僅是VR領域的拓荒者，它對傳統的視頻行業同樣有著巨大的顛覆潛能。

　　1. 什么是體三維視頻（Volumetric Video）？

　　體三維視頻可以捕捉真實世界對象，捕捉人與物的移動圖像，然后用戶可以從任意角度進行自由瀏覽。

　　根據MarketsandMarkets的一份最新調查報告，體三維視頻市場的規模預計將從2018年的5.783億美元增長至2023年的27.8億美元。

　　對于Manifold這樣的體三維相機，大多數媒體的焦點都在于它有望創建出更具沉浸感，更加引人入勝的VR內容。當結合Oculus Rift或Quest等頭顯設備中的定位追蹤系統時，體三維視頻能夠允許用戶自行導航這個全新的世界。

　　就本質而言，觀眾可以成為自己的導演，按照本人心意選擇每一個“鏡頭”。但相同的承諾同樣給予了傳統導演們一種前所未有的能力。

　　攝影指導安德魯·蘇爾凱德(Andrew Shulkind)曾在OC5大會主持了一場介紹Manifold相機的討論會，他表示：“如果要我說(Manifold)不是為VR而生，那我就顯得太愚蠢了。事實顯然就是這樣，但實際上又不僅僅只局限于此。”

　　2. 這意味著什么？

　　“不僅僅只局限于此”的概念對Facebook的合作伙伴RED而言最有吸引力。

　　體三維視頻的應用不僅只局限于360度視頻和VR，RED首席技術官烏迪·馬瑟(Uday Mathur)表示，Manifold在VFX視覺特效方面的潛力令他感到最為興奮。事實上，他們認為在VR生態系統得到進一步的發展之前，這將成為相機的主要應用。

　　馬瑟說道：“我們目前認為這可以搭配傳統的攝影機，并提供一種在后期制作環節中進行調整的不同場景視圖。它可以承擔拍攝的職責，并在一定程度上減輕片場中的負荷。這在創意方面給后期制作團隊提供了靈活度。”對于傳統影視項目而言，這款相機用于拍攝沉浸式內容的可能性不是最重要的一點。RED的首席技術官補充說：“對于傳統的電影攝影師來說，這是一種全新的工具類型，它同時能夠實現一種全新類型的體驗。”

　　3. 工作原理

　　體三維視頻從多個視角捕捉場景，然后相關信息將用來創建所述空間的深度圖。Manifold搭載了16個RED Helium 8K傳感器，每個都配備定制的施耐德180度8nm魚眼鏡頭，光圈是F/4.0。

　　跟大多數其他360度相機一樣，Manifold可以將各個視頻片段拼合成3D 360度視頻。但多個相機視角可用來生成深度圖(對于這一點，Facebook與Otoy進行了合作)，以及場景的無線視角。

　　在錄制完體三維視頻后，其應用將十分廣泛：為目標項目創建額外的asset，同時可作為其他無數項目的虛擬布景。

　　4. 新的解決方案，新的問題

　　對于Manifold等體三維視頻相機解決的每一個問題，它同時帶來了新的問題。不難想象，諸如這樣的設置意味著需要捕捉和儲存大量的數據。

　　盡管Manifold的單條SMPTE 304M數據線令數據傳輸比多條數據線，多個SD卡等更加簡單，但絕不代表著這是一種操作簡易，容易上手的設置。

　　對于這個問題，Facebook和RED的解決方案是等待。隨著時間的推移，馬瑟認為儲存的成本會“更低”，而儲存量同樣會更小。但就目前而言，儲存問題是這款相機應用于工作室以外的首要限制之一，而在我看來，具備如此強悍性能的相機只有在工作室之外的用例中才能真正發光發熱。

　　體三維視頻同時提出了新的工作流程挑戰。Facebook已經與Adobe，CaraVR，Nuke，Foundry和Otoy等后期軟件公司進行了合作，為這種類型的視頻構建相應的工作流程。但重點不僅只是工具，同時還包括人與過程。

　　例如，你需要后期，前期與制作團隊在更早的階段進行更多協作。制作團隊需要更深入地參與其中，從而確保后期團隊能夠匹配最初的框架。

　　Facebook工程總監布萊恩·卡布羅(Brian Cabral)表示：“拍攝團隊的部分位置甚至需要裁掉。”但這同時會帶來新的職位。例如，由于每一個對象的完美連貫性是關鍵，卡布羅認為需要有人確保沒有人移動場景中的任何一切。

　　卡布羅認為一切都還很遙遠。但他指出，Manifold是Facebook過去五年對沉浸式視頻領域探索的成果，同時是下一五年的開始。

　　他將Manifold比作是自己在英偉達時期的工作：開發第一款通用GPU。卡布羅說道：“現在(通用GPU)已經是司空見慣。我們將開始看到大家拍攝出有趣的情景，不僅只是面向VR，而未來所有這一切都將成為司空見慣的場面。”

　　他繼續道：“當然，你要把一兩個帶到片場。我們會捕捉一切，我們會創建VR asset，我們會創建AR asset，我們會創建2D asset…這將產生成噸的創意。”

　　5. 其他玩家，其他方法

　　當然，Facebook不是唯一一家正在投資體三維視頻的企業，而像Manifold這樣的系統也絕對不是唯一的解決方案。例如，英特爾在今年一月在洛杉磯開設了一家體三維視頻工作室。

　　與由內向外的Manifold不同，英特爾選擇了由外向內的解決方能。Intel Studios包含了1萬平方英尺的捕捉區域，并配備了多臺相機。

　　英特爾的技術已經用于一系列的橄欖球館，從多個角度捕捉賽事攻防，并創建360度的集錦與球員視角視頻。然而，英特爾同時在與派拉蒙進行合作，探索體三維視頻在影視領域的應用。

　　但對于英特爾的方案，無論Manifold的價格如何，每15秒處理高達1TB的數據量要比Facebook的內向外體三維視頻捕捉方法更加嚴苛。

　　另外，對于在高度可控的有限空間內進行人與物的高質量捕捉而言，外向內體三維可能是一種理想的方案，但對于工作室之外的空間捕捉而言，內向外體三維方案更加靈活。

　　谷歌同樣把觸角伸向了這一領域。當光場相機廠商Lytro于今年年初宣布關門時，谷歌挖走了相當一批員工。

　　光場相機從每一個方向記錄光線，并利用這種信息來在3D中映射出一個相應的空間。例如，Lytro的Immerge相機系統為觀眾提供了一米的自由移動空間，而里面包含相當逼真的紋理與照明。

　　盡管Lytro的相機技術允許創建者在后期改變景深，焦點，快門速度和光圈，并且消除了綠幕的需要，但這家公司在2015年把主方向瞄準了VR。

　　Facebook和RED從一開始就表明，Manifold不僅只是一臺VR相機。蘇爾凱德在OC5大會時曾表示：“(Manifold)的優勢在于，它是終極的多功能工具。”他認為這款相機創建的內容不僅可用于VR頭顯，同時能夠支持智能手機或電視機。

　　他說道：“(Manifold)不單單只是為了VR或AR，又或者是沉浸式娛樂的未來，其重點在于編寫未來內容的代碼，以及我們應如何參與其中。我可以看到內容的方方面都存在相關關系，這令我感覺自己不會錯過任何一幕，我能夠以不同的角度來瀏覽每一個鏡頭。”一臺相機即可捕捉一切。

　　無論你是否相信，這是一個十分誘人的愿景。

　　不過，Facebook和RED尚未公布Manifold的發售日期與價格。當前形態下的相機存在相當一部分限制，而且我們將需要一定的時間才能理清它對影視行業的顛覆。

　　我明白體三維視頻存在一系列的不確定性，但我可以肯定的是，體三維視頻存在廣闊的應用，包括虛擬現實，以及虛擬現實以外的領域。