Facebook：体三维相机的潜力不仅仅是VR 对传统视频行业同样有巨大颠覆潜能

　　2018年12月19日，在九月底，Facebook揭晓了与RED合作开发的体三维360度相机。名为Manifold的新系统不仅是VR领域的拓荒者，它对传统的视频行业同样有着巨大的颠覆潜能。

　　1. 什么是体三维视频（Volumetric Video）？

　　体三维视频可以捕捉真实世界对象，捕捉人与物的移动图像，然后用户可以从任意角度进行自由浏览。

　　根据MarketsandMarkets的一份最新调查报告，体三维视频市场的规模预计将从2018年的5.783亿美元增长至2023年的27.8亿美元。

　　对于Manifold这样的体三维相机，大多数媒体的焦点都在于它有望创建出更具沉浸感，更加引人入胜的VR内容。当结合Oculus Rift或Quest等头显设备中的定位追踪系统时，体三维视频能够允许用户自行导航这个全新的世界。

　　就本质而言，观众可以成为自己的导演，按照本人心意选择每一个“镜头”。但相同的承诺同样给予了传统导演们一种前所未有的能力。

　　摄影指导安德鲁·苏尔凯德(Andrew Shulkind)曾在OC5大会主持了一场介绍Manifold相机的讨论会，他表示：“如果要我说(Manifold)不是为VR而生，那我就显得太愚蠢了。事实显然就是这样，但实际上又不仅仅只局限于此。”

　　2. 这意味着什么？

　　“不仅仅只局限于此”的概念对Facebook的合作伙伴RED而言最有吸引力。

　　体三维视频的应用不仅只局限于360度视频和VR，RED首席技术官乌迪·马瑟(Uday Mathur)表示，Manifold在VFX视觉特效方面的潜力令他感到最为兴奋。事实上，他们认为在VR生态系统得到进一步的发展之前，这将成为相机的主要应用。

　　马瑟说道：“我们目前认为这可以搭配传统的摄影机，并提供一种在后期制作环节中进行调整的不同场景视图。它可以承担拍摄的职责，并在一定程度上减轻片场中的负荷。这在创意方面给后期制作团队提供了灵活度。”对于传统影视项目而言，这款相机用于拍摄沉浸式内容的可能性不是最重要的一点。RED的首席技术官补充说：“对于传统的电影摄影师来说，这是一种全新的工具类型，它同时能够实现一种全新类型的体验。”

　　3. 工作原理

　　体三维视频从多个视角捕捉场景，然后相关信息将用来创建所述空间的深度图。Manifold搭载了16个RED Helium 8K传感器，每个都配备定制的施耐德180度8nm鱼眼镜头，光圈是F/4.0。

　　跟大多数其他360度相机一样，Manifold可以将各个视频片段拼合成3D 360度视频。但多个相机视角可用来生成深度图(对于这一点，Facebook与Otoy进行了合作)，以及场景的无线视角。

　　在录制完体三维视频后，其应用将十分广泛：为目标项目创建额外的asset，同时可作为其他无数项目的虚拟布景。

　　4. 新的解决方案，新的问题

　　对于Manifold等体三维视频相机解决的每一个问题，它同时带来了新的问题。不难想象，诸如这样的设置意味着需要捕捉和储存大量的数据。

　　尽管Manifold的单条SMPTE 304M数据线令数据传输比多条数据线，多个SD卡等更加简单，但绝不代表着这是一种操作简易，容易上手的设置。

　　对于这个问题，Facebook和RED的解决方案是等待。随着时间的推移，马瑟认为储存的成本会“更低”，而储存量同样会更小。但就目前而言，储存问题是这款相机应用于工作室以外的首要限制之一，而在我看来，具备如此强悍性能的相机只有在工作室之外的用例中才能真正发光发热。

　　体三维视频同时提出了新的工作流程挑战。Facebook已经与Adobe，CaraVR，Nuke，Foundry和Otoy等后期软件公司进行了合作，为这种类型的视频构建相应的工作流程。但重点不仅只是工具，同时还包括人与过程。

　　例如，你需要后期，前期与制作团队在更早的阶段进行更多协作。制作团队需要更深入地参与其中，从而确保后期团队能够匹配最初的框架。

　　Facebook工程总监布莱恩·卡布罗(Brian Cabral)表示：“拍摄团队的部分位置甚至需要裁掉。”但这同时会带来新的职位。例如，由于每一个对象的完美连贯性是关键，卡布罗认为需要有人确保没有人移动场景中的任何一切。

　　卡布罗认为一切都还很遥远。但他指出，Manifold是Facebook过去五年对沉浸式视频领域探索的成果，同时是下一五年的开始。

　　他将Manifold比作是自己在英伟达时期的工作：开发第一款通用GPU。卡布罗说道：“现在(通用GPU)已经是司空见惯。我们将开始看到大家拍摄出有趣的情景，不仅只是面向VR，而未来所有这一切都将成为司空见惯的场面。”

　　他继续道：“当然，你要把一两个带到片场。我们会捕捉一切，我们会创建VR asset，我们会创建AR asset，我们会创建2D asset…这将产生成吨的创意。”

　　5. 其他玩家，其他方法

　　当然，Facebook不是唯一一家正在投资体三维视频的企业，而像Manifold这样的系统也绝对不是唯一的解决方案。例如，英特尔在今年一月在洛杉矶开设了一家体三维视频工作室。

　　与由内向外的Manifold不同，英特尔选择了由外向内的解决方能。Intel Studios包含了1万平方英尺的捕捉区域，并配备了多台相机。

　　英特尔的技术已经用于一系列的橄榄球馆，从多个角度捕捉赛事攻防，并创建360度的集锦与球员视角视频。然而，英特尔同时在与派拉蒙进行合作，探索体三维视频在影视领域的应用。

　　但对于英特尔的方案，无论Manifold的价格如何，每15秒处理高达1TB的数据量要比Facebook的内向外体三维视频捕捉方法更加严苛。

　　另外，对于在高度可控的有限空间内进行人与物的高质量捕捉而言，外向内体三维可能是一种理想的方案，但对于工作室之外的空间捕捉而言，内向外体三维方案更加灵活。

　　谷歌同样把触角伸向了这一领域。当光场相机厂商Lytro于今年年初宣布关门时，谷歌挖走了相当一批员工。

　　光场相机从每一个方向记录光线，并利用这种信息来在3D中映射出一个相应的空间。例如，Lytro的Immerge相机系统为观众提供了一米的自由移动空间，而里面包含相当逼真的纹理与照明。

　　尽管Lytro的相机技术允许创建者在后期改变景深，焦点，快门速度和光圈，并且消除了绿幕的需要，但这家公司在2015年把主方向瞄准了VR。

　　Facebook和RED从一开始就表明，Manifold不仅只是一台VR相机。苏尔凯德在OC5大会时曾表示：“(Manifold)的优势在于，它是终极的多功能工具。”他认为这款相机创建的内容不仅可用于VR头显，同时能够支持智能手机或电视机。

　　他说道：“(Manifold)不单单只是为了VR或AR，又或者是沉浸式娱乐的未来，其重点在于编写未来内容的代码，以及我们应如何参与其中。我可以看到内容的方方面都存在相关关系，这令我感觉自己不会错过任何一幕，我能够以不同的角度来浏览每一个镜头。”一台相机即可捕捉一切。

　　无论你是否相信，这是一个十分诱人的愿景。

　　不过，Facebook和RED尚未公布Manifold的发售日期与价格。当前形态下的相机存在相当一部分限制，而且我们将需要一定的时间才能理清它对影视行业的颠覆。

　　我明白体三维视频存在一系列的不确定性，但我可以肯定的是，体三维视频存在广阔的应用，包括虚拟现实，以及虚拟现实以外的领域。