容积捕获 —— 高水准的现实主义

容积捕获 —— 高水准的现实主义

Photo from 头号玩家

5G、AI、VR、MR每每被提起,但距离真正的成熟落地仍需假以时日。Intel Studios的领头人Diego Prilusky 2月在Ted进行了有关容积拍摄技术(Volumetric Video)如何改变电影制作的演讲,将容积捕获(Volumetric capturing)又带入了普通大众的视野当中。

同时,一份今年年初发布的Global Volumetric Video Market Report显示,到2025年,全球容积拍摄视频的市场将从当下的14亿美元增长到58亿美元,复合年增长率达到了32.8%

其中,体育部门对3D内容采用的增加是推动容积拍摄视频市场增长的主要因素。

Intel公司在2017年就宣布与特纳体育(Turner Sports)建立合作伙伴关系,将虚拟现实和容积捕获技术带入了NBA。

此后,随着体育和娱乐领域对容积拍摄视频的需求越来越多,容积捕获视频的主要玩家们(包括Microsoft、Intel、Facebook等)纷纷与体育俱乐部合作,向客户提供最新的交互式产品。

2019年2月,Intel与曼城、利物浦足球俱乐部和阿森纳足球俱乐部合作,通过Intel在阿联酋体育场、安菲尔德和阿提哈德体育场的True View为观众提供沉浸式体验。英特尔的True View能够将容积拍摄数据转换为身临其境的3D回放。

不仅仅是在体育领域,容积捕获技术正在迅速渗透各大市场,各种活动方和创意广告对容积捕获技术的需求也在不断增长。其中,广告商们越来越乐意使用它来展示产品,向客户提供产品的逼真视图。

因为可以被广泛应用到演出、现场活动、产品发布、广告和促销、展览、演示和会议当中,有人认为,下一次沉浸式媒体的迭代会在由容积捕获技术驱动的3D内容中发生。



容积捕获是实现6DoF全景视频的关键,也一直被看作是360度全景拍摄技术的后继者。

在传统理念中,当我们想象一个场景时,我们会首先考虑它的框架和构图,考虑如何在摄像机移动时使用前景、背景元素创建深度和视差。借助当今的技术以及智能设备如VR、AR眼镜等等,已经可以实现在空间中进行三维全方位导航,观众可以从多个角度体验场景内容。

Diego Prilusky表示,当下需要考虑的是如何利用这项技术使沉浸式的场景体验更加深入。

这一次,我们不是在谈论那些看起来非常逼真的视频游戏或计算机生成的虚拟人物,而是真正的演员和真实的表演,以及如何去捕捉真实场景以获取沉浸式的观影体验。

容积捕获 —— 高水准的现实主义

Photo of Intel Studios

Presence Capital的高管Phil Chen曾评价说:“360度视频的捕获方法对于虚拟现实(Virtual Reality)来说是错误的,容积捕获(Volumetric capture)才是创意人员、电影导演、制片人所需的新方式。”

我们现在所熟悉的360度全景视频,是将相机放置在场景当中,并创建出包围式的全景图像。但从电影拍摄的角度来看,这并不足够,因为观众在这样的场景中只能转头,而不能四处行走。

为了完全沉浸在场景中,Diego表示需要从所有可能的方向捕获光线。为此,要使用大量传感器围绕该场景,并及尽所能来捕捉光线,使观众很快可以再次浸入场景之中。

在这样一个场景设置中,将不再有前景或背景,也无需放置摄像头,取而代之的是数百个传感器,它们从各个可能的方向捕获光线和动作。

我们都知道,3D摄影通过从多个角度捕获光线来重建目标物,而容积拍摄则类似于应用到空间维度的3D摄影。也就是说,我们不仅可以将视频录制为平面的,还可以录制成立体的,“容积拍摄”具有将场景的每个动作记录为完整的三维空间的能力。

Intel Studios则是利用容积捕获进行真实电影拍摄的试验场,这是一个百老汇舞台大小的容积式摄影棚。在这里,数百台摄像头可以从任意位置捕捉光线和动作,并将大量信息发送到由Intel超级计算机支持的数据中心。

容积捕获 —— 高水准的现实主义

Photo of Intel Studios

Diego Prilusky团队选择用西部片的场景来测试用容积摄影技术拍摄电影的想法。尘土、马匹等美国西部片的元素纷纷到场后,演员们必须执行从各个方向可见的完美动作,因为他们在舞台上的一切一切都将被捕获、被处理,然后被看到。

这场测试的效果是惊人的。就像整个场景被完整地3D扫描了一样,人们能够在这个创造出来的空间中自由移动,而不仅仅是去感知大屏幕发出的光,用 Diego 的话说,是可以“traveling inside the light,traveling inside the scene”。

想象一下,你不仅可以观看电影,还可以走进电影场景中与演员们共舞,这难道还不够激动人心吗。这显然打破了传统的2D思维方式,并带来了更丰富的电影制作和内容创作的可能性。

与此同时,Diego也表示,Intel Studios并不是在尝试更改或替换电影,而是在增强它们。




目前,韩国最大的娱乐公司之一——SM娱乐公司已经确定与Intel Studios合作,应用容积捕获技术为艺人制作全新的互动性内容,为粉丝带去与偶像更真实的互动体验的福利,所有内容将在2020年下半年制作完成。

其实,容积拍摄手法在几年前就有被尝试过。VR 电影工作室 Within曾经使用 Lytro 公司的 Immerge 光场相机拍摄了《哈利路亚(Hallelujah)》(Leonard Cohen 在 1984 年创作的歌曲,非常推荐),将容积捕获内容与精湛的空间音频结合了起来。

软件公司8i也曾在2016年的圣丹斯电影节上展映了其用3D容积捕获技术拍摄的纪录片#100humans,反响十分热烈。

容积捕获 —— 高水准的现实主义

Photo from 8i #100humans

8i最擅长的是采用容积捕获的方式来捕捉人物的全息影像,通过训练多个摄像头对人物进行拍摄,并将照片拼接起来形成 3D 影像,许多好莱坞的明星都曾在8i制作过全息影像。

“VR教母” Nonny de la Peña曾称赞容积捕获技术是一种“

高水准的现实主义”,用 VR来打造一种新形式的“沉浸式的新闻”也在正成为新闻记者未来(甚至是当下)工作的一部分。

Global Volumetric Video Market Report还指出,容积捕获视频工作室的数量不断增长,也带动了对相应的软硬件市场的需求。

除了近期在Ted上介绍自家电影工作室的Intel, Microsoft Mixed Reality Capture Studio与Hammerhead VR和Digital Catapult也在2017年就合作推出了Dimension视频和3D捕获工作室。

2018年6月,VoluCap在柏林成立了一个容积式视频捕获工作室。

2019年7月,尼康公司的Mark Roberts Motion Control(MRMC)与Dimension合作推出了一个名为Polymotion Stage的移动端多重解决方案体积捕获工作室。

与此同时,在预期内,亚太地区的容积拍摄视频市场将以最高的复合年增长率增长。这种增长可以归因于专业创意工作室数量的增长。

报告中给出的例子是澳大利亚的Voxon Photonics 2019年10月推出的VX1全息图桌子。

容积捕获 —— 高水准的现实主义

Photo of VX1全息图桌子

这张桌子可以创建看起来像是漂浮在空中的交互式3D图像,人们只需站在桌子周围,不需要任何视觉辅助便可以观赏到“空中的全息图”。




但单从Diego Prilusk Ted演讲的评论区来看,人们对容积捕获这项技术应用到影视制作中仍存有较大的疑虑,比如过于真实可感的细节展示是否会分散观众的注意力,分毫不差的技术应用下电影艺术如何保持自身的独特性等等。

有的观众认为容积捕获这种高度还原现实的功能永远不可能理想地适用于传统的电影或电影格式,因为人们将不知道要走去哪里,要看向哪里,或者需要怎么看才能理解故事,甚至怀疑人们将感受不到艺术本身的魅力。

和许多新技术问世不久时的状况一样,人们对于容积捕获被应用到电影、比赛、会展中的方式、效果及体验都充满了不确定(甚至是不信任),认为这一切都“太令人困惑了”的观众似乎也占据了大多数。

但也有不少人对这一新技术的落地感到兴奋与期待,并强烈建议用容积捕获去记录下一个美术馆、一家博物院。

科技的进步与个性化的抹杀永远需要寻求平衡, 但当看到年逾古稀的David Hockney都开始用ipad画画了,我们还有什么理由不去拥抱新技术呢。

容积捕获 —— 高水准的现实主义

Picture by David Hockney from Window to the World

英国画家David Hockney从2019年开始,用ipad日复一日地记录着自己窗外的景色,他今年已经83岁了。



References:

https://finance.yahoo.com/news/global-volumetric-video-market-forecast-105858483.html

https://www.ted.com/talks/diego_prilusky_how_volumetric_video_brings_a_new_dimension_to_filmmaking/transcript#t-706700

https://mp.weixin.qq.com/s/kq1h9Uu5MCARLCnkxgbahw

https://mp.weixin.qq.com/s/xE73xEC2v9aQ1deEEzDuXw

https://mp.weixin.qq.com/s/1WNApNIa1GBPe94SbhNeFQ

https://mp.weixin.qq.com/s/P-v0zeONUvCaLPSoyxl6NA

https://mp.weixin.qq.com/s/MtS0DeSxtdeCTnafEDGU9A

https://mp.weixin.qq.com/s/PyiYZwlTrHgXNIn7UypnCg

https://mp.weixin.qq.com/s/wcdGm3itQSExBQL01LDiQQ


分享到:


相關文章: