虚拟制作追踪篇,奥斯卡最大赢家的技术密码

Xsens动作捕捉 2023-05-11 2673

虚拟制作追踪篇,奥斯卡最大赢家的技术密码  第1张

奥斯卡最大赢家——《沙丘》

近日,第94届奥斯卡获奖名单公布,电影《沙丘》横扫最佳视觉效果、最佳摄影、最佳艺术指导、最佳音效、最佳配乐、以及最佳剪辑六大奖项。十项提名,六次获奖,几乎包揽所有技术奖项,这样的亮眼战绩,无疑使它成了这场电影盛宴的最大赢家!

虚拟制作追踪篇,奥斯卡最大赢家的技术密码  第2张

《沙丘》的技术密码——DNEG

有网友评价:这部电影的视觉特效简直封神!确实,这部影片的主视效团队大有来头,让《沙丘》直接get流量密码!他们在过去八年中曾六次获得奥斯卡金像奖,本次获奖也标志着他们第七次获得奥斯卡“最佳视效奖”,这支团队就是大名鼎鼎的——DNEG

虚拟制作追踪篇,奥斯卡最大赢家的技术密码  第3张

虚拟制片系列短片——跟踪

20多年来,DNEG一直致力于探索VFX技术和艺术,并始终走在行业前沿。尤其是在近年来兴起的虚拟制片方面,DENG更是拥有最先进的技术与服务。近日,DNEG与动捕行业资深团队Dimension以及制作团队Sky Studios首次合作并推出了专注于虚拟制片的创新项目系列短片,展示了最先进的虚拟制片技术、工作流程和创意概念。目前该系列短片正在持续更新中,今天小迪先为大家带来其中关于“跟踪”的幕后技术分享,一起学习如何在虚拟制片中利用动作捕捉技术对摄影机跟踪、演员和道具进行跟踪吧。

虚拟制作追踪篇,奥斯卡最大赢家的技术密码  第4张

虚拟制片拍摄现场——案例展示

执导该项目的Paul Franklin也是DNEG的创意总监。他说:"我们将动捕的标记点放在其中一名演员拿着的手电筒道具上,然后使用捕捉到的手电筒数据在LED屏上驱动虚拟照明,演员使用手电筒指向LED屏,该位置就会出现一个光圈。这让我们与虚拟环境进行了一定程度的自发互动,在LED场景中产生了很好的现场感。让另一位表演者穿上动捕服,并利用捕捉到的表演数据来驱动屏幕上虚拟角色的实时运动。然后,挥舞手电筒的真人演员就能与屏幕上的虚拟角色实时互动,这就创造了一个现实中的人与虚拟角色紧密互动的戏剧场景。”

虚拟制作追踪篇,奥斯卡最大赢家的技术密码  第5张

LED屏前的动捕跟踪注意事项

与传统拍摄环境相比,在LED屏前进行动捕跟踪时,都有哪些注意事项呢?

Dimension 虚拟制作总监Tim Doubleday就这一问题给出了解答:

在LED拍摄环境中运行全身动捕技术时,首先要考虑的是动捕演员的真实表演与出现在LED屏上的被动捕数据驱动的虚拟角色之间的延迟时间。数据处理、图像渲染和数据传输到LED屏等环节都存在固有的延迟,只要这个延迟时间在可接受范围内,那么从镜头里看起来就没有问题。例如,你可以考虑这样一种情况,真实演员在LED屏前与一个CG角色击掌,如果延迟太多的话,那么CG角色将无法及时做出反应,那么这就是个失败的镜头。道具跟踪也是同样的道理。对于手电筒的示例,我们必须确保演员在物理空间中移动手电筒与CG手电筒的移动和将光线施加到LED屏上之间的延迟最小。因此,我们选择使用Vicon动作捕捉系统跟踪摄像机、道具和动捕演员,Vicon相较于其他产品的优势就是,它的延迟很小,几乎可以使LED屏中虚拟角色的动作与动捕演员的动作同步。

另外一重要的考虑因素是确保你使用的跟踪系统不会干扰可见光或影响摄像机的捕捉。在手电筒示例中,我们使用了反射红外光的被动发光标记点,但对于其他项目,我们使用的则是主动发光的标记点,这些被动发光标记点对实拍摄像机不可见,并且在关闭相机闪光灯的情况下也能正常运行。

确定动捕场地的位置也很重要。在这个项目的虚拟拍摄中,动捕演员、LED屏和真实角色的演员处于同一空间。这意味着他们可以互相扮演,演员可以在屏幕上看到自己,但这可能会使演员分散注意力,所以可以考虑使用一个完全独立的动捕场地,这样演员就可以专注于他们的表演,而不会受到LED屏的影响。

最后,真实角色和虚拟角色之间的视线以及视角差异也同样需要引起注意。

虚拟制作追踪篇,奥斯卡最大赢家的技术密码  第6张

动捕实时驱动的CG角色利用情形

在哪些情形下可以充分利用虚拟制片中动捕实时驱动的CG角色呢?

Tim Doubleday认为:

拥有一个活生生的动捕角色的主要好处是,它允许场景是动态的,并且动捕演员可以实时对CG角色进行操控和做出反应。当然了,想要实时交付最终质量的CG角色还是很困难的,但通过同时记录摄像机运动和CG角色运动,在后期进行传统的VFX处理,以提供电影和电视所需的更高质量的渲染。

虚拟制片还可以帮助实现演员与CG环境的互动。例如,演员挥手并让LED屏上的虚拟环境做出移动虚拟灯光或树叶掉落等反应。这些事情都可以通过跟踪演员来实现,并使演员的表演和LED屏上看到的内容之间更加和谐,给演员带来一种沉浸式的体验感。

LED屏和增强现实体验为将动作捕捉与现场表演相结合提供了可能,Vicon动捕技术对摄影机的追踪更是开辟了一个充满无限可能的世界,运用这些虚拟制片技术可以创造令人惊叹的互动和视觉体验。

虚拟制作追踪篇,奥斯卡最大赢家的技术密码  第7张

结语

迪生数字专注虚拟制作,提供完整的虚拟制片、动作捕捉和动画制作解决方案及技术服务,为您的艺术创作激发无限可能!

小迪将持续关注DNEG的虚拟制片创新项目系列短片,并与大家一起分享。关注迪生,了解更多虚拟制作动态和服务。

The End