全球影视进入虚拟制片时代,这些应用实例绝对让你震撼!

全球影视行业正在经历一场颠覆与创新并存的革命。
科技让影视制作方式以极高的速度更新迭代,过去只有少数几个大制片公司才能做到的事,现在每个心怀电影梦的人也有能力实现。
2020年,从电影鸿篇巨制,到小成本独立影视项目,“实时引擎”已经逐渐被应用到影视制作领域;
“虚拟制片”成了影视行业的年度最热词。
Epic Games与奥斯卡、艾美、BAFTA获奖电影人和软件工程师们一起,正在用虚幻引擎的实时技术,突破影视制作的边界。
01
“虚拟制片”风靡好莱坞
2019年SIGGRAPH,虚幻引擎与合作伙伴们共同展示了一支“虚拟LED片场”(Virtual LED Stage)“摄影机内特效”(In-camera Visual Effects)的演示视频。
图片
图片
△ 虚幻引擎2019年发布的虚拟制片演示视频
一年后,“虚拟制片”这个概念就席卷了影视制作行业。
《曼达洛人》应用虚拟制片技术取得惊人效果、海外的疫情发展对影视制作产生影响……全球主流制片公司和团队很快就把目光投向虚拟制片。
图片
△ 《曼达洛人》的虚拟制片案例一出,整个行业为之震撼
为满足今年暴涨的关注和需求,虚幻引擎把专为影视行业举办的“虚拟制片峰会”特别升级为“Unreal Build”线上大会
图片
图片
△ 2020 Unreal Build
世界各地的影视从业者和技术爱好者都有机会了解虚拟制片的最新技术进展、市场洞察和行业案例。
虚拟片场(Virtual Stage)、摄影机内特效(In-camera Visual Effects)、虚拟探查(Virtual Scouting),实时渲染(Real-time Rendering)、多用户工作流程(Multi-user Work Flows)……这些虚拟制片技法在多大程度上改变了好莱坞
在2020 Unreal Build大会上,好莱坞顶级制片公司的高管们出现在圆桌讨论中,道出了自己对虚拟制片的真实看法和应用体验,下面先直接祭出他们的精彩观点。
图片
左至右,上至下:
Noah Kadner,《虚拟制片实践指南》作者
Christopher Cram,环球影业视效高级副总裁
Chris Del Conte,亚马逊影业视效全球负责人
Girish Balakrishnan,Netflix虚拟制片总监
Lynwen Brennan,卢卡斯影业执行副总裁兼总经理
Shari Hanson,派拉蒙影业实拍制片高级副总裁
图片
△ 高管们在圆桌讨论上各抒己见
与其说虚拟制片是种新技术,倒不如把它看成是一种“解决问题的方法”。
它史无前例地解决了创作过程中的沟通障碍。
当你觉得很难向别人描述某个拍摄场景,试着戴上VR头显,在3D场景里走上一圈,我相信所有人都会对场景规模、道具的体积和高度有一致的认知,这是团队共同创作故事的基础。
Girish Balakrishnan,Netflix虚拟制片总监
图片
△ 在VR里运行的工具集
虚拟制片的最大优点,是让制片流程中的“视效预览”(Previs)更高效。
导演和摄影指导在早期就对实时渲染出的画面效果做讨论、达成共识,减少了制作盲区,极大地提升了沟通和后期的效率。
Christopher Cram,环球影业视效高级副总裁
图片
△ 所见即所得
虚拟LED片场让主创们不受预算限制,可以在任何场景里拍摄——从突尼斯沙漠中心到太空——你呆在家附近,就能拍出任何场景中发生的故事。
Shari Hanson,派拉蒙影业实拍制片高级副总裁
图片
△ 同一面LED墙,随时“切换世界”
团队可以全程在线实时协作:
身在纽约的摄影指导能跟伦敦的特效公司实时沟通,洛杉矶的导演能和日本某制片部门无缝合作,全球艺术家用一种创新的流程工作。
Girish Balakrishnan,Netflix虚拟制片总监
一旦导演们尝试过虚拟制片,就再也回不去了……传统制片和虚拟制片不是割裂的,后者让前者更强大。
Lynwen Brennan,卢卡斯影业执行副总裁兼总经理
虚幻引擎的入门门槛不断降低,这让不同类型的创作者以极低的成本、极高的效率创作内容,让影视制作“大众化”。
更多创作者和更多影片类型流入市场、能够被看到——这才是行业的最大幸事。
Christopher Cram,环球影业视效高级副总裁
只要有台足够快的电脑,每个人都能尝试虚拟制片,基础技法都可以自学。应该把这项技术推广给更多影视人,让它成为普及的工具。
对很多生长于计算机和互联网时代的年轻从业者来说,在虚幻引擎里,他们可以直接“起飞”!
Lynwen Brennan,卢卡斯影业执行副总裁兼总经理
图片
目前的虚拟制片从业者大多来自游戏行业,游戏和影视行业是两套完全不同的“话语体系”;
如何向更多专业的影视从业者推广这项技术?这是我们面临的挑战。
Christopher Cram,环球影业视效高级副总裁
在主流制片公司的高管眼中,虚拟制片充满潜力;在现实中,已经有超过150个影视项目启用了全套虚拟制片工具。
你还在等什么呢?
图片
全球虚拟制片2020集锦视频(中文)>>
02
维塔惊人的毛发实时渲染短片
不断以逼真的影视特效震惊世界的维塔数码,最近推出一支效果极致的动画短片——《狐獴》
图片
△ 维塔出品的动画短片《狐獴》
‍‍‍很多人看过都不敢相信,这竟然是用虚幻引擎实时渲染出来的
图片
维塔数码《狐獴》实时毛皮效果短片 >>
与虚幻引擎合作四年有余的维塔数码,已经开发出一套自己的虚拟制片解决方案,包括虚拟LED片场、虚拟摄影机、表演捕捉等等。
维塔研发的LED场景像“乐高”一样可拆卸重组挪动,根据不同场景需要拼插组合、拉高降低,四处移动;
上面搭载了一套二维码系统,让场景可以被随时追踪,动态调整,很是实用。
图片
拍摄时,操作员人员坐在旁边操控虚幻引擎,一切现场发生的数据都被导入虚幻引擎;
图片
△ 虚幻引擎操作员
这儿多点光、那需要微调镜头角度……操作员实时控制一切,一切都被实时渲染、实时预览。
当得知虚幻引擎4.26版本将推出虚拟制片可用的全新毛皮系统时,维塔特效团队立刻想到要拿自己擅长的“毛皮效果”做测试。
众所周知,维塔数码创造过许多毛茸茸”的名角色,比如《猩球崛起》系列影片中以凯撒为代表的猩猩们。
图片
△ 《猩球崛起》系列电影
如果把我们的毛发数据导入虚幻引擎4.26的毛发系统中,然后以实时渲染出的角色和背景作为“最终画面”,能产生怎样的效果呢?
带着这个问题,维塔内部组成了一支特别项目小组,决定探索新的虚拟制片流程。
小组成员打算用狐獴和老鹰作为测试短片的主角。
他们先是去动物园里调研了真实动物的毛发密度、分区、尺寸细节和曲率,把这些数据在系统里做了些优化。
图片
图片
动画中的狐獴有40万根毛发,看起来浓密且生机勃勃。
图片
图片
制作老鹰的羽毛难度较高,因为它们具有独特的生理结构。
图片
△ 制作老鹰的羽毛而已...又不是科学实验
每根老鹰羽毛都由大量一丝一丝的毛发构成,动画短片中的老鹰有250万根毛发
图片
每根羽杆都必须保证是几何体、可以做绑定,而且每根羽毛上的倒刺都由发丝构成、沿着羽杆生长。
图片
图片
再说颜色。
现实中毛发和羽毛的生长模式、毛发色素沉淀的蛋白质原理以及释放的时间机制……这些都被用于调试实现狐獴绒毛或老鹰羽毛颜色的着色器。
所有线条、图案和颜色都在着色器中以程序化处理,这样才能实时渲染出逼近真实的效果。
图片
图片
△ 虚幻引擎着色器中的实时渲染和预览
要让角色“动”得逼真,这里就要用到一个应用插件——LiveLink
图片
在虚拟制片中,它经常被用于“把表演捕捉导入虚幻引擎”,而这却是动画师第一次在Maya里运用LiveLink实时预览动画效果
实时光照、角色拥有足够的毛量......动画师在如此条件下评估角色的姿态和动态,对实时创作出“最终画面”有莫大帮助。
图片
维塔制作这段短片,用的是搭载了英伟达GeForce RTX3090显卡的电脑。
即便是加载了全部毛发,电脑依然能以极快速度运行,在高帧率下实现顺畅的实时渲染和预览。
03
表情捕捉动画的实时渲染
好莱坞顶级动画人中流行一个说法:
Animation is Evolution.
(动画,在于进化。)
总有那么一小撮“技术控”,站在时代前沿,用新技术不断制造动画领域的“奇迹”。
AMGI工作室的“灵魂人物”、好莱坞资深动画人Colin Brady盛赞虚幻引擎的渲染效率
电影级渲染引擎2小时才能渲出一帧画面;
而用虚幻引擎追它的效果,6秒内就能渲好长达1分钟的情节。
图片
Colin Brady
AMGI工作室在虚幻引擎基础上,开发出一套动画工具,把“表演捕捉的实时渲染”无缝整合到现有的动画制作流水线中,让动画制作时间大大缩短。
图片
△ AMGI基于虚幻引擎打造动画工具
表演捕捉、特别是细致的表情捕捉,一直是实时渲染引擎的难点。
AMGI使用虚幻引擎LiveLink Face来实时捕捉“动捕演员”即兴表演的闪亮瞬间。
图片
表演捕捉数据在虚幻引擎中实时追踪、实时渲染,并自动导入Maya;
而且这些数据都是“双向流通”的,还能从Maya自由导入到虚幻引擎中,实现高质量表演捕捉动画的实时渲染。
图片
‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍《疯狂动物城》《无敌破坏王》的导演、奥斯卡和安妮奖获得者瑞奇·摩尔,《雪人奇缘》导演吉尔·卡尔顿,皮克斯动画角色设计师泰迪·牛顿等“大咖”纷纷参与到AMGI的动画技术讨论中,并表达出自己对新技术的好奇与支持。
图片
△ AMGI华丽的“大咖”声援团
04
《曼达洛人》背后的The Volume
很多人已经知道,为拍摄《曼达洛人》,工业光魔联合Epic Games专门搭建起一个22.86米宽、6.4米高的全LED虚拟片场——The Volume
图片
图片
图片
△ The Volume