数字技术革新影视内容！虚拟制作、生成式AI开创吸睛作品新路线
数字技术革新影视内容！虚拟制作、生成式AI开创吸睛作品新路线
影视娱乐在人类文化的发展过程中不仅是休闲娱乐形式，更是全球文化交流的重要载体。随着时代演变，影视内容的制作带动了相关技术的进化，从40年代的黑白电影到现在的数字化与虚拟制作技术，这些都体现了人类对软硬件科技的投入与创新。本文将通过几个近代"关键新型态"的影视产制技术案例，探讨新技术如何影响制作流程，并进一步改变创作者"讲故事"的方法。
从《魔戒》到《阿凡达：水之道》的影视制作技术演进
回顾21世纪，技术突破带来了许多具有里程碑意义的视效电影。首先是2000年初的《魔戒》三部曲，导演Peter Jackson与Wētā FX运用真人动作捕捉技术，让CG角色咕噜（Gollum）栩栩如生。接着是2008年的《班傑明的奇幻旅程》，其中的创新在于使用CG技术让演员看似衰老。2010年，Christopher Nolan在《全面啟動》中，与特效团队使用Previs技术作为拍摄前的镜头设计工具。而到了2022年的《阿凡达：水之道》，技术又迎来革新，从CG水体、水下表演捕捉，到实拍中的SimulCam（协同工作摄影机）以及即时深度合成技术，都突破了既有的制作流程。
《阿凡达：水之道》水下表演捕捉 （图片来源：befores & afters / 摄影：Mark Fellman © 2021 20th Century Studios. All Rights Reserved）
这些电影在故事背景上各不相同，在特效制作上也有各自的突破。多数电影都是将真人实拍与CG元素结合，打造出奇幻而逼真的画面，并运用动作捕捉技术来驱动全CG角色的演绎，还有数字演员制作方面涉及到脸部扫描技术。以2009年的《阿凡达》为例，片中大量的数字元素依然以动作捕捉为基础，纳美人的动作与表情都是通过捕捉真人演员在拍摄现场所产生的数据，再转换为3D角色的动作。导演James Cameron更启用了虚拟摄影系统，使他能够在监视屏幕上直接观看3D角色于潘朵拉星球森林中奔跑。这种虚拟制作流程，结合了"动作捕捉技术"、"即时运算"与"实体摄影机"，使得导演能够以具体且即时的视角进行运镜与构图，实现更具想象力且震撼的视觉效果。
《阿凡达》拍摄画面（图片来源：Wētā FX）
数字技术的突破补足了过去实体化妆、道具与特效的不足。虽然实体特效在现今的制作中仍占重要地位，但数字化能让创作者与表演者在更安全高效的环境中工作，也能呈现更逼真的视觉效果，让观众沉浸于电影的世界中，专注故事所传达的深层意念。无论是对抗邪恶的史诗冒险，还是借助宏大背景反思人类对环境的影响。这些电影标示出科技的成就，更在全球文化间产生了深刻共鸣。
动作捕捉技术创新，诞生更写实的CG角色
动作捕捉技术在现今的国外影视作品中，已司空见惯。《魔戒》三部曲中的咕噜、《阿凡达》中的纳美人、《猩球崛起》中的凯萨，甚至《哈比人：荒谷恶龙》中的史矛革，这些奇幻生物之所以如此栩栩如生，是出于真人演员穿上动捕衣进行实际表演，动作被转换为数字资料后，再交由动画师进行细致调整，最终呈现出符合角色需求的动画效果。
提到动作捕捉技术，Wētā FX无疑是最具代表性的特效工作室，专注于打造高品质CG生物与角色，并开发与身体及脸部捕捉相关的技术流程。以2000年《魔戒》中的咕噜为例，Wētā FX与演员Andy Serkis合作，通过穿戴光学标记的动捕衣，在片场设置专门的动作捕捉区域进行拍摄。最终呈现在大银幕上的咕噜形象，即是结合了演员的动作数据与动画师的关键帧调整结果。另一个技术突破是在2009年《阿凡达》拍摄中，Wētā FX首次成功实现多位演员在同一动捕区域内的同时表演，并引入头戴式摄影机（Head-Mounted Camera），同时捕捉身体与脸部的表情，提供动画师更加自然的表演参考。这一技术演变成Wētā FX独家的"FACETS"系统，通过脸部数据驱动解算器，再结合动画师的调整来控制脸部表情，并逐步发展到今日能够即时浏览动捕资料并进行无线传输，都是他们持续研发的成果。
"FACETS系统让演员可以做到群体的表演，而不必担心周围摄影机是否有捕捉到他们的表情。"（图片来源：Wētā FX）
在国内，动作捕捉技术多应用于游戏制作，例如用于游戏角色的动作制作。而在影视制作上，当遇到无法使用现成动作库素材的特殊题材时，也会利用动作捕捉技术来大量录制演员的动作。以2023年的热门台剧《人选之人—造浪者》为例，剧中有很多选举场景及群众举旗欢呼的场面需求，特效团队沸腾映像便利用动作捕捉技术录制真人演员的动作，并将这些动作分布在场景中。
《人选之人—造浪者》 特效幕后解析（图片来源：InCG Media）
随着AI技术的发展，也出现了像Wonder Studio这样的工具，不同于传统动作捕捉流程，演员也无需穿戴任何动捕设备，只需要准备好3D角色以及真人演出的影片，即可将影片中的真人演员置换成3D角色，而且3D角色身上的光影效果还与影片的环境相符合，虽然该技术目前仍需要后期修正，但相较于传统使用动捕数据来驱动3D角色的方法，已经可以为特效工作者省下将近80%的工作量。
Wonder Studio角色置换前后比较图（图片来源：Wonder Dynamics）
虚拟制作的崛起，改变影视拍摄流程
过去几年，一种新的制作工具和流程逐渐改变了娱乐内容产业的创作方式，无论是在实拍电影、剧集，还是广播和现场活动。这种创作方式被称为"虚拟制作"（Virtual Production），结合了传统与虚拟拍摄的制片手法，涵盖绿幕、动作捕捉、视效预览、即时游戏引擎、LED摄影棚等技术。这项革新不仅影响了制片、导演、特效指导、灯光师和演员等角色，还改变了整个制作流程。
与传统影视制作流程相比，虚拟制作的关键差异在于将"动画与特效"的制作提前到前置期完成。以传统绿幕拍摄为例，拍摄后通常会交给动画特效公司来合成背景与制作特效，然而这常会遇到现场光线混乱，或是剧组无法即时看到合成效果，影响演员的表现。而虚拟制作则是使用LED屏幕墙代替绿幕，通过与游戏引擎的即时串接，动画特效团队能提前制作虚拟场景和光线效果，导演和剧组可以在拍摄当下即时从监控屏幕上看到合成后的效果。
以2019年美剧《曼达洛人》为例，据特效制作团队ILM表示，第一季有超过50%的拍摄，都使用了虚拟制作流程，也就是以LED虚拟棚（LED Volume）取代了外景拍摄，演员在巨大的LED屏幕显示的3D场景中表演，不再需要看着绿幕想象。而虚拟制作拍摄流程能够成功的关键，也仰赖了像Unreal Engine以及Unity这些"即时运算引擎"即时运算高品质3D场景的能力，使得制作人员可以在拍摄过程中"即时"调整光影、角度与场景，不需要等待后期处理，大幅提高生产效率，减少重拍需求与时间，并降低了制作成本。
《曼达洛人》拍摄画面（图片来源：Unreal Engine Blog）
此外，"虚拟摄影机"与"动作捕捉"技术也扮演着重要角色。虚拟摄影机可以侦测实体摄影机的移动轨迹，让LED屏幕内的3D场景跟随镜头移动，呈现正确的视差与透视效果。动作捕捉技术与头戴式摄影机的面部表情捕捉，能够实现即时的真实与虚拟交互，让导演能直接看到最终效果。
《阿凡达》拍摄画面（图片来源：Wētā FX）
在国内的影视应用中，梦想动画自2019年引进虚拟制作技术，并在2021年公视电视剧《茶金》拍摄中首次使用。剧中车窗外历史感十足的街景环境，是通过LED屏幕呈现的。近期，再现影像也运用了虚拟制作技术，拍摄了2023年电影《老狐狸》和2024年电影《台北追缉令》中的车拍片段。目前，国内提供LED虚拟棚的公司包括梦想动画的MOONSHINE XR STUDIO、中影制片厂内由再现影像与幻制研所营运的LED棚，以及民视的CYANS LED Virtual Studio。
再现影像LED棚（图片来源：RENO STUDIOS）
生成式AI工具为影视制作带来全新突破
在这个快速变化的时代，生成式AI（Generative AI）已成为当代内容创作者的必备工具。无论是在文字、语音、视觉还是声音方面，生成式AI正以惊人的速度开拓无限可能性。自2022年Midjourney和ChatGPT推出以来，凭借低使用门槛、免费及快速生成的特性，生成式AI迅速融入了人们的生活。在短短两年内，从文字生成图片、声音，再到文字生成视频，众多生成式AI产品与服务如雨后春笋般涌现。
目前，创作者已广泛应用生成式AI技术，例如利用ChatGPT和Midjourney分析客户需求，包含资料整理、书信沟通、制定提案策略、拟定需求、生成文字脚本及概念设计图，几乎每个环节都有AIGC（人工智能生成内容）的踪影。在《映CG 数位影像杂志》第56期的采访中，梦想动画创办人林家齐提到，他们在前期设计阶段使用Stable Diffusion搭配ControlNet和LoRA等工具，生成场景氛围图或角色图，将脑海中的创意概念视觉化。特别是在影视产业的前期，创作团队需要通过提案企划吸引投资者入股。运用AI工具快速生成剧照、初始海报与氛围图，不仅有助于融资，还能通过快速生成多版本的图像帮助客户做出选择，减少来回修改的时间，降低沟通成本。再现影像的共同创始人黄棨雋也指出，他们在影视制作中融入了AI工具，提升了工作效率并改善了流程。举例来说，前期制作阶段的概念设计、动态分镜及后期制作的面部替换技术，都可以利用AI来重现已逝去的演员或改变外貌年龄。
Midjourney生成电影氛围图（图片来源：OpenArt）
提到面部替换技术，2024年初，好莱坞特效公司RISING SUN PICTURES（RSP）推出"REVIZE™"工具组。通过基于机器学习技术结合视觉特效的制作流程，REVIZE™可用于脸部、身体替换，或进行脸部表情修改与除皱等影视制作中的常见需求。最近，他们运用此技术协助电影《芙莉欧莎：疯狂麦斯传奇篇章》，将女主角Anya Taylor-Joy的脸部特征无缝转移到年轻演员的脸上，成功展现角色随年龄变化的效果。
技术与共感并行的未来之路
在数字娱乐产业中，虚拟制作与生成式AI带来的发展与冲击，无疑迫使创作者与经营者重新思考未来的职涯与工作方式。然而，我们可以以积极的心态看待这场变革，并从中发现无限的机遇。如同从底片到数位摄影的过渡期一样，摄影师的专业角色一直都在，唯有摄影师的眼光才能运用适合的科技、捕捉美丽的瞬间。
科技的进步也让数字内容制作更加便利。高品质拟真的视觉效果、即时运算技术、快速生成的能力，为创作者节省了大量的人力与时间成本。与此同时，导演和制片也能将更多资源集中构思"有共感"的企划内容。观察近年全球现象级的影视作品，成功的关键并不在于采用了尖端的制作技术，而在于跨越文化的故事题材、IP改编，甚至是强大的营销策略，这些都是创作者在初期规划时应考量的重要因素。科技虽然提高制作效率与成果品质，打动人的是内容本身。当技术与创意完美结合时，才能创造出引发更多观众共鸣的作品。