问小白 wenxiaobai
资讯
历史
科技
环境与自然
成长
游戏
财经
文学与艺术
美食
健康
家居
文化
情感
汽车
三农
军事
旅行
运动
教育
生活
星座命理

SIGGRAPH 2024:AIGC引领电影技术新浪潮

创作时间:
2025-01-21 23:48:19
作者:
@小白创作中心

SIGGRAPH 2024:AIGC引领电影技术新浪潮

2024年,SIGGRAPH(计算机图形学特别兴趣小组)会议在东京盛大举行,主题为“Curious Minds”,吸引了创纪录的参会人数和论文投稿量。华人学者在此次会议上表现亮眼,展现了中国在计算机图形学领域的强大实力。会议展示了生成式人工智能(AIGC)在电影制作中的最新研究成果,涵盖了虚拟角色动作生成、群体动画模拟、三维资产生成等多个方面的创新应用。这些技术不仅提升了电影制作的效率和质量,也为创作者提供了更多的创意空间。

01

虚拟角色动作生成的革命

在虚拟角色动作生成领域,一个名为“Reframe:在虚拟现实中录制和编辑角色动作”的项目引起了广泛关注。该项目的开发团队通过VR和最新的头戴设备跟踪技术,创建了一个直观的VR动画创作界面。用户可以直接在虚拟现实中记录自己的身体动作和面部表情,并实时编辑身体动作。这种创新的动画创作方式简化了3D动画的制作过程,使创作者能够以更自然、身体为中心的方式创作丰富的3D动画。

02

群体动画模拟的突破

虽然目前关于AIGC在群体动画模拟方面的具体研究较少,但可以预见,随着AI技术的不断发展,它将在大规模场景的动画制作中发挥重要作用。例如,在《阿凡达》等电影中,成千上万的外星生物在森林中奔跑的场景,未来可能通过AI自动生成,大大减少人工动画师的工作量。

03

三维资产生成的创新

在三维资产生成方面,影眸科技的3D原生Diffusion Transformer生成式大模型CLAY表现亮眼。该模型解决了2D升维法存在的问题,实现了直接从3D数据集训练模型的突破。CLAY的进阶版本Rodin Gen-1也在今年6月正式上线。此外,VAST采用了一个基于rectified flow的大规模形状生成模型,能够在采样步数更少的情况下达到更高精度,同时训练也会更稳定。

04

AIGC技术在电影制作中的应用场景

在视觉效果增强方面,AI自动化正在改变VFX(视觉效果)团队的工作方式。例如,Rising Sun Pictures工作室开发了名为REVIZETM的内部机器学习工具包,能够处理整个头部、头发和身体的外观和性能修改。这种技术不仅提高了工作效率,还创造了新的就业机会,使电影制作团队能够更好地实现导演的创意愿景。

在动画电影制作中,AIGC技术的应用已经取得了显著进展。2024年,多部完全由AI生成的动画长片相继问世。例如,《DreadClub:吸血鬼的裁决》和《Where the Robots Grow》这两部电影虽然在剧本质量上受到批评,但其视觉效果却获得了高度评价,被认为优于大多数CGI动画。这些作品展示了AI在动画制作中的巨大潜力,尤其是在生成高质量3D模型和纹理方面。

05

面临的挑战与未来展望

尽管AIGC技术在电影制作中展现出巨大潜力,但仍面临一些挑战。首先,技术路径选择尚未完全明确,例如在3D生成中,端到端和多步迭代的路径选择仍存在争议。其次,高质量3D数据的获取仍然是一个难点,这限制了模型的训练和优化。此外,AI生成的内容质量稳定性仍需提高,特别是在处理复杂场景和细节时。计算资源需求高也是当前面临的一大挑战,高性能计算设备的成本可能成为小型制作团队的负担。

然而,专家们对3D AIGC的发展前景持乐观态度。深圳大学计算机与软件学院教授胡瑞珍认为,数字媒体的未来将向三维方向发展,3D内容和三维感知将成为主流。虽然目前3D AIGC在多样性、可编辑性和个性化定制方面仍落后于二维内容生成模型,但学界和业界正在共同努力攻克这些问题。

总体而言,AIGC技术正成为推动电影技术革新的关键力量。它不仅能够提升电影制作的效率和质量,还能为创作者提供更大的创意空间。随着技术的不断进步和应用场景的拓展,AIGC有望为电影行业带来更多的创新和突破,为观众呈现更加震撼的视觉盛宴。

© 2023 北京元石科技有限公司 ◎ 京公网安备 11010802042949号