什么是逐帧动画?定义、历史和现代工具解释


什么是定格动画? 定格动画是一种动画和视觉效果技术,艺术家逐帧地描摹实拍镜头,以产生逼真的运动[1]。简单来说,它涉及到手动绘制或遮罩视频每一帧中的元素,以便将这些元素隔离或风格化。最初,动画师将电影投射到玻璃面板上,并在纸上描绘轮廓——使用一种名为rotoscope的设备,这是由马克斯·弗莱舍在1915年发明的[1]。如今,这一过程是数字化的,但名称**“定格动画”仍然适用。从技术上讲,现代定格动画通常意味着为视频中的物体创建一个准确的遮罩**(遮罩),以便将其从背景中提取出来并合成到另一个背景中[2]。这一技术在电影制作、视频制作,甚至数字营销中被广泛使用,以实现那些在单一镜头中拍摄困难或不可能捕捉到的效果。
在本综合指南中,我们将以简单和技术性的术语探讨定格动画,深入研究其历史,从早期动画到现代视觉效果,并讨论其在电影、视频和市场营销中的常见用途。我们还将强调手动进行定格动画的挑战以及新基于人工智能的工具如何彻底改变工作流程。一个详细的部分将展示VIIDO的在线定格动画工具——其功能、优势和理想用户——作为现代定格动画技术的典范。我们将比较手动与人工智能定格动画,提供实际案例,并以总结和呼吁行动结束,促使人们利用当今的定格动画工具。
理解定格动画技术
在其核心,定格动画涉及逐帧描摹或遮罩视频镜头。在经典动画背景下,艺术家字面意义上在电影镜头上绘制以创建具有真实运动感的动画序列[1]。例如,早期动画师会拍摄一个现场演员的表演,然后将电影投射到一个表面上,逐帧描绘演员的轮廓。这一繁琐的过程能产生非常逼真的动画,因为它捕捉了真实运动的细微差别。
在现代视觉效果(VFX)中,定格动画通常指在视频镜头中手动创建一个不透明的遮罩或遮罩[2]。通过描绘一个人或物体的轮廓(通常使用软件),VFX艺术家生成该元素的剪切。这一遮罩随后可以用于将元素从背景中隔离出来,以便将其放置到不同的背景中,或独立地对其应用特效[2]。例如,特效艺术家可能会从场景中进行定格动画,以便在其后插入不同的背景或仅对演员进行色彩校正。
简单来说: 定格动画就像是从视频中数字化地剪切出元素。如果你曾经使用过照片中的“去背景”功能,可以想象在视频的每一帧上进行这种操作——传统上是手动进行的。这使得电影制片人和编辑能够结合独立的视觉效果、交换背景或创建富有想象力的序列。无论是手动完成还是在软件的帮助下完成,定格动画都需要仔细关注细节,以确保描绘的轮廓在镜头中的主体移动时保持准确。
定格动画的历史:从早期动画到现代VFX
定格动画有着悠久的历史,始于20世纪初。这一技术由动画师马克斯·弗莱舍于1915年发明,目的是使卡通动画更加逼真[3]。弗莱舍的原始定格设备将实拍电影帧投射到玻璃画架上,动画师可以在其上描绘图像。通过这种方法,弗莱舍以他的兄弟戴夫(穿着小丑服装)为题材拍摄,并描摹帧以创造出第一个定格动画卡通角色之一:小丑Koko[4]。在那个时候,这一技术是革命性的——它在动画电影中实现了流动的、栩栩如生的运动,这在仅靠想象力绘制时是难以实现的。
尽管被构思为动画师的捷径,但早期的定格动画证明是极其耗时且劳动密集型的,因为每一帧仍需精确绘制[5]。实际上,这一过程是如此繁琐,以至于其目的在某种程度上被“捷径”这一概念所抵消。弗莱舍最初将定格动画技术限制在自己的工作室(有时称为“弗莱舍过程”)。但在1934年他的专利到期后,其他工作室急切地采用了定格动画技术[6]。例如,沃尔特·迪士尼影业在白雪公主与七个小矮人(1937)中广泛使用了定格动画,以实现更真实的人物动画[6]。很多白雪公主的场景——比如舞蹈和王子的动作——都是通过描摹演员的实拍参考镜头而绘制的[7]。这导致了极为流畅的运动,尽管由于这一技术的复杂性,电影的预算也超支了[6]。
在20世纪中叶,定格动画继续在动画和特别场景中使用。一些著名示例突显了其创意应用。导演拉尔夫·巴克希在其1970年代和80年代的电影中重度依赖定格动画——例如巫师(1977)和指环王(1978)——以实现复杂的战斗场景和有限预算下的真实运动[8]。这些电影涉及拍摄现场演员,然后描摹他们以创建风格化的动画幻想序列。这一技术为巴克希的动画赋予了一种生动逼真的边缘,使其与更传统的卡通作品区别开来。
定格动画也渗透到了实验艺术和音乐媒体中。一个标志性的例子是1985年a-ha的音乐视频《Take On Me》,该视频通过定格动画将实拍镜头与铅笔草图风格的动画结合在一起。在这部经典视频中,动画师费尽心思地对约3000帧实时镜头进行了描摹,以将绘制的世界与现实合并[9][10]。结果是一个视觉惊艳和获奖的音乐视频,深深吸引了观众——真正展示了定格动画独特美学的盛宴。
到20世纪末和2000年代,定格动画由单纯的动画技术演变为视觉效果和后期制作的主流。计算机和数字合成工具的出现使定格动画过程变得更加容易和精确(不再需要投影到玻璃上并摆动线条——艺术家现在可以使用软件绘制遮罩)。然而,在许多情况下,它仍然是一项逐帧的手动任务。尽管蓝幕/绿幕(色度键)技术已成为常见,以将演员与背景分离,但定格动画仍被广泛用于微调和清理遮罩,或处理在绿色屏幕不可行的情况下的案例[11]。
电影历史中的一个经典例子,突显了定格动画在视觉效果中的重要性,是原版《星球大战》三部曲中光剑特效的制作。在星球大战:第四集 - 新希望(1977)中,光剑的发光能量刀刃是通过对电影的每个画面进行定格动画实现的[12]。演员们手持实物道具,而特效艺术家逐帧描摹了棒棒的形状,然后在该轮廓上添加光环[13]。这种费劲的逐帧定格动画赋予了绝地武士武器其标志性的明亮光辉[12]。后来的《星球大战》影片中也进行了相同的操作;例如,定格动画用于将AT-AT步行者合成到霍斯星球上,并使用旧电影的镜头将莉亚公主演员合成到《侠盗一号》的场景中[14]。这些例子展示了定格动画在电影中弥合现实与幻想之间的鸿沟。
经过一个多世纪,定格动画证明是一种多功能的技术:首次实现逼真的动画运动,后来又使现场电影中的无缝视觉效果成为可能。这一过程一直是细致入微的——在往日,艺术家们会花几个星期时间手动描摹镜头。如今,计算机已经取代了纸和笔,但直到最近,人类的定格艺术家仍需在几乎每个帧上绘制遮罩。这一漫长的历史为定格动画在当前的使用方式奠定了基础,以及最近的进展(比如自动化)为何如此重要。
定格动画在电影和视频制作中的常见用途
定格动画在电影和视频制作中发挥着重要作用,尤其是在视觉效果领域。基本上,任何时候只要电影制作人需要分离或更改拍摄的一部分,定格动画就是一种常用技术。以下是一些最常见的用途:
- 为合成创建遮罩: 在视觉效果中,定格动画的主要用途之一是为特定元素创建遮罩,以便它可以与不同的背景或元素结合。电影制作人利用定格动画从一个场景中提取角色或物体,并将其放置到另一个场景中[15]。例如,现场拍摄的演员可以被定格动画去除,然后后期合成到数字创建的背景中。如果没有使用绿幕或需要额外隔离时,这种方式非常有用。定格动画还用于从镜头中移除背景,或将前景元素隔离以进行色彩分级(这样可以对演员进行单独的色彩校正)。
- 视觉效果和幻想序列: 定格动画能够实现各种创意效果,涉及在实拍之上绘制或动画。如前所述,《星球大战》的光剑是通过手动定格动画实现的,以增强光效在演员道具剑上的效果[12]。另一个例子是:在谁陷害了兔子罗杰(1988)中,尽管其中很多部分使用了动画和合成,但在一些地方定格动画可能被用来细化动画角色与实拍镜头之间的互动。每当你看到像是人物周围的光环、闪电、魔法能量场等效果时,很可能是艺术家对帧的部分进行了定格动画,以添加效果或将角色遮罩,以便效果可以出现在他们的背景或周围。定格动画使电影制作人有机会创造在镜头中难以、昂贵或不可能捕捉的场景或效果[16]。 它是一个安全网和一种创意工具——从隐藏特技器具到添加虚构生物。
- 去除不需要的元素(绘制去除): 另一个常见用途是在“绘制去除”或物体删除工作中。比如说,一个麦克风杆出现在镜头中,或者特技安全带可见,或者(更加著名的是)在现场遗留了一杯咖啡——VFX艺术家可以对该区域进行定格动画并在其上进行涂抹。例如,导演马丁·斯科塞斯曾在后期制作中使用定格动画去除演员脸上的一块污垢(或一块悬挂的可卡因),通过逐帧描摹和绘制出该元素[17]。定格动画遮罩定义了需要更改的区域。类似地,特技场景中使用的线通常通过定格动画将其周围的演员去除,每一帧涂抹掉线。
- 动画图形和风格化视频效果: 除了重型视觉效果,定格动画还用于普通视频制作和运动图形。编辑者可能对视频中的一个人进行定格动画,以创建剪切轮廓效果,将镜头转化为风格化的“卡通”外观,或者应用不同的背景处理。例如,音乐视频可能会隔离一个舞者,然后用旋转的颜色或图形替换背景——这种隔离可以通过对舞者进行定格动画来实现。
- 创意过渡: 定格动画可以用于创建编辑中的酷过渡。想象一下一个场景,演员跳起来,当他们跳跃时,背景发生变化——编辑者可以对演员进行定格动画,并在跳跃中切换背景。这对观众来说是一种技术惊艳的幻觉,通过精确的遮罩来实现。
总之,影片/视频中的定格动画常常涉及控制。它赋予创作者可以外科手术般地操控视觉的能力:无论是更换背景、分层元素、重新着色场景的特定部分,还是添加手绘装饰。VFX工作室中的定格动画艺术家可能会花费一整天逐帧追踪演员、道具和阴影,以帮助整合复杂镜头的所有元素。
为了说明定格动画在制作中的重要性,考虑到即使在今天使用的诸如色度键等数字工具,许多大片仍依赖于一队定格动画艺术家。大型视觉效果繁重的电影(想想漫威或科幻史诗)通常会有演员未在绿幕上拍摄的序列,但后期需要将其与原始背景分离——定格动画就是解决方案。这是繁重的,但它给导演在后期制作中带来了极大的灵活性,以改变事物。
一个实际的例子:在《复仇者联盟:终局之战》中,如果超级英雄的一个镜头最初没有绿幕,但导演们后来决定用计算机生成图像的毁灭效果增强背景,艺术家会从原镜头中对演员进行定格动画,以便在他们后面插入CGI爆炸或天际线。这类用法在现代电影制作中屡见不鲜。
定格动画在数字营销和广告中的应用
除了电影和电视,定格动画也成为数字营销、广告和其他创意视频内容中的一种流行技术。市场营销人员和广告商总是寻找视觉冲击力强的方式来讲述故事或展示产品,而定格动画提供了一种独特的现实与艺术结合方式,可以抓住观众的注意。
定格动画在营销中的一个重大吸引点是,它以无缝的方式将现实与想象融为一体[18]。由于这一技术始于真实镜头,结果保留了真实感——实际的人类运动、真实的产品细节——但通过描摹或风格化这些镜头,最终的外观获得了艺术感,几乎仿佛是手工制作。这种独特的美学立刻在典型的实拍视频中脱颖而出[19]。观众可能会注意到某些东西看起来像现实生活,但又像卡通,这会非常吸引人。例如,一些品牌使用部分定格效果,在其中一个现场演员突然过渡到动画草图的外观,或在他们周围有动画的装饰;这创造了一个令人难忘的视觉效果,深深地留在观众的脑海中。
广告用例: 定格动画常用于在广告中突出产品或人物。广告商可能会对某个产品(比如,汽车或鞋子)进行定格动画,以隔离它,然后将其放在各种背景或图形环境中,而无需每次重新拍摄。在产品商业的世界中,定格动画可以创造出产品与任何所选背景的无缝结合——看起来就像产品实际上是在该环境中拍摄的[20]。例如,一则汽车广告可以在简单的背景下拍摄汽车,然后利用定格动画将其放入异国情调的地点或超现实的景观中。在新的场景中,观众看到汽车被完美融入,而且这种效果感觉真实,因为汽车的图像是现实的——只有背景被替换。
定格动画也被视为品牌叙事的一种风格选择。在广告中,一个值得注意的案例研究是查尔斯·施瓦布的“跟查克谈谈”广告系列(约2008年)。这些广告以实拍的形式拍摄,但随后被转化为高对比度、草图风格的动画效果。结果呈现出引人注目的外观;事实上,查尔斯·施瓦布的首席营销官指出,许多观众能够回忆起广告场景和对话,因为视觉风格如此独特[21]。定格动画的外观帮助这则本来简单的金融服务广告在广告主流中脱颖而出,给人一种移动图形小说的感觉。这证明了广告机构利用定格动画使商业广告更具记忆力和吸引力[22][23]。这一技术让他们在动画中强调某些细节(如突出讲述者),而同时又能利用实拍演员的自然动作和表情确保真实性。
社交媒体和数字内容: 在Instagram、TikTok和YouTube的时代,市场营销人员和内容创作者也转向定格动画(或类似的效果)来制作值得分享的视觉效果。短短的社交媒体视频可能会对主要主体进行定格动画,以应用创意滤镜或用品牌元素替换背景等。由于定格动画可能是劳动密集型的,所以不会用于每一小事,但当品牌希望达到**“哇”效果**时——或许是将动画信息图与实拍视频融合,或是音乐视频风格的广告——这是一种强有力的方法。此外,现代软件和人工智能已经开始简化定格动画过程,使得在最后期限下更快、更易于访问[24]。这意味着即使是更短的广告活动或小品牌也能考虑使用定格动画效果,而不会造成过高的成本或时间。
营销人员为何喜爱定格动画:
- 它吸引注意:半动画外观能够让社交动态中停下滑动的手指。定格视频常常有“创意”或“艺术”的气息,吸引观众,从而提高参与度[19]。
- 它增强叙事:营销人员可以通过在现实上绘制来说明抽象概念。例如,一个医疗广告可以让一个定格角色伴随着动画示意图旋转,以展示内部过程——将真实的人与说明图形相结合。
- 它可以简化制作:惊人的是,定格动画在某些情况下可能是具有成本效益的[25][23]。如果你已经有了实拍镜头,应用定格动画可能比从零开始制作一个完全动画的视频更便宜,或者为现场拍摄建立昂贵的场景。这允许以新的创意方式使用“现有镜头”,从而可以节省重新拍摄或位置成本[25]。许多品牌通过定格动画重塑旧视频内容,赋予其全新的动画风格。
- 它在各个行业中都是多才多艺的:时尚品牌利用定格动画让现场模特看起来像是穿着最新设计的运动草图。科技公司可能会用它来可视化数据或过程,覆盖在真实办公室镜头中。音乐视频、金融广告、非营利组织——所有这些都发现了独特的方式来实施定格风格内容,以生动的视觉格式传达他们的信息[26][27]。
再给出一个影响的例子:亚马逊Prime剧集Undone(2019)的音乐视频/广告使用了完整的定格动画(很像2006年的扫描黑暗),创造出一种梦幻、超现实的外观,模糊了现实——非常适合涉及时间旅行和个人戏剧的故事。广告活动利用了这种相同的定格风格来吸引观众[28]。这强调了一个最后的要点:定格动画能够唤起情绪和语气,这可能是纯实拍或纯动画所做不到的。它生活在一个混合的空间,可以根据执行的不同而感到怀旧、艺术或超现实。
总之,对于市场营销和广告而言,定格动画提供了一系列创意可能性:一种将真实镜头的可信性与动画创意自由结合的方式。它帮助品牌以视觉上迷人的方式讲述故事,无论是清晰地解释复杂的想法,还是做出大胆的艺术声明。随着技术的进步,即使是小团队也可以尝试定格动画,以区分他们的内容——这一趋势随着自动化的推进,变得愈加普及。
手动定格动画的挑战
到现在为止,显然定格动画是强大的,但同样重要的是要理解为何它获得了在电影和视频制作中最乏味任务之一的声誉。传统的定格动画(甚至数字手动定格动画)是众所周知的耗时和劳动密集型[29]。
想象一下一个以每秒24帧拍摄的10秒视频剪辑——那就是240帧单独的图像。如果你需要在每一帧中描摹一个物体,你必须绘制240个单独的遮罩,为该物体的运动调整每一个。对于5分钟的场景,这就是数千帧的处理。因此,手动定格动画可能需要花费几个小时甚至几天的工作,只为了几秒钟的镜头[29]。VFX艺术家常常将定格动画称为“磨练”——它是费力的,需要高度集中,常常感觉像是在长时间进行数字描摹或切割。
手动进行定格动画的一些关键挑战包括:
- 逐帧调整: 即使使用软件工具绘制遮罩,艺术家通常仍需在每一帧(或每几帧)中调整遮罩,以保持它与运动主体的对齐。由于透视变化、运动模糊和相机运动,视频中的人和物体很少保持相同的形状或大小。因此,第1帧中的遮罩在第5帧中并不能完美适合——它必须被调整。这意味着会有大量重复工作。
- 仔细关注细节: 良好的定格动画要求精确。如果遮罩即使稍微偏离,你在将主体合成到新背景时可能会看到“光环”或背景碎片渗透而来。细微的细节如头发、半透明的织物或运动模糊的边缘尤为困难。艺术家可能会花费过多的时间仔细调整遮罩点,以应对迎风飘扬的头发或重叠的群体肢体。这就像是用一把非常小的手术刀进行数字手术。
- 疲劳和人为错误: 逐帧描摹的重复性本质可能导致疲劳,而疲劳又可能导致错误。对于定格动画艺术家而言,丢失一个点并使遮罩形状晃动或漂移是很简单的。这些**“抖动”或不一致性**需要重新审视和修正,这将耗费更多时间[5]。一致性至关重要——遮罩的形状理想情况下应保持稳定,除非物体本身真的改变了形状。手动执行时确保一致性是困难的。
- 高技能要求: 虽然可以教初级艺术家定格动画,但真正做到这一点需要技巧。经验丰富的定格动画艺术家知道可以加速工作的技巧(比如使用运动跟踪来辅助,或将复杂主体拆分为多个简单的遮罩)。他们还养成了处理棘手部分的直觉。然而,由于这一过程非常繁重,工作室通常会将初级艺术家分配给定格动画任务,或将其外包给专门的定格动画供应商[30]。这是因为高级艺术家的时间费用高昂,而定格动画,大部分是机械化工作,通常被视为可以外包的事务。但即便如此,质量仍需检查,常常需要进行修订。
- 时间和成本影响: 所有这些因素意味着手动定格动画可能成为后期制作中的瓶颈。如果一个项目需要大量定格动画,它要么会减缓进度,要么需要雇佣更多艺术家分担工作。这自然增加了成本。业内有传闻称,有些镜头的定格动画工作花费了数周时间,仅为了几秒钟的镜头。例如,我们提到的音乐视频Take On Me花费了16周时间给一组动画师进行定格动画——尽管以非常艺术的方式进行,但它说明了所需工作的极端程度[31]。在VFX中,团队有时会花费数月时间处置复杂的战斗场景或人群场景,而无法采用其他方法(如绿幕或差异遮罩)的情况下。
鉴于这些挑战,难怪定格动画常常被视为电影制作中的**“必要之恶”**。它对许多效果至关重要,但从艺术家的角度来看,它是一种苦差事。实际上,历史上,许多定格动画都是使用像Adobe After Effects、Nuke或Silhouette等软件完成的——所有这些软件提供了更好的绘图和跟踪工具,比在纸上进行处理要好得多,但仍然从根本上需要艺术家画出形状并使其随时间而动画化。你可能在第1帧和第10帧上描摹某物,然后让计算机进行插值,但随后仍需修正中间帧等等。
总结痛苦:*手动定格动画有点像反向动画。在正常动画中,你绘制一个移动的物体。在定格动画中,物体在镜头中移动,而你则绘制轮廓与之匹配。这是缓慢的,细节导向的,必须完美以看起来正确。一位资料来源将其描述为“一个费力的手动过程,需要仔细关注,常常需要几个小时甚至几天时间以及视频编辑者的努力,才能完美只需一个场景”[29]。这确实说明了这一点——一个场景,许多天。
因此,长期以来一直存在使定格动画更容易或更快速的兴趣。这就是近期技术开始提供些许缓解的时候:自动化和人工智能。
自动化和人工智能如何改善定格工作流程
在过去的几年中,软件和人工智能的进步开始革命性地改变定格动画。曾经需要人类花数小时的任务现在有时可以由智能算法在几分钟(或几秒钟)内完成,这些算法经过训练可以检测和跟踪物体。这一变化对视频编辑者和VFX艺术家都是颠覆性的,将定格动画从繁重的苦差事转变为更流畅的工作流程的一部分[32][24]。
现代定格动画软件的辅助: 即使在人工智能成为热词之前,也已开发出帮助定格动画的工具。例如,运动跟踪可以assist通过跟踪一个点或形状来辅助,让艺术家无需在每一帧中手动移动遮罩。平面跟踪器(如Mocha Pro中的那个)可以跟踪平面表面或物体,并在帧间推进遮罩形状。这些工具节省了时间,但仍需手动校正。洋葱皮功能允许艺术家查看先前和下一帧重叠,以更加一致地调整形状[33]。所有这些使得定格动画较少痛苦,但这只是渐进而非革命性的变化。
引入人工智能和机器学习: 现在我们进入了一个人工智能在定格动画方面应用显著的时代。基于人工智能的定格动画(通常称为**“AI辅助定格动画”或仅仅是“自动遮罩”**)涉及到经大量图像和视频训练以识别特定主体(如人、动物等)并将其与背景分离的算法。基本思想是,人工智能可以自动识别和遮罩跨帧的主体[34]。
以下是人工智能辅助的定格动画在幕后的一般工作方式:
- 物体检测和分割: 人工智能检查每个帧,并尝试识别感兴趣的主体(或多个主体)。例如,人工智能模型可以训练检测视频帧中的人,并在其轮廓周围生成一个遮罩。这类似于你的智能手机相机可能识别面孔或人以进行肖像模式照片的方式。通过足够的训练数据,人工智能可以对帧中哪些是前景与背景作出有根据的猜测。
- 时间跟踪: 一旦人工智能知道在某一帧中要遮罩的内容,就会在后续帧中跟踪该物体。利用光流或深度学习,它预测物体在下一帧中的移动,并相应调整遮罩[34]。实质上,这是在自动执行人工定格艺术家手动完成的工作——跟随主体的运动。
- 遮罩精修: 优秀的人工智能工具还努力精细遮罩的边缘,处理一些棘手的部分,如调整运动模糊或微小细节。一些人工智能系统明确针对头发,使用擅长捕捉模糊、半透明区域的神经网络(这是人类在定格动画中所面临的挑战)。其目的是生成几乎和熟练人类绘制的一样精确的遮罩。
这些人工智能步骤的结果可以是令人惊讶地快速。正如一位资料来源所指出的,先进的工具使用算法自动识别和追踪物体跨帧,节省了数小时的手动工作,通常产生的结果与手动方法不相上下[35]。例如,Adobe After Effects引入了Roto Brush 2(由Adobe Sensei AI驱动),允许编辑者在主体上大致绘制一次,然后人工智能会将该选择传播到数十或数百帧,通常得到一个不错的遮罩,只需轻微调整[36]。同样,Boris FX的Mocha Pro集成了一个AI驱动的遮罩创建模块。甚至Blackmagic Fusion和DaVinci Resolve也添加了名为Magic Mask的特性,使用机器学习自动跟踪和遮罩人。
这在实践中意味着什么?这意味着那些通常是噩梦般的任务现在变得可行。编辑者可以,例如,拿一段4K分辨率的人群穿梭镜头的剪辑,使用AI在更短的时间内隔离那个人——这是手动完成时可能过于昂贵的工作。一个具体的例子是Runway ML的出现,这是一种用户友好的AI视频编辑工具:只需几次点击,Runway的定格工具便能将一个运动的人物从背景中隔离开来。一个本应耗费一天的过程现在只需几分钟的计算与一些清理。
不过,这并不是魔法(还没有)。**AI定格动画工具有其优势和局限性。**这里是一个快速的细分:
- AI定格动画的优势: 显然是速度。它大大加快了工作流程,实现近乎实时的背景移除或物体隔离[37]。这不仅节省了时间,还减少了艺术家的负担,使他们能够专注于创意调整,而非原始的重复劳动。人工智能在处理一致的高对比场景方面也出色——例如,一个人在非常清晰的背景中移动,或前景物体明显的场合。一些AI工具甚至可以相当好地处理复杂的边缘(如卷发或自行车轮的轮廓),这是因为它们从大量数据集学习而来[38]。人工智能也不疲惫——如果算法有效,它将为每帧相应施加遮罩(没有抖动,除非主体本身抖动)。
- 工作流程集成: 许多AI定格工具现在集成到了编辑者已经使用的软件中(在Adobe的After Effects/Premiere内部,或者Nuke的OFX插件等),这意味着你可以在不完全改变工作流程的情况下集成它们。这使得采纳变得更加容易。甚至独立的在线工具(如我们将在下文讨论的VIIDO工具)通常也被设计得简单:上传镜头,获取快速结果,下载遮罩或编辑的视频。因此,即使不是VFX专家的编辑者也可以尝试诸如移除背景等任务,这是以前可能需要专门艺术家的工作。
- 局限性和挑战: 人工智能并不完美。它可能在复杂场景中挣扎,这些场景有很多重叠元素、混乱的运动,或背景和主体之间颜色相近的情况[39]。例如,如果某人在另一个人或物体后面部分被遮挡,人工智能可能会失去跟踪或将两个物体合并为一个遮罩。非常**快速的运动(运动模糊)**可能会让算法困惑——人工智能可能不确定模糊帧中主体的边界在哪里。此外,某些细微细节如头发的蓬松、反射或透明物体对人工智能而言仍然是棘手的,难以百分之百准确[39]。在这种情况下,人工智能生成的遮罩可能存在错误,仍需人工修复(尽管修整半好的遮罩要容易得多,而不是从头创建一个)。
- 另一个关键限制是缺乏创造性判断。人工智能通常能识别显而易见的物体(如“人”或“车”),但它并不知道你究竟关心的是哪个物体,除非你引导它。并且它不知是否你想排除一个阴影或包含某些微妙的东西。人类定格艺术家常常做出判断——例如,是否应该在遮罩中包括人物的半透明阴影或将其排除在外?人工智能将执行其训练所做的一切,这可能与艺术意图不符[40]。因此,通常需要人类进行监督。在专业VFX中,人工智能完成第一轮后,艺术家会进入并细化遮罩,修正人工智能猜错的部分,并确保其符合质量标准。
- 边缘案例和概括性: AI模型是基于数据训练的,如果你的镜头超出其“预期”的范围,你可能会得到糟糕的结果。例如,一种主要训练在人的AI定格动画工具在你要求它定格一棵树或抽象形状时可能会吃力。而且如果镜头是颗粒状、光线不足或角度奇特,AI可能会误判[41](一些专业人员指出,在某些棘手情况中,手动完成更快,而不是在AI困惑时强行使用AI)[41]。
话虽如此,发展轨迹很清晰:AI辅助定格动画正在迅速改善,行业中的许多人认为这是未来(或现在!)。有一篇文章是这样说的:随着人工智能的发展,定格动画正在经历一场巨变。人工智能驱动的工具现在可以自动处理许多过程,显著减少定格动画所需的时间和精力[32]。共识并不是说人工智能将完全消除手动定格动画——而是它将增强艺术家的能力。最佳结果通常来自结合:人工智能帮你做90%的工作,然后人类进行最后的润色和添加微妙的细节。[42][40]。
在实际操作中,以前需要几天的工作现在可能只需要几个小时。这意味着紧迫的截止时间更易于管理。这也意味着定格动画不再是小创作者的障碍;当一个AI工具能够在你的笔记本电脑或通过网络服务完成定格动画时,你不再需要一个庞大的团队来处理一段短视频。例如,如果某个YouTuber希望在没有绿幕的情况下去掉这些背景,现有的AI驱动的定格工具现在能够做到这一点(接下来我们将讨论一个特定的在线工具)。
总结这一部分,人们可以说:在逐帧定格动画上消耗无数小时的日子已经屈指可数[43]。人工智能正在充当催化剂,而不是简单替代定格动画。它承担了繁琐的工作,使艺术家和编辑能够更多地专注于创意决策和最终润色。在最后,定格动画仍然是一种艺术——人类的因素仍然对那些完美的细节至关重要——但现代工具终于开始使定格艺术家的生活更轻松[43]。
VIIDO的在线定格动画工具:易于使用的AI驱动Roto
在定格动画领域最令人兴奋的发展之一是出现了用户友好的在线工具,利用人工智能使几乎任何人都能执行定格动画任务。VIIDO的在线定格动画工具(可在vidio.ai上获得)是我们讨论的许多改进的典型例子,它将强大的AI算法与一个简便的网络界面结合在一起,使即使是初学者也能很快隔离主体并以最小的努力交换背景。
在数字时代前的早期定格动画师在发光的桌子上描摹实拍电影画面(约1980年代)。类似VIIDO的现代AI工具已经将这种繁琐的逐帧过程转化为仅需几次点击,通过自动检测和遮罩运动物体来完成。
主要特点及其工作原理: VIIDO的定格动画工具旨在简洁明了。工作流程通常涉及几个步骤:
- 上传你的视频剪辑。 由于这是一个在线工具,你无需安装任何软件 —— 只需在网站上拖放或选择你的视频文件。该工具在云中处理繁重任务,甚至在视频上传和处理时实时显示进度(这样你不会感到猜不透)[44]。
- 通过单击来识别前景主体。 一旦视频加载,界面会让你单击你想隔离的对象或人。VIIDO的工具使用AI来解析你的单击并理解你指的是哪个主体(例如,镜头中的人还是背景)。在许多情况下,你可能只需在一个帧中单击主要主体,人工智能就会自动为该主体生成遮罩。
- AI“自动定格动画”视频。 在你指定主体后,工具的高级算法开始跟踪该主体跨越每一帧并在其周围创建准确的遮罩[45]。本质上,它将在整个剪辑中传播你的选择。通常有一个像“传播遮罩”的按钮,单击后,会触发人工智能处理所有帧(VIIDO的博客提到“传播遮罩”功能,就正是这样——它根据当前帧选择处理整个剪辑)。在这个过程中,人工智能正是在执行艰苦的工作:识别每一帧中的主体、处理其运动并从背景中隔离。速度令人印象深刻——本来手动要花费一个小时的工作,通常几分钟之内就可以完成。VIIDO的平台称“迅速而超精确的素材提取,仅需几次点击”,这意味着周转速度快,遮罩一旦传播就非常精确[46]。
- 如有需要,进行细化。 该工具提供选项,如果AI没有完美完成某些遮罩,你可以进行细化。例如,如果有一点背景不小心被包含在内,你可以使用“擦除”画笔将其去除,或者使用“取消遮罩”工具排除某个区域。相反,如果缺少某件物品,你也可以将其加上。然而,人工智能的目标是尽量减少这一步骤。VIIDO的界面被描述为*“用户友好”*,旨在使任何人都能轻松完成修补,即使是那些没有定格工作经验的人[45]。你可能会看到视频上覆盖遮罩,并可以调整边缘,或者切换羽化滑块以平滑轮廓。
- 通过单击更改或删除背景。 在这里,VIIDO的工具不仅限于遮罩——它基本上是一个**“互动背景更换器。”** 一旦主体被隔离,平台为你提供了各种选项来进行不同的操作:
- 更换背景: 你可以将新背景插入主题后面。这可以是纯色、模糊或其他图像或视频。“只需几次点击即可更换背景”是一个关键卖点[47]。想象一下,上传一段你在乱7八糟的房间的视频, 然后只需几次点击就将自己放置在海滩或时尚的工作室背景中。
- 去掉背景: 如果你只是想要一个透明背景(可能用于在演示文稿或其他视频中叠加主体),你可以这样做。这随后把你的视频变成一个像绿幕一样的素材。一旦处理完成,该工具可以输出带有 alpha 通道(透明度)的视频,使主体单独存在。
- 风格化或模糊背景: VIIDO提到你可以“风格化背景”[47]。这意味着应用滤镜(例如,将背景变为黑白,同时使主体保留颜色,这是一种使用来突出主题的常见营销效果),或添加高斯模糊以模拟浅景深(一个很好的技巧,可以通过使背景模糊而集中注意主题来让镜头看起来更有电影感)。突出移动对象或在周围模糊的能力是内置的[44]。
- 前景调整: 一些工具还允许在遮罩后对主体进行轻微调整——例如调色或添加阴影——因为一旦你有了遮罩,就可以分别处理前景和背景。虽然从上下文中没有明确提到,但“调整前景”可能是一个选项基于后传播选项的上下文(博客暗示“调整前景/背景”)。
- 预览和导出。 你可以在工具中预览效果——查看主体在新背景或没有背景下的表现。一旦满意,你便导出最终视频。处理完成,所以导出是快速的。VIIDO的工具可能允许用户下载编辑后的剪辑或遮罩本身。如果你想在其他程序中进行进一步编辑,可能会下载遮罩序列或 alpha 遮罩视频。
VIIDO方法的好处:
-
易用性: 上述整个过程不需要专业的VFX知识。它的设计旨在让营销人员、内容创作者或从未手动进行定格动画的编辑者也能实现成果。界面引导用户(“单击前景对象”等),人工智能则在后台处理复杂度[45]。这使得曾经是一项小众技能的工作变得民主化。根据该公司所述,他们的目标是使AI视频编辑易于访问*“即使对初学者”*[48]。换句话说,你无需成为定格动画师——该工具就是你的智能助手。
-
速度: VIIDO的工具是快速的——显着减少这类任务的编辑时间。因为它利用云计算和优化算法,能够更快地处理大量帧。如果你是需要在下午移除广告视频背景的社交媒体经理,这在现在是可行的。而不必等待几天,期待艺术家或外包公司交付遮罩。营销材料强调它如何“显著减少编辑时间”,并提供“即时在线”的结果[48]。
-
遮罩的质量: 根据描述如“超精确的自动隔离”[49],VIIDO工具以AI遮罩的质量为傲。先进的算法确保主体被干净隔离。术语“先进的算法”[45]表明它们可能正在使用最前沿的模型(或许类似于学术论文所称的“视频物体分割网络”)。良好的遮罩质量至关重要,因为不良的遮罩会看起来不够专业(例如,粗糙的边缘或残留的背景碎片)。通过良好的处理,VIIDO的工具将自己定位为一种专业解决方案,而不仅仅是一个花招。
-
无特殊设置: 由于它是在线的,且无需安装,任何有互联网连接和现代浏览器的人都可以使用。此外,不需要绿幕——传统上,若想轻松去除背景,通常需要拍摄时使用绿幕。VIIDO的工具取消了这一要求,使你可以正常拍摄,之后用AI在后期修正[50]。这对没有专业设置的用户来说是巨大的好处。
-
免费试用和可及性: 该网站暗示“在线免费试用”[50]。这可能意味着VIIDO允许用户测试该工具(也许在SD分辨率或带水印的情况下)而无须任何费用,从而降低了入门门槛。对于专业人士来说,可能有高级选项(例如以更高的分辨率处理HD/4K或更长的剪辑)。但是即使是免费层的可用性,也意味着任何好奇心者都可以尝试短片。这与昂贵软件许可证的不同,就更符合当今视频编辑中的软件作为服务趋势。
-
理想用户: 那么,谁最能够从VIIDO的在线定格动画工具中受益?
-
数字营销人员和广告商:他们可以通过更换背景快速创建广宣的变体,或隔离产品镜头用于横幅/视频,而无需重复拍摄。例如,一个电子商务营销人员可以用一个平面背景的视频样本,将模特拍摄后,事后将背景移除,为广告打造动态图形环境。
-
内容创作者和YouTuber:他们可能会利用这个工具在没有绿幕的情况下移除自己的网络摄像头背景,或是将自己添加到不同场景中制作创意视频。游戏主播、进行视频内容的教育工作者等,所有人都可以利用快速的背景移除,获得更好的视觉效果。
-
视频编辑者:专业人士或自由职业者在不专注于VFX的情况下可以使用该工具处理偶尔的定格动画需求,避免交给专门的艺术家。这是一种在时间紧迫的情况下保持工作流程驻于总部内的方法。
-
小工作室和独立电影制作人:他们可以以低预算实现效果,而以前可能需要雇用定格艺术家。例如,独立电影制作人在现场拍摄时可以不使用绿幕(避免现场麻烦),一旦拍摄完成,将使用该工具隔离演员以实现特效。
-
即使是VFX艺术家:他们可能会像VIIDO这样使用工具作为第一步,以加快工作速度。如果人工智能处理掉90%的遮罩,艺术家可以然后将其导入到After Effects或Nuke中,只需调整细节,从而节省大量时间。
总的来说,VIIDO的工具是理想的选择,针对任何需要定格动画但又不想亲手操作的人。它将原本需要专业技能的工作简化到只需点击几下。
对工作流程的影响是显著的。VIIDO和类似的AI定格工具所做的是将定格动画转变为一种监督式任务。你,作为用户,引导人工智能(通过单击告诉它“这是我想要的”),然后监控并做微小调整,而不是自己绘制每一个轮廓。这种*“可用的人工智能”*方法与视频科技公司提到的趋势相一致:让视频编辑变得简单,容易上手并即时在线可用[48]。
例如场景:假设你有一段30秒的宣传视频,显示一个人在演示产品,但背景是一个分散注意力的办公室场景。使用VIIDO的工具,你可以上传该30秒剪辑,单击一下人员,利用其隔离他们,然后选择模糊背景或用公司品牌替换。几分钟之内,你将得到一段视频,其中发言者清晰凸显在微妙的背景上——而无须预定一个摄影棚或使用复杂的软件。
这样的能力在十年前对非专业人士几乎无法想象。但如今,这已经在我们指尖可得,得益于像VIIDO这样驱动AI的定格动画工具。
手动定格动画与AI驱动的定格动画
通过了解传统和AI辅助的方法,直接比较手动定格动画与AI驱动的定格动画是很有帮助的。每种方式在当前的制作过程中都有其位置,但其优缺点不同:
- 速度和效率: 这就是AI驱动的定格动画大幅超越手动工作的地方。手动定格艺术家可能会花一整天小心翼翼地遮罩一段10秒的镜头。AI工具通常能在几分钟内完成大部分工作。如我们所讨论,人工智能可以自动跟踪和隔离物体,大大加快过程[38]。对于常规或简单镜头,AI几乎是瞬间完成,而即使是最快的人也仍需逐帧进行。实际而言,这意味着项目周转速度更快,能够在紧迫的截止日期下进行更多的定格动画。手动定格动画显然无法在数量或速度上竞争——这好像是使用打字机和使用文字处理软件的区别。
- 劳动与努力: 手动定格动画非常劳动密集,占用艺术家大量时间和精力。人工智能大幅降低了手动劳动的负担[51]。用户无需绘制成百上千的形状,而是可能只需绘制几个(或仅仅单击),让机器重复。这不仅有效节省了艺术家的时间,也节省了精神精力。对许多人来说,这是一种释然——以前被厌恶的任务现在可以转