AI加速动画制作
发布时间:2023-02-28 09:23:44作者:顺晟科技点击:
随着AI模型的开源,AI已经能够与动画制作进行更深度的融合,AI从画图到上色再到细化都可以发挥实际作用。虽然在很多方面,AI动画还不完善,还不能完全取代人工,但AIGC正以惊人的速度发展,动画行业长期存在的产能不足问题有望被AI解决。
一个戴黑框眼镜的少年骑着绿色自行车,一路滑行下山坡。山下是静冈县狭长的海岸线。一只机械狗开心地追着后面的车跑。车里的少年不时回头,看着自己的机械狗玩伴.
这个场景是动画短片《犬与少年》中的一个场景。近日,该短片在网飞平台上线后,播放量迅速突破200w,单条推特浏览量达到2000 W.
就动画质量而言,《犬与少年》的场景构图并不复杂,画面精细度也不算优秀。但最值得注意的一点是,这部短片的场景艺术是由AI生成的,而不是由人类绘制的。对于动漫行业来说,将AI融入制作过程是非常有想象力的。
自AIGC崛起以来,杭无界AI绘画平台通过提供低门槛、多类型的AI绘画体验,积累了数百万用户。目前正在探索AI与动漫制作的结合。
无界AI内容负责人赵杰成表示,有了AI大模型的开源,AI可以与动画制作更深度的结合,AI从画图到上色再到细化都可以发挥实际作用。虽然在很多方面,AI动画还不完善,还不能完全取代人工,但AIGC正以惊人的速度发展,动画行业长期存在的产能不足问题有望被AI解决。
长期需求
动漫行业一直是劳动密集型行业。
普通12帧速率的动画,25分钟需要18000张图片。对于一个10人的团队来说,大概需要2个月才能完成。这与市场需求严重不符。
根据爱奇艺、优酷、腾讯视频、哔哩哔哩公布的2021年国产动画片榜单,数量已经达到188部。在流媒体平台对动画作品需求较大的情况下,制作能力的不足长期影响着动画的发展。
《犬与少年》摄影主管田中浩提出:“很多动漫创作者都在同时宣传多部作品,很难集中在一部作品上。在AI的帮助下,制片人可以得到解放,每个人都可以有更多的时间进行创造性的工作。」
以AI辅助动画场景制作为例。当艺术家输入诸如天空、海洋、山峰、河流等粗略的概念术语时。AI会立即生成场景的草图,并完成着色。画师可以在AI一代的基础上提炼。这意味着最费时费力的草图和上色部分将由AI完成。
用赵杰成的话来说,当AI生成的图片数量足够多,准确率足够高的时候,人类画家只需要在一定程度上充当“排序者”的角色,也就是从大量的AI生成的图片中选择自己想要的图片。
从成本和效率两方面考虑,AI也能给动画制作能力带来显著提升。
首先是时间成本。赵杰成告诉《新声Pro》,AI可以大大减少动画绘制的时间,“粗略估计需要原来五分之一的时间”。在素描阶段,无界AI可以按照指令在3分钟内生成100张图片(精度为4k)。这意味着,在单位时间内,AI生成的草图数量可以轻松超过人工手绘的极限。
《消除与召唤》游戏的开发公司广州,精简了所有的美工,把人物、场景等内容完全交给了艾。游戏总策划张远说,他之前做游戏标题的时候,把分镜的要求提交给美工的时候,对方至少需要一个月,最后只能出7个画面。使用AI后,只需一天即可完成。
据赵杰成介绍,目前无界AI每张4k精度图片的生成成本不会超过2分钱,大部分成本可以控制在1分钱以内。参考国内插画师平均月薪11到13k,AI无疑可以降低人力成本。
赵杰成认为,前段时间“AI取代人工画师”的热门话题并非危言耸听。“许多ACG公司的老板都明确表示,使用人工智能的一个主要原因是为了精简艺术团队。」
但目前来看,AI和动画的结合还不完美。
有限范围
相对于理想状态下AI接管动画制作的全过程,目前AI对动画生产力的提升主要体现在素描、修改、上色等单一制作环节,后期还需要人工辅助。
换句话说,AI技术确实改善了动画制作,但涉及的范围仍然有限。
赵杰成告诉《新声Pro》,目前的AI技术在动画中,光、AI取景、动态特效等都很难完成。
首先是光。在动画中,很难处理明暗的变化和光线照在人身上的反射。尤其是在人物不断移动的情况下,AI在不佩戴的情况下,仍然很难将光线与人物融为一体。赵杰成也认为,为了达到理想的灯光效果,无界AI还需要研究一个专门针对灯光的插件。
在连贯动作方面,动画中有一个“中画”的概念,目的是在两幅原画之间加入连贯的画面,使动作看起来更加流畅,达到“动画”的效果。就绘画难度而言,原画比中间画高很多,但中间画的数量要求更多,而且很多是重复性的工作。AI要解决的是自动生成中间图片。
目前AI只能自动生成轻微的中间画面,最终需要手动调整。比如画孙悟空挥棒的连贯动作时,由于人物姿态和装饰服装的移动,AI生成的线条之间可能会出现断笔画,需要手动填充。
不过,赵杰成补充说,通过采用ControlNet和T2I-Adapter技术,业界已经提出了解决方案,预计3个月后问题会得到更好的解决。
在动态特效方面,AI在动画中也很难做到完美。
例如,在流行漫画《死神》中,主角黑崎一护的瞬间步伐给观众留下了深刻的印象。为了呈现这种有重影的瞬间移动效果,AI很难从画图开始就进行动态模糊操作。
另一方面,AI对人类语言的学习还在继续,AI很难直接理解动画中存在的一些抽象概念。
比如动画中经常出现的夸张动作,对AI的理解门槛就很大。
以《海贼王》动画为例。主角的能力之一就是伸展手脚攻击敌人。对于AI来说,很难理解画图“伸开胳膊”的指令。赵杰成说,如果单纯输入“延长手臂”,AI只会稍微延长手臂大小,根本达不到动画中夸张的画风。如果要做出夸张的动作,就需要用户输入更清晰的指令来帮助AI理解,比如身高1.7米、手臂伸展20米、握拳等关键词。
以上不利因素客观上制约了AI直接生成高质量动画,但赵杰成认为,目前AI可以用于需要大量内容的年度动画,或者已经有第一季的动画,以及准备开始制作更多内容的制作公司。“这样你就不用为了AI去学习和地图了,直接喂给原图就可以了,准确率会更高。」
赵杰成还补充道,由于样本数据有限,无界AI的一些专有入口和插件仍在优化中。如何将理论转化为实践,需要更多动漫从业者的检验。
思维转变
将AI融入动画制作,不仅仅是技术上的变革,更是思维上的变革。
2022年底,AI绘画刚刚兴起的时候,海外掀起了一股抵制AI的浪潮。在综合CG视觉艺术网站Artstation,有艺术家上传了一张“NO TO AI生成图像”的图片,网站首页一度有超过一半的内容被这张图片占据。两位重量级艺术家Bill Sienkiewicz和Alex Ross(两人都画过与漫威漫画相关的作品)也表示支持抵制AI p
首先,在技术层面上,传统画家要尽快建立对AI的认识,进行模型训练。
以本月初无界AI生成的《鬼灭之刃》粉丝海报为例。人物和背景都是AI直接生成的,团队只是对人物的手和眼睛进行了简单的修图,引起了鬼迷们的热烈讨论。粉丝感叹海报中谭二郎的设计之美与可还原。
相应的,坎罗吉李蜜的人物还原相对要差一些。赵杰成解释道,“这是因为动画还没出来,所以训练素材少,效果一般。还有一个原因是无界AI专门为早门檀次郎做了一个单独的测试模型,也可以提高它的生成精度。
所谓模型,更像是术语和AI输出能力的集合。
以《全职猎人》年的热门人物齐琦为例。如果需要用AI生成张楚岚的形象,需要添加一系列关键词,比如白色卷发、蓝色瞳孔、服装描述、鞋子描述等。才能最终生成类似的图,并且需要手动润饰图片。在该模型中,齐琦的物理特征被集成到一个条目中,用户只需输入关键字“齐琦”即可输出字符。
赵杰成开玩笑说,续集《全职猎人》能快点上映,既让富坚义博有时间打麻将(更新太慢),又满足了粉丝的需求。
训练模型和整合参赛作品的过程也可能是未来画家的分水岭。赵杰成表示,未来AI画师区分“画技”的关键很可能取决于对模型的打磨程度。“你拥有的素材越多,素材上的关键词就越精细,绘图效果就越好。」
另一方面,AI绘画对艺术需求的发起者同样重要。
在传统的动画制作过程中,制作团队会分为美术需求者和美术执行者。前者包括导演、制片人、制作人等。他们负责提出想法,而后者包括原创画家、插画师、美术设计师等。他们负责绘图和创意执行。两者之间经常有意见分歧。比如动画导演提出画面创意时,原画师有时会觉得很难理解导演的需求,或者在有限的时间内无法做出让导演满意的画作。
赵杰成认为,AI可以帮助艺术需求者明确自己的视野和创作意图。例如,导演可以使用AI反复测试动画主题、风格和类别,以验证他们突发的想法。对于艺术表演者来说,导演的奇思妙想往往意味着反复的返工和想法的对接。
正如皮克斯的《玩具总动员》开创了3D动画的浪潮,是对传统定格动画的数字化改造,日本2D手绘动画中常见的“赛璐珞技术”也因计算机技术的应用而转化为数字化制作。AI对动画制作的改造还包括技术、成本、思维等诸多方面。
从更长远来看,AI可能会让生产商以更低的成本进行广泛的尝试,而不是拘泥于市场上现有的产品类型和风格。
(报道)
- 上一篇 : 百万网友的情感导师 @么么么么么么么么么么么么么么么么么么么
- 下一篇 : 转诊率超50%的宝岛眼镜正在倾斜新运营