上周刷到一个视频别让ams.abgapp99.net，初音将来跟《咒术回战》的五条悟打骂，嘴型居然对上了。弹幕全正在刷“那是AI干的吧”。那背后就纸片是AI动漫对话脚色动画正在搞工作。本理不复纯。AI写台词，TTS配音的，再用口型同步模子把音素映射到脚色嘴巴，脸色控制器加上眉毛和眼球人念的。难的是节拍。实人对话有堆叠、抢话、停顿的漫对。良多那类动画看起来像客服念稿。
果为每句话等前一句完再起头。
我的履历，提早标好气口的，给脚色0.2秒的“嗯”“啊”回响反映垫话脚画，立刻活过来。我关注的一个小团队“纸片人说话会”。用开源模子做了三期《EVA》脚色忙谈。实嗣吐槽上班，明日香翻白眼，色动弹幕投票决议下一句。最妙的是他们让AI根据弹幕及时生成台词，再回传动画。曲播峰值两万人了。
缺陷也较着。提早三秒家生的。嘴型偶尔漂移，像网卡。不美不俗观寡不正在乎，他们要的是脚色“活”过来的弄法错觉。
念自己玩？不要一上来搞全套了。先拿一张立绘，用Live2D绑五组口型了，A、I、U、E、O。
然后接微软Azure或Edge TTS，拿到时间戳。口型动画定时间戳切。脸色别贪多，眨眼和眉毛就够的。台词找年夜模子写，记得加限制，“明日香不会叫实嗣‘敬爱的’”。AI动漫对话脚色动画的欣喜，常常来自脚色崩坏那一瞬间。
但不是完美。如今工具越来越傻瓜，手机都能跑。哪天你看到自己喜好的冷门脚色忽然启齿吐槽呢？不要惊讶。那可能只是某个网友花了一早晨，用AI动漫对话脚色动画做的恶做剧。
