我一直在用 AI 完全构建一个动画构建器:所有代码以及工具内部的工作。一个 AI 代理驱动它,将视频转换为游戏动画。

这个演示是一个非人类的首领,黑暗之魂:悟空中的蝎子领主,取自 YouTube 首领指南(致谢:Wilstorm Gaming,How to beat The Scorpionlord)。

AI 完成的全部工作:

  • 提取片段:下载视频,找到每个攻击,并剪辑仅包含动作的片段(跳过指南的停顿帧)。
  • 搭建骨架:分析生物的身体结构,制作了 40 个关节的骨架以匹配:夹子臂、数字腿、12 段尾巴带刺。
  • 动画 10 种动作:闲置、跟踪、尾巴刺、旋转扫 sweep、夹子组合、翻滚尾巴冲刺、空中旋转斩、空中尾巴旋风、掘洞埋伏、四连击组合。
  • 检查自己的工作:每个片段都在为每根骨骼设定的关节限制范围内,没有帧到帧的抖动,文件通过标准 glTF 验证器。
  • 构建此评审页面:每个动画与其来源片段并排播放。

人类角色是通过视频姿态跟踪捕获的。蝎子无法使用这种方式跟踪,因此这里 AI 直接从画面中键入动作。网格是占位块;动画的重点是动作本身。

欢迎反馈,尤其是关于空中动作的部分。