在上周的一次小规模反馈后,我认为我现在终于可以向公众展示第一个版本了。

视频中的角色是全新的;我为此片段从头制作了它。GPU 等待已被削减,每一次削减都标记了实际跳过的时间,因此你可以看到每一步实际耗时。

视频中展示的内容

  • 0:04 句子变为四个概念。每个概念自动检查是否适合 3D。
  • 0:11 一键重绘为干净的 A‑pose,准备进行骨骼绑定。
  • 0:17 将图片转为纹理化的 3D 模型,约 2 分钟,在配备 16 GB 显卡的笔记本电脑上。
  • 0:26 一键生成可用于游戏的模型:修复、三角形预算压缩、UV 展开并 PBR 烘焙(颜色、粗糙度、金属度、法线、AO),随后检查。
  • 0:33 自动骨骼绑定:装配 52 个关节的骨架,并绘制皮肤权重。
  • 0:42 178 个已准备好的动作(CC0),秒速 retarget 到你的角色上。
  • 0:50 文本到动作:输入 “强力跳跃旋转踢” 即可在约一分钟内将该动作应用到你的角色上。
  • 0:59 动画编辑器:支持使用 IK、洋葱皮、运动路径和曲线拖拽。
  • 1:07 从 3D 动作渲染 2D 精灵表。
  • 1:15 固定调色板的像素艺术,并附带像素编辑器完成帧。
  • 1:23 导出至 Godot、Unreal、Unity、Web 以及 3D 打印。

此外,视频未展示的内容

  • 两种 3D 引擎:快速(Microsoft TRELLIS.2)和忠实(Pixal3D,逐像素跟随您的图片)。
  • 从您自己的图片或四视角转盘开始,而非句子。
  • 更好的纹理:将您图片中的脸投射到头上,可选的细节通过层次重绘近距离细节(如缝线、木纹),并去除烘焙阴影,防止引擎光照重复。
  • 生物:八种骨骼模板(狐狸、马、鸟、龙、鲨鱼、怪兽、蜘蛛、蛇)。
  • 动作来源:可从人体视频(NVIDIA GEM-X)获取,或导入其他制作的动画(FBX、GLB、BVH)到您的角色。
  • 部件:点击部件命名,使头盔或剑牢固挂在骨骼上,或将模型拆分为可打印的实体。
  • 2D 从零开始:壁纸、背景、肖像、图标和项目,可从句子生成,支持像素艺术、绘画或儿童画风。
  • 任何图片的像素艺术,支持调色板切换、轮廓和调色。
  • 侧卷格斗游戏预设精灵动作集(如《双截龙》《金色斧头》风格),导出为 Godot AnimatedSprite2D 场景或 Unreal Paper2D 纸张。
  • 导入 FBX、glTF、OBJ、USD、STL 或 PLY;骨架及其动画保持不变。
  • 实时 Blender 链接:在您自己的 Blender 打开任意版本,拉取已编辑的网格。
  • 带额外内容的导出:Unreal LODs 与碰撞、Unity LODs、GLB + USDZ 用于网页和 AR。
  • 非破坏性库:每一步生成新版本,不覆盖原始,您可比较版本、添加标签和星标,并查看许可证徽标。
  • 内存保护:每次仅有一个 GPU 作业,若步骤超出显存则提前拒绝,防止机器冻结。
  • 代理就绪:整个工作流程通过 MCP 开放,Claude Code、Codex 或 Cursor 可驱动。

商业干净

默认设置中的每个模型、工具和剪辑包均可用于商业用途。每个导出都随附相应的署名和许可证文件。我将这些资产用于自己的商业游戏。

系统要求

  • Windows 11
  • 具备 16 GB 显存的 NVIDIA RTX 40 或 50 系列显卡(12 GB 可在快速引擎下工作,仅限尝试)
  • 推荐 32 GB 内存
  • 70 至 160 GB 磁盘空间,主要用于模型;您自行选择下载哪些

安装:解压并双击 run.bat。它会在自身文件夹中下载 Python、PyTorch、Blender 和模型,无需系统级安装。

真实限制

  • 目前仅在一台 RTX 5080 笔记本上测试通过。若您使用其他显卡,尤其是 24 或 32 GB 显存的卡,请参考 SETUP.md 中的 GPU 报告(约 20‑40 分钟)。请将结果发送给我;更大显卡将使用更大的默认设置。
  • 骨骼绑定覆盖人形和八种生物模板。
  • Unity 导出尚未进行导入测试(Godot 和 Unreal 已测试)。
  • Linux 从源码运行,但需要自行编译三个 GPU kernel wheel。

链接

GitHub (MIT):https://github.com/SifuInTheShell/Effigy
下载 v0.1.0:https://github.com/SifuInTheShell/Effigy/releases/tag/v0.1.0
SETUP 指南:https://github.com/SifuInTheShell/Effigy/blob/main/SETUP.md

反馈、错误报告和 GPU 报告非常受欢迎。我在评论中乐意回答问题。