在上周的一次小规模反馈后,我认为我现在终于可以向公众展示第一个版本了。
视频中的角色是全新的;我为此片段从头制作了它。GPU 等待已被削减,每一次削减都标记了实际跳过的时间,因此你可以看到每一步实际耗时。
视频中展示的内容
- 0:04 句子变为四个概念。每个概念自动检查是否适合 3D。
- 0:11 一键重绘为干净的 A‑pose,准备进行骨骼绑定。
- 0:17 将图片转为纹理化的 3D 模型,约 2 分钟,在配备 16 GB 显卡的笔记本电脑上。
- 0:26 一键生成可用于游戏的模型:修复、三角形预算压缩、UV 展开并 PBR 烘焙(颜色、粗糙度、金属度、法线、AO),随后检查。
- 0:33 自动骨骼绑定:装配 52 个关节的骨架,并绘制皮肤权重。
- 0:42 178 个已准备好的动作(CC0),秒速 retarget 到你的角色上。
- 0:50 文本到动作:输入 “强力跳跃旋转踢” 即可在约一分钟内将该动作应用到你的角色上。
- 0:59 动画编辑器:支持使用 IK、洋葱皮、运动路径和曲线拖拽。
- 1:07 从 3D 动作渲染 2D 精灵表。
- 1:15 固定调色板的像素艺术,并附带像素编辑器完成帧。
- 1:23 导出至 Godot、Unreal、Unity、Web 以及 3D 打印。
此外,视频未展示的内容
- 两种 3D 引擎:快速(Microsoft TRELLIS.2)和忠实(Pixal3D,逐像素跟随您的图片)。
- 从您自己的图片或四视角转盘开始,而非句子。
- 更好的纹理:将您图片中的脸投射到头上,可选的细节通过层次重绘近距离细节(如缝线、木纹),并去除烘焙阴影,防止引擎光照重复。
- 生物:八种骨骼模板(狐狸、马、鸟、龙、鲨鱼、怪兽、蜘蛛、蛇)。
- 动作来源:可从人体视频(NVIDIA GEM-X)获取,或导入其他制作的动画(FBX、GLB、BVH)到您的角色。
- 部件:点击部件命名,使头盔或剑牢固挂在骨骼上,或将模型拆分为可打印的实体。
- 2D 从零开始:壁纸、背景、肖像、图标和项目,可从句子生成,支持像素艺术、绘画或儿童画风。
- 任何图片的像素艺术,支持调色板切换、轮廓和调色。
- 侧卷格斗游戏预设精灵动作集(如《双截龙》《金色斧头》风格),导出为 Godot AnimatedSprite2D 场景或 Unreal Paper2D 纸张。
- 导入 FBX、glTF、OBJ、USD、STL 或 PLY;骨架及其动画保持不变。
- 实时 Blender 链接:在您自己的 Blender 打开任意版本,拉取已编辑的网格。
- 带额外内容的导出:Unreal LODs 与碰撞、Unity LODs、GLB + USDZ 用于网页和 AR。
- 非破坏性库:每一步生成新版本,不覆盖原始,您可比较版本、添加标签和星标,并查看许可证徽标。
- 内存保护:每次仅有一个 GPU 作业,若步骤超出显存则提前拒绝,防止机器冻结。
- 代理就绪:整个工作流程通过 MCP 开放,Claude Code、Codex 或 Cursor 可驱动。
商业干净
默认设置中的每个模型、工具和剪辑包均可用于商业用途。每个导出都随附相应的署名和许可证文件。我将这些资产用于自己的商业游戏。
系统要求
- Windows 11
- 具备 16 GB 显存的 NVIDIA RTX 40 或 50 系列显卡(12 GB 可在快速引擎下工作,仅限尝试)
- 推荐 32 GB 内存
- 70 至 160 GB 磁盘空间,主要用于模型;您自行选择下载哪些
安装:解压并双击 run.bat。它会在自身文件夹中下载 Python、PyTorch、Blender 和模型,无需系统级安装。
真实限制
- 目前仅在一台 RTX 5080 笔记本上测试通过。若您使用其他显卡,尤其是 24 或 32 GB 显存的卡,请参考 SETUP.md 中的 GPU 报告(约 20‑40 分钟)。请将结果发送给我;更大显卡将使用更大的默认设置。
- 骨骼绑定覆盖人形和八种生物模板。
- Unity 导出尚未进行导入测试(Godot 和 Unreal 已测试)。
- Linux 从源码运行,但需要自行编译三个 GPU kernel wheel。
链接
GitHub (MIT):https://github.com/SifuInTheShell/Effigy
下载 v0.1.0:https://github.com/SifuInTheShell/Effigy/releases/tag/v0.1.0
SETUP 指南:https://github.com/SifuInTheShell/Effigy/blob/main/SETUP.md
反馈、错误报告和 GPU 报告非常受欢迎。我在评论中乐意回答问题。
评论 (0)