背景:我正在制作一款《杀戮空间2》风格的游戏,但采用终结者主题并加入AI。Astra在第一天就快速搭建出一个可玩的单关卡游戏,但所有资源质量都很差。所有模型都是低多边形,有些武器资源还存在漂浮部件等问题。我曾设法让Astra在Blender中单独改进某些资源,取得了一定成效。Astra在开放式生成方面表现糟糕,但如果给定具体的3D资源或图像参考,它就能通过将像素差异作为误差信号来逼近参考。这种方法的问题在于一致性差——所有参考必须共享一致的风格,而在线寻找免费资源时很难做到这一点。

我认为图像生成模型或许能解决这个问题——它们可以生成包含多种游戏资源的图像,且风格统一为终结者主题。我的方法是:从玩家第一人称视角截取大量游戏关卡截图,然后用图像生成模型对截图重新风格化,得到参考图像。接着让Astra优化游戏中的所有内容,直到新截图与参考图像之间的误差降至零。

这个流程已运行数小时,上图是结果——左列是未优化游戏的截图,中列是gpt-image-2生成的目标图像,右列是Astra最新优化后的游戏截图。想知道是否有人尝试过这种方法并取得了良好效果,或者有更好的方法。