上周日，我、Shadow和Rui做了一次在线连麦的直播，背景是Rui在上周发布并开源了一款名为《西游大绘战》的AI实时互动游戏。这款游戏在我们ComfyUI中文社区产生了轰动，许多人都没有想到ComfyUI还能这样玩。 Rui的工作流发布地址：https://openart.ai/workflows/profile/rui400 # 什么是AI实时互动游戏？ AI实时互动游戏，主要是以大语言模型为核心驱动，用户通过与游戏实时互动生成具有无限可能性的剧情。AI实时互动游戏不仅限于文字，还可以结合Stable Diffusion图像生成能力，创造一个丰富的多模态游戏世界。 Rui在《西游大绘战》的开发中，利用ComfyUI的节点整合GPT、SD模型和TTS等AI技术，创造了具有独特游戏体验的Workflow（AI工作流）。也再次证明了ComfyUI的灵活性和无限可能性。 他首先利用 GPT 生成每一话的故事文本和选择，同时，将故事文本转换为自然生动语音，增强了玩家的沉浸感。另外，还通过GPT生成Stable Diffusion的Prompt（提示词），用于创造游戏故事场景对应的画面，使得游戏画面能够根据玩家的选择动态变化。 但将AI技术融合到这种全新游戏设计中也面临了诸多挑战。对于如何处理和控制好AI生成的内容，Rui需要学习大量的跨领域知识，做大量的技术调研，并且还需要像工程师一般不断调试Prompt和参数，才能把控好自动生成的游戏体验。 # AI时代下的“黑客与画家” 在保罗格雷姆的《黑客与画家》书中，提到了黑客与画家的诸多相似性：他们都是伟大的创作者，但伟大的作品并不都是事先严密设计好的，他们为了实现一个创新的灵感，能够反复调试和打磨，他们不会因为困难而退缩，他们总能找到常人不曾想到的解决方案，在作品完成的那一刻就注定了它的杰出和伟大。面对如此超前和复杂的游戏项目，Rui在《西游大绘战》项目中一个人扮演了一个团队的角色，从策划、设计再到开发制作。但令人惊讶的是，作为一名有十几年游戏原画设计经验的设计师，Rui之前并没有任何编程经验。 今年随着生成式AI的技术崛起，在SD和ComfyUI影响下，游戏行业正在使用AI工作流快速地生成原画设计来提高设计创作的效率，为游戏行业带来了颠覆性的变革。对于很多传统设计师来说这可能是个威胁和挑战，但Rui意识到这是一个转型和探索新领域的机会。他开始研究如何将AI技术融入游戏设计。 Rui制作的Workflow堪称艺术作品，为了达到精细的效果，使用了大量的高级节点和控制流程，将技术与艺术完美地结合在了一起，他最新发布的AI工作流作品“Cute You”，由AI生成的名人卡通形象栩栩如生，又一次引起了ComfyUI创作者们的广泛学习和关注。 Rui是如何掌握这些能力的？他提供了一些学习建议： 首先，他强调了获取信息源的重要性。他建议使用ComfyUI管理器作为了解节点信息的主要入口。并且定期在GitHub搜索ComfyUI相关节点更新。同时关注知名博主和官方博客分享的使用技巧。其次，深入理解SD的图像生成的流程和原理，这是灵活使用ComfyUI的基础 。对于非程序员，特别是设计师而言，学习ComfyUI是一个跨界挑战，需要改变过去的学习方式，需要多加实践探索 。另外，要多做实验。开始时不要过于雄心勃勃，因为教程更新也是滞后的，为了防止踩坑我们需要从基础开始，选择小项目，逐步增加复杂性。过程中，我们不要害怕失败，最终我们可以把这些实验经验整合到实际项目中。最后，加入专业的群和社区，在社区中提问和分享经验是学习的重要部分，这是学习新技能和解决问题的重要方式。在《