上周日,我、Shadow和Rui做了一次在线连麦的直播,背景是Rui在上周发布并开源了一款名为《西游大绘战》的AI实时互动游戏。这款游戏在我们ComfyUI中文社区产生了轰动,许多人都没有想到ComfyUI还能这样玩。
Rui的工作流发布地址:https://openart.ai/workflows/profile/rui400 # 什么是AI实时互动游戏? AI实时互动游戏,主要是以大语言模型为核心驱动,用户通过与游戏实时互动生成具有无限可能性的剧情。AI实时互动游戏不仅限于文字,还可以结合Stable Diffusion图像生成能力,创造一个丰富的多模态游戏世界。 Rui在《西游大绘战》的开发中,利用ComfyUI的节点整合GPT、SD模型和TTS等AI技术,创造了具有独特游戏体验的Workflow(AI工作流)。也再次证明了ComfyUI的灵活性和无限可能性。
他首先利用 GPT 生成每一话的故事文本和选择,同时,将故事文本转换为自然生动语音,增强了玩家的沉浸感。另外,还通过GPT生成Stable Diffusion的Prompt(提示词),用于创造游戏故事场景对应的画面,使得游戏画面能够根据玩家的选择动态变化。 但将AI技术融合到这种全新游戏设计中也面临了诸多挑战。对于如何处理和控制好AI生成的内容,Rui需要学习大量的跨领域知识,做大量的技术调研,并且还需要像工程师一般不断调试Prompt和参数,才能把控好自动生成的游戏体验。 # AI时代下的“黑客与画家”
在保罗格雷姆的《黑客与画家》书中,提到了黑客与画家的诸多相似性:他们都是伟大的创作者,但伟大的作品并不都是事先严密设计好的,他们为了实现一个创新的灵感,能够反复调试和打磨,他们不会因为困难而退缩,他们总能找到常人不曾想到的解决方案,在作品完成的那一刻就注定了它的杰出和伟大。面对如此超前和复杂的游戏项目,Rui在《西游大绘战》项目中一个人扮演了一个团队的角色,从策划、设计再到开发制作。但令人惊讶的是,作为一名有十几年游戏原画设计经验的设计师,Rui之前并没有任何编程经验。 今年随着生成式AI的技术崛起,在SD和ComfyUI影响下,游戏行业正在使用AI工作流快速地生成原画设计来提高设计创作的效率,为游戏行业带来了颠覆性的变革。对于很多传统设计师来说这可能是个威胁和挑战,但Rui意识到这是一个转型和探索新领域的机会。他开始研究如何将AI技术融入游戏设计。 Rui制作的Workflow堪称艺术作品,为了达到精细的效果,使用了大量的高级节点和控制流程,将技术与艺术完美地结合在了一起,他最新发布的AI工作流作品“Cute You”,由AI生成的名人卡通形象栩栩如生,又一次引起了ComfyUI创作者们的广泛学习和关注。
Rui是如何掌握这些能力的?他提供了一些学习建议:
首先,他强调了获取信息源的重要性。他建议使用ComfyUI管理器作为了解节点信息的主要入口。并且定期在GitHub搜索ComfyUI相关节点更新。同时关注知名博主和官方博客分享的使用技巧。其次,深入理解SD的图像生成的流程和原理,这是灵活使用ComfyUI的基础 。对于非程序员,特别是设计师而言,学习ComfyUI是一个跨界挑战,需要改变过去的学习方式,需要多加实践探索 。另外,要多做实验。**开始时不要过于雄心勃勃,因为教程更新也是滞后的,为了防止踩坑我们需要从基础开始,选择小项目,逐步增加复杂性。过程中,我们不要害怕失败,最终我们可以把这些实验经验整合到实际项目中。最后,加入专业的群和社区,**在社区中提问和分享经验是学习的重要部分,这是学习新技能和解决问题的重要方式。在《西游大绘战》的工作流创作过程中,Shadow就给了很大的技术支持,帮助他解决很多自定义节点的问题和需求,这种合作也是一种前所未有的体验。除了以上四点,我认为Rui的能力,更关键在于他的探索未知的创新精神和不断精益求精的匠人精神。正是因为这些品质,让他编排的每个AI工作流都能成为优秀的作品,兼具科技与审美。也让他成为了黑客与画家的结合体。在对谈过程中,有社群的小伙伴提到了“超级个体”这个词,我想“黑客与画家”的精神就是AI时代下的超级个体的核心精神。# 如何成为AI时代的超级个体?**在AI时代下的超级个体都是具有匠人精神的产品经理。他们兼具黑客与画家的品质,追求自由的创作精神和产品理想,能够打破社会分工的枷锁,勇于走出自己的舒适圈,能够不断探索和应用前沿的新技术,打造出一件件让人惊叹的作品。成为AI时代的超级个体,需要有以下这5个方面的能力:
首先,需要是终身学习者。**他们主动追踪技术发展的最新动态,以及这些技术如何应用于不同行业。他们通过自主学习和项目实践,不断增强自己的技术能力和理解力。其次,需要有很强的跨学科思维。**Rui给我们起了一个很好的表率作用,他能够灵活的切换设计师和工程师的思维方式,他将艺术设计与AI技术相结合,创造出独特的游戏体验。超级个体通常能串联不同领域的知识,利用这些交叉点来创新和解决问题。 另外,需要有创新和实验精神。在新兴领域中,不断实验是创新成功的关键。Rui的例子告诉我们,通过熟悉掌握AI工具,即使没有编程背景,也可以通过实验和探索获得实践的成功。这种实验精神,需要我们不畏风险勇于尝试。还有,就是解决复杂问题的能力。AI技术本身就是解决复杂问题的工具。超级个体需要具备分析复杂系统的能力,并使用AI作为解决方案的一部分。这要求具备良好的逻辑思维能力和系统化思维。最后,是建立强大的社会链接能力。虽然AI技术强大,但在实际应用中,跨领域的合作是必不可少的。超级个体通过加入社区参与分享和交流,传递更多关于学习方法、行业洞察以及社会发展趋势的思考。通过强化自己的个人品牌,能够获得更多与能力互补的超级个体的合作,拓展出更多职业发展和创作的机遇。总之,成为AI时代的超级个体,需要我们能够在快速变化的技术环境中,不断学习和成长,同时需要具备创新精神、跨学科思维和强大的问题解决能力。超级个体不仅关注技术实践的本身,还关注技术如何影响行业和社会发展。通过分享和交流,从而获得更加广泛的社会影响力,成为一个标志性的个人品牌。 # 结语 在前天,Rui为了实现自己新的工作流逻辑,在ChatGPT的帮助下编写了一个自定义节点,并提交到了Github开源。地址:https://github.com/rui40000/RUI-Nodes
这是《黑客与画家》精神的最直接体现。也鼓舞了许多在ComfyUI中文社区中不擅编程的设计师。Rui勇于探索的精神和杰出的创作力,让他打破了传统分工角色的限制。绘画不再是画家的专属,编程也不再是程序员的专属。在AI的帮助下,任何人都可以通过学习和实践,创作自己的杰出作品。在AI的加持下,超级个体的崛起将打破现有的职业分工体系。它鼓励个体追求创新,拓展知识边界,实现个人和职业成长。他们产生的价值是广泛的行业价值和社会价值。未来的工作场景中,将会越来越重视跨学科知识和创造性思维。这不仅为超级个体提供了更广阔的发展空间,也为企业和社会带来了更丰富的创新资源。AI时代,需要我们打破过去那套旧规则,只有拆掉思维里的墙,我们才能获得进化。欢迎加入Mixlab ComfyUI中文社区与大佬们一同成长! 最后,欢迎大家加入ComfyUI的知识星球。