字节AI智能体Lumine登场：自主通关原神，还能玩崩铁？

VR三千世界 · 发表于 2025-11-17 15:25

本帖最后由八云红于 2025-11-17 15:53 编辑

11月17日消息，AI玩游戏已经不稀奇了，但能自主玩《原神》这种大型3D开放世界游戏的AI智能体你见过吗？近日，字节Seed团队就推出了一个名为Lumine的通用AI智能体。据官方介绍，这个Lumine智能体在《原神》世界中训练，能够实时感知、思考并行动，自主完成游戏中长达数小时的复杂任务。

在《原神》世界中训练，展现出色泛化能力

Lumine在《原神》的蒙德地区表现很亮眼，成功完成了长达五小时、共三幕的主线剧情。值得一提的是，它的推理训练只基于第一幕内容，但仍能自主推进并完整通关整个章节。

在完全未经训练的璃月地区，Lumine也展现了出色的泛化能力，成功抵达并完成了璃月港的主线任务，甚至还拜访了深山中的仙人居所。

字节AI智能体 Lumine 登场：自主通关原神，还能玩崩铁？

跨游戏泛化：自主游玩《崩坏：星穹铁道》和《鸣潮》

这个AI智能体的泛化能力不止于《原神》。无需任何额外微调或修改，Lumine成功在《崩坏：星穹铁道》中通关了黑塔空间站的第一章全部主线任务（约7小时），并在《鸣潮》中完成了约100分钟的主线剧情。可以想象，以后用投影仪大屏，比如当贝X7 Max这类支持低延迟游戏模式的设备，观看AI自己跑图做任务，可能会成为一种新的“直播”形式。

字节AI智能体 Lumine 登场：自主通关原神，还能玩崩铁？

Lumine是如何实现自主游玩的？

Lumine采用的是类人交互范式，基于视觉-语言模型驱动。它以5Hz处理原始图像，并以30Hz生成精确的键鼠操作，仅在必要时进行思考。

它的学习过程也很有意思：

先用1731小时的人类游戏数据预训练，学会根据游戏画面输出键鼠操作；

再用200小时的指令跟随数据，将语言和操作对应；

最后用15小时的推理数据，让模型具备灵活思考能力。

最终，这个Lumine智能体不仅能完成持续数小时的任务，还能在3D开放世界探索和2D GUI图形界面操作中，执行收集、战斗、解谜和NPC交互等多种任务。

字节AI智能体 Lumine 登场：自主通关原神，还能玩崩铁？

掌握战斗与解谜，统一2D与3D操作

得益于大规模的预训练，Lumine掌握了关键的战斗技能，能够动态追踪敌人、用弓箭精准击中远处目标、流畅地切换角色进行连招攻击，并高效地寻找和开启战斗后解锁的宝箱。

除了日常战斗，Lumine还展现出对Boss机制较强的理解和应对能力，能够躲避Boss的攻击并且使用对应的策略击败Boss。它还能应对游戏中的各种解谜，这通常需要对游戏机制有深入的理解和精确的底层操作控制。

字节AI智能体 Lumine 登场：自主通关原神，还能玩崩铁？

此外，Lumine还能像人一样通过鼠标相对移动的方式进行可靠的GUI操作，实现了2D界面和3D世界的统一，这对于通用智能体来说至关重要。

官方还提到，Lumine展现出了强大的上下文学习能力，如果在指令中提供任务的先验信息或者更细的分解步骤，Lumine可以完成一系列之前不能完成的更复杂的任务。

柠檬和少年 · 发表于 2025-12-5 17:10

和刷日常的脚本有区别吗

› 综合交流 / 资源分享区 › 综合交流大区

字节AI智能体Lumine登场：自主通关原神，还能玩崩铁？ ...

字节AI智能体Lumine登场：自主通关原神，还能玩崩铁？

站长推荐 /1