当前位置:首页 > 元宇宙 > AI

GPT-4o 能玩《黑神话:悟空》:精英怪胜率超人类,无强化学习纯大模型方案

来源: 责编: 时间:2024-09-25 16:36:07 23观看
导读 AI 玩黑神话,第一个精英怪牯护院轻松拿捏啊。有方向感,视角也没有问题。躲闪劈棍很丝滑。甚至在打鸦香客和牯护院时,AI 的胜率已经超过人类。而且是完全使用大模型玩,没有使用强化学习。阿里巴巴的研究人员们提出

AI 玩黑神话,第一个精英怪牯护院轻松拿捏啊。TCc28资讯网——每日最新资讯28at.com

TCc28资讯网——每日最新资讯28at.com

有方向感,视角也没有问题。TCc28资讯网——每日最新资讯28at.com

TCc28资讯网——每日最新资讯28at.com

躲闪劈棍很丝滑。TCc28资讯网——每日最新资讯28at.com

TCc28资讯网——每日最新资讯28at.com

甚至在打鸦香客和牯护院时,AI 的胜率已经超过人类。TCc28资讯网——每日最新资讯28at.com

TCc28资讯网——每日最新资讯28at.com

而且是完全使用大模型玩,没有使用强化学习。TCc28资讯网——每日最新资讯28at.com

阿里巴巴的研究人员们提出了一个新型 VARP(视觉动作角色扮演)智能体框架。它能直接将游戏截图作为输入,通过视觉语言模型推理,最终生成 Python 代码形式的动作,以此来操作游戏。TCc28资讯网——每日最新资讯28at.com

以玩《黑神话・悟空》为例,该智能体在 90% 简单和中等水平战斗场景中取胜。TCc28资讯网——每日最新资讯28at.com

GPT-4o、Claude 3.5 都来迎战

研究人员以《黑神话・悟空》为研究平台,一共定义了 12 个任务,75% 与战斗有关。TCc28资讯网——每日最新资讯28at.com

TCc28资讯网——每日最新资讯28at.com

他们构建了一个人类操作数据集,包含键鼠操作和游戏截图,一共 1000 条有效数据。TCc28资讯网——每日最新资讯28at.com

每个操作都是由原子命令的各种组合组成的序列。原子命令包括轻攻、闪避、重攻击、回血等。TCc28资讯网——每日最新资讯28at.com

TCc28资讯网——每日最新资讯28at.com

然后,他们提出了 VARP 智能体框架。主要包含动作规划系统和人类引导轨迹系统。TCc28资讯网——每日最新资讯28at.com

其中动作规划系统由情境库、动作库和人类引导库组成,利用 VLMs 进行动作推理和生成,引入分解特定任务的辅助模块和自我优化的动作生成模块。TCc28资讯网——每日最新资讯28at.com

人类引导轨迹系统利用人类操作数据改进智能体性能,对于困难任务,通过查询人类引导库获取相似截图和操作,生成新的人类引导动作。TCc28资讯网——每日最新资讯28at.com

TCc28资讯网——每日最新资讯28at.com

同时 VARP 还包含 3 个库:情景库、动作库和人工引导库。这些库中存储了 agent 自我学习和人类指导的内容,可以进行检索和更新。TCc28资讯网——每日最新资讯28at.com

动作库中,“def new_func_a ()”表示动作计划系统生成的新动作,“def new_func_h ()”表示人导轨迹系统生成的动作。“def pre_func ()”代表预定义的动作。TCc28资讯网——每日最新资讯28at.com

动作案例研究和相应的游戏截图。第一行和第二行中的操作是预定义的函数。第三行动作由人工制导轨迹系统生成。TCc28资讯网——每日最新资讯28at.com

SOAG 会在玩家角色与敌人的每次战斗互动后总结第四行和第五行中的新动作,并将其存储在动作库中。TCc28资讯网——每日最新资讯28at.com

TCc28资讯网——每日最新资讯28at.com

框架分别使用了 GPT-4o(2024-0513 版本)、Claude 3.5 Sonnet 和 Gemini 1.5 Pro。TCc28资讯网——每日最新资讯28at.com

对比人类和 AI 的表现结果,可以看到小怪部分 AI 们的表现达到人类玩家水平。TCc28资讯网——每日最新资讯28at.com

到了牯护院时,Claude 3.5 Sonnet 败下阵来,GPT-4o 胜率最高。TCc28资讯网——每日最新资讯28at.com

但是对于新手玩家普遍头疼的幽魂,AI 们也都束手无策了。TCc28资讯网——每日最新资讯28at.com

TCc28资讯网——每日最新资讯28at.com

另外研究还提到,由于 VLMs 推理速度受到限制,是无法实时输入每一帧画面的。它只能间隔输入关键帧,这也会导致 AI 在一些情况下错过 boss 攻击的关键信息。TCc28资讯网——每日最新资讯28at.com

以及由于游戏中没有明确的道路引导且存在很多空气墙,在没有人类引导下,智能体也不能自已找到正确的路线。TCc28资讯网——每日最新资讯28at.com

如上研究来自阿里团队,一共有 5 位作者。TCc28资讯网——每日最新资讯28at.com

TCc28资讯网——每日最新资讯28at.com

后续相关代码和数据集有发布计划,感兴趣的童鞋可以蹲下。TCc28资讯网——每日最新资讯28at.com

One More Thing

AI 打游戏并不是一个新鲜事了,比如 AI 基于强化学习方法打《星际争霸 II》已经可以击败人类职业高手。TCc28资讯网——每日最新资讯28at.com

利用强化学习方案,往往需要输入大量对局。商汤此前训练的 DI-star(监督学习 + 强化学习),就用了“16 万场录像”和“1 亿局对战”。TCc28资讯网——每日最新资讯28at.com

但是纯大模型也能打游戏,还是很出乎意料的。在本项研究中,数据集中的有效数据为 1000 条。TCc28资讯网——每日最新资讯28at.com

论文地址:TCc28资讯网——每日最新资讯28at.com

https://arxiv.org/abs/2409.12889TCc28资讯网——每日最新资讯28at.com

项目地址:TCc28资讯网——每日最新资讯28at.com

https://varp-agent.github.io/TCc28资讯网——每日最新资讯28at.com

本文来自微信公众号:微信公众号(ID:QbitAI),作者:小明,原标题《GPT-4o 能玩《黑神话》!精英怪胜率超人类,无强化学习纯大模型方案》TCc28资讯网——每日最新资讯28at.com

本文链接:http://www.28at.com/showinfo-45-7750-0.htmlGPT-4o 能玩《黑神话:悟空》:精英怪胜率超人类,无强化学习纯大模型方案

声明:本网页内容旨在传播知识,若有侵权等问题请及时与本网联系,我们将在第一时间删除处理。邮件:2376512515@qq.com

上一篇: 微软亚洲研究院与上海市精神卫生中心展开联合研究,借助多模态大模型为认知障碍患者带来全新训练方法

下一篇: AI“攻克”CAPTCHA 网站验证系统

标签:
  • 热门焦点
Top