两小时就能超过人类!DeepMind最新AI速通26款雅达利游戏


deepmind的ai智能体,又来卷自己了!

注意看,这个名叫BBF的家伙,只用2个小时,就掌握了26款雅达利游戏,效率和人类相当,超越了自己一众前辈。

要知道,AI智能体通过强化学习解决问题的效果一直都不错,但最大的问题就在于这种方式效率很低,需要很长时间摸索。

☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 免费无限量使用 DeepSeek R1 模型☜☜☜

两小时就能超过人类!DeepMind最新AI速通26款雅达利游戏图片

而BBF带来的突破正是在效率方面。

怪不得它的全名可以叫Bigger、Better、Faster。

而且它还能只在单卡上完成训练,算力要求也降低许多。

BBF由谷歌DeepMind和蒙特利尔大学共同提出,目前数据和代码均已开源。

最高可取得人类5倍成绩

用于评价BBF游戏表现的数值,叫做IQM。

IQM是多方面游戏表现的综合得分,本文中的IQM成绩以人类为基准进行了归一化处理。

经与多个前人成果相比较,BBF在包含26款雅达利游戏的Atari 100K测试数据集中取得了最高的IQM成绩。

并且,在训练过的26款游戏中,BBF的成绩已经超过了人类。

与表现相似的Eff.Zero相比,BBF消耗的GPU时间缩短了将近一半。

而消耗GPU时间相似的SPR和SR-SPR,性能又和BBF差了一大截。

两小时就能超过人类!DeepMind最新AI速通26款雅达利游戏图片

而在反复进行的测试中,BBF达到某一IQM分数的比例始终保持着较高水平。

甚至有超过总测试次数1/8的运行当中取得了5倍于人类的成绩。

两小时就能超过人类!DeepMind最新AI速通26款雅达利游戏图片

即使加上其他没有训练过的雅达利游戏,BBF也能取得超过人类一半的分数IQM分数。

而如果单独看未训练的这29款游戏,BBF的得分是人类的四至五成。

两小时就能超过人类!DeepMind最新AI速通26款雅达利游戏图片

以SR-SPR为基础修改

推动BBF研究的问题是,如何在样本量稀少的情况下扩展深度强化学习网络。

ChatGPT Writer ChatGPT Writer

免费 Chrome 扩展程序,使用 ChatGPT AI 生成电子邮件和消息。

ChatGPT Writer 106 查看详情 ChatGPT Writer

为了研究这一问题,DeepMind将目光聚焦在了Atari 100K基准上。

但DeepMind很快发现,单纯增大模型规模并不能提高其表现。

两小时就能超过人类!DeepMind最新AI速通26款雅达利游戏图片

在深度学习模型的设计中,每步更新次数(Replay Ratio,RR)是一项重要参数。

具体到雅达利游戏,RR值越大,模型在游戏中取得的成绩越高。

最终,DeepMind以SR-SPR作为基础引擎,SR-SPR的RR值最高可达16。

而DeepMind经过综合考虑,选择了8作为BBF的RR值。

考虑到部分用户不愿花费RR=8的运算成本,DeepMind同时开发了RR=2版本的BBF

两小时就能超过人类!DeepMind最新AI速通26款雅达利游戏图片

DeepMind对SR-SPR中的多项内容进行修改之后,采用自监管训练得到了BBF,主要包括以下几个方面:

  • 更高的卷积层重置强度:提高卷积层重置强度可以增大面向随机目标的扰动幅度,让模型表现更好并减少损失,BBF的重置强度增加后,扰动幅度从SR-SPR的20%提高到了50%
  • 更大的网络规模:将神经网络层数从3层提高至15层,宽度也增大4倍
  • 更新范围(n)缩小:想要提高模型的表现,需要使用非固定的n值。BBF每4万个梯度步骤重置一次,每次重置的前1万个梯度步骤中,n以指数形式从10下降至3,衰减阶段占BBF训练过程的25%
  • 更大的衰减因子(γ):有人发现增大学习过程中的γ值可以提高模型表现,BBF的γ值从传统的0.97增至0.997
  • 权重衰减:避免过度拟合的出现,BBF的衰减量约为0.1
  • 删除NoisyNet:原始SR-SPR中包含的NoisyNet不能提高模型表现

消融实验结果表明,在每步更新次数为2和8的条件下,上述因素对BBF的表现均有不同程度的影响。

两小时就能超过人类!DeepMind最新AI速通26款雅达利游戏图片

其中,硬复位和更新范围的缩小影响最为显著。

两小时就能超过人类!DeepMind最新AI速通26款雅达利游戏图片

而对于上面两个图中没有提到的NoisyNet,对模型表现的影响则并不显著。

两小时就能超过人类!DeepMind最新AI速通26款雅达利游戏图片

论文地址:https://arxiv.org/abs/2305.19452GitHub项目页:https://github.com/google-research/google-research/tree/master/bigger_better_faster

参考链接:[1]https://www.php.cn/link/69b4fa3be19bdf400df34e41b93636a4

[2]https://www.marktechpost.com/2025/06/12/superhuman-performance-on-the-atari-100k-benchmark-the-power-of-bbf-a-new-value-based-rl-agent-from-google-deepmind-mila-and-universite-de-montreal/

— 完 —

以上就是两小时就能超过人类!DeepMind最新AI速通26款雅达利游戏的详细内容,更多请关注其它相关文章!


# 效率  # 速通  # 就能  # 达利  # 两小时  # 开源  # AI  # 甘肃seo培训代理  # 外贸seo黑帽培训  # 网站优化维护多少钱  # 企业网站建设内容域名  # 短视频推广营销拓客话术  # 天津seo优  # 太仓网站建设方案外包  # 营销网站优化选择  # seo心电图  # 广元做推广的网站多少钱  # 上海  # 万个  # 蒙特利尔  # 解决问题  # 谁能  # 更大 


相关栏目: 【 Google疑问12 】 【 Facebook疑问10 】 【 优化推广96088 】 【 技术知识133117 】 【 IDC资讯59369 】 【 网络运营7196 】 【 IT资讯61894


相关推荐: 人工智能正在弥合认知和表达之间的鸿沟  配 3D 机器人头像,谷歌展示全新安卓 LOGO  IBM 与 NASA 携手开源地理空间 AI 模型,促进气候科学研究进步  梦想实现!硬核科幻大片VR智能头盔即将问世  引领AI变革,九章云极DataCanvas公司重磅发布AIFS+DataPilot  工业机器人及非标自动化设备集成服务提供商  第 66 届格莱美奖规定,AI 作品将无法获得评奖资格  尼康尼克尔Z 180-600mm f/5.6-6.3 VR镜头发布:12499元 拍鸟神器  机构:边缘AI或是当前预期差最大的AI方向  揭秘AI数字人语录:抖音AI小和尚、老者语录能赚钱吗?  昆仑万维与全球领先的元宇宙公司Meta达成商务合作,共同认可昆仑万维在XR领域的技术实力  写出优质文章的妙招:利用"稿见AI助手"的实用指南  数字文明尼山对话 | 在东方圣城与AI潮流梦幻联动,看“智慧大脑”让数字山东更美好  人工智能和神经网络有什么联系与区别?  谷歌内部正在测试代号为Genesis的AI新闻写作产品  热点 | 人工智能黄金时代开启  全新小艺搭载AI大模型,有效提升学生和职场人士的工作效率  微软和谷歌面临的人工智能困境:需要投入大量资金才能获得盈利  数字彩排、虚拟建厂!这家顶级洗衣机工厂敲开“工业元宇宙”之门  特斯拉门店可能启动机器人卖车?也许不是你想的那样  苹果式 AI 哲学:不着一字,处处落子  好莱坞面临全面停摆 好莱坞大罢工抵制“AI入侵”  “世界上最像人的机器人”接入 Stable Diffusion ,现场完成作画  美图开拍使用教程  PS AI修图免费平替来了!Stability AI又放大招,核弹级更新一键扩图  RoboNeo安装教程  研究发现AI聊天机器人ChatGPT不会讲笑话,只会重复25个老梗  全国体育人工智能大会举办,专家聚焦体育人工智能领域人才培养  OpenAI 静默关闭 AI 文本检测工具,准确率仅为 26%  AI技术改变*,新骗局来袭,*成功率接近100%  日新月异,脑机接口技术都有哪些新应用?  机器人 展才能  GPT-4使用混合大模型?研究证明MoE+指令调优确实让大模型性能超群  美图公司影像节或发布AI设计新品  微幼科技晨检机器人:幼儿园健康保障的新伙伴  第四范式“式说”大模型入选《2025年通用人工智能创新应用案例集》  如何用Transformer BEV克服自动驾驶的极端情况?  Meta 为打造元宇宙不惜下血本:VR 开发者年薪高达百万美元  如何利用物联网技术提高企业生产线智能化水平,提升生产效率  埃森哲俞毅:AI时代我们需要新的“摩尔定律”  AI证件照生成器:实际测试中AI软件展现了绝无仅有的强大效能  OpenAI宣布在伦敦设立海外分部,要招揽“世界级人才”  本届人工智能大会上的这个“镇馆之宝”,来自长宁企业西井科技!  中国AI公有云市场2025年逆势蓬勃增长,增速高达80.6%  WPS AI 官网上线:可申请体验官资格,支持 Windows、安卓端下载  应用生成式人工智能技术改善农业产业  AI创作广告文案等同2.47年工作经验,且消费者无法区分|AI营销前沿  先进技术在防止全球数据丢失方面的作用  微软宣布为 Azure AI 添加男性声线,增强文本转语音功能  Yann LeCun团队新研究成果:对自监督学习逆向工程,原来聚类是这样实现的 

 2023-07-03

了解您产品搜索量及市场趋势,制定营销计划

同行竞争及网站分析保障您的广告效果

点击免费数据支持

提交您的需求,1小时内享受我们的专业解答。

运城市盐湖区信雨科技有限公司


运城市盐湖区信雨科技有限公司

运城市盐湖区信雨科技有限公司是一家深耕海外推广领域十年的专业服务商,作为谷歌推广与Facebook广告全球合作伙伴,聚焦外贸企业出海痛点,以数字化营销为核心,提供一站式海外营销解决方案。公司凭借十年行业沉淀与平台官方资源加持,打破传统外贸获客壁垒,助力企业高效开拓全球市场,成为中小企业出海的可靠合作伙伴。

 8156699

 13765294890

 8156699@qq.com

Notice

We and selected third parties use cookies or similar technologies for technical purposes and, with your consent, for other purposes as specified in the cookie policy.
You can consent to the use of such technologies by closing this notice, by interacting with any link or button outside of this notice or by continuing to browse otherwise.