Gym Retro

OpenAI Blog 工具

摘要

OpenAI 发布 Gym Retro,这是一个强化学习研究环境,汇集了来自经典游戏主机(世嘉创世纪、NES、SNES、Game Boy 等)的游戏,用于研究智能体在不同游戏和关卡中的泛化能力。

我们发布了 Gym Retro 的完整版本,这是一个用于游戏强化学习研究的平台。这使我们公开发布的游戏数量从大约 70 款 Atari 游戏和 30 款世嘉游戏增加到 1000 多款跨越多种模拟器的游戏。我们还发布了用于向平台添加新游戏的工具。
查看原文
查看缓存全文

缓存时间: 2026/04/20 14:56

# Gym Retro 来源:https://openai.com/index/gym-retro/ 我们使用 Gym Retro 来进行强化学习算法研究并研究泛化能力。强化学习的前期研究主要集中在优化智能体来解决单个任务上。有了 Gym Retro,我们可以研究在概念相似但外观不同的游戏之间的泛化能力。 此版本包括来自世嘉创世纪和世嘉主控系统的游戏,以及任天堂 NES、SNES 和 Game Boy 游戏机的游戏。它还包括对世嘉 Game Gear、任天堂 Game Boy Color、任天堂 Game Boy Advance 和 NEC TurboGrafx 的初步支持。某些已发布的游戏集成,包括 Gym Retro 的 `data/experimental` 文件夹中的游戏,处于测试阶段 — 请试用它们,如果遇到任何错误,请告诉我们。由于涉及的更改规模较大,代码目前仅在一个分支(https://github.com/openai/retro)上提供。为了避免破坏参赛者的代码,我们在竞赛结束之前不会合并该分支。 进行中的 Retro 竞赛(https://contest.openai.com/)(在几周内结束)和我们最近的技术报告(https://arxiv.org/abs/1804.03720)关注于较简单的问题,即同一游戏(刺猬索尼克 TM)不同关卡之间的泛化。完整的 Gym Retro 数据集将这个想法进一步扩展,使得研究不同游戏之间泛化的更难问题成为可能。数据集的规模和各个游戏的难度使其成为一个艰巨的挑战,我们期待在接下来的一年中分享我们的研究进展。我们也希望 Retro 竞赛参与者开发的一些解决方案能够扩展并应用于完整的 Gym Retro 数据集。

相似文章

复古竞赛

OpenAI Blog

OpenAI 推出了复古竞赛(Retro Contest),这是一项迁移学习竞赛,在来自经典 SEGA Genesis 游戏的未见过的视频游戏关卡上评估强化学习算法,于 2018 年 4 月至 6 月期间进行。该竞赛使用 Gym Retro 平台,包括基准实现和技术基准论文,证明当前的强化学习算法在泛化任务上的表现明显低于人类。

OpenAI Gym Beta

OpenAI Blog

OpenAI 发布了 OpenAI Gym 公开测试版,这是一个用于开发和比较强化学习算法的工具包,包含不断增长的环境套件和可复现研究的平台。该工具包旨在标准化强化学习基准,并为研究社区提供多样化、易于使用的环境。

Safety Gym

OpenAI Blog

OpenAI 推出 Safety Gym,这是一个新的基准环境和工具包,用于研究受约束的强化学习和安全探索。该平台包含多个机器人和任务,旨在通过成本函数与奖励函数一起量化和衡量安全探索。

复古竞赛:成果揭晓

OpenAI Blog

OpenAI 的复古竞赛圆满落幕,923 个团队参赛,利用 Sonic 基准开发可泛化的算法。排名靠前的团队主要使用了经过调优的现有算法,如 PPO 和 Rainbow DQN,其中 Dharmaraja 以 4,692 分(理论最高分为 10,000 分)赢得第一名。

Roboschool

OpenAI Blog

OpenAI 发布 Roboschool,这是一个与 OpenAI Gym 集成的开源机器人模拟环境,包含12个环境,涵盖增强型人形机器人运动任务和 Pong 等多智能体设置。