Gym Retro

OpenAI Blog 工具

摘要

OpenAI 发布 Gym Retro,这是一个强化学习研究环境,汇集了来自经典游戏主机(世嘉创世纪、NES、SNES、Game Boy 等)的游戏,用于研究智能体在不同游戏和关卡中的泛化能力。

我们发布了 Gym Retro 的完整版本,这是一个用于游戏强化学习研究的平台。这使我们公开发布的游戏数量从大约 70 款 Atari 游戏和 30 款世嘉游戏增加到 1000 多款跨越多种模拟器的游戏。我们还发布了用于向平台添加新游戏的工具。
查看原文
查看缓存全文

缓存时间: 2026/04/20 14:56

# Gym Retro 来源:https://openai.com/index/gym-retro/ 我们使用 Gym Retro 来进行强化学习算法研究并研究泛化能力。强化学习的前期研究主要集中在优化智能体来解决单个任务上。有了 Gym Retro,我们可以研究在概念相似但外观不同的游戏之间的泛化能力。 此版本包括来自世嘉创世纪和世嘉主控系统的游戏,以及任天堂 NES、SNES 和 Game Boy 游戏机的游戏。它还包括对世嘉 Game Gear、任天堂 Game Boy Color、任天堂 Game Boy Advance 和 NEC TurboGrafx 的初步支持。某些已发布的游戏集成,包括 Gym Retro 的 `data/experimental` 文件夹中的游戏,处于测试阶段 — 请试用它们,如果遇到任何错误,请告诉我们。由于涉及的更改规模较大,代码目前仅在一个分支(https://github.com/openai/retro)上提供。为了避免破坏参赛者的代码,我们在竞赛结束之前不会合并该分支。 进行中的 Retro 竞赛(https://contest.openai.com/)(在几周内结束)和我们最近的技术报告(https://arxiv.org/abs/1804.03720)关注于较简单的问题,即同一游戏(刺猬索尼克 TM)不同关卡之间的泛化。完整的 Gym Retro 数据集将这个想法进一步扩展,使得研究不同游戏之间泛化的更难问题成为可能。数据集的规模和各个游戏的难度使其成为一个艰巨的挑战,我们期待在接下来的一年中分享我们的研究进展。我们也希望 Retro 竞赛参与者开发的一些解决方案能够扩展并应用于完整的 Gym Retro 数据集。

相似文章

复古竞赛

OpenAI Blog

OpenAI 推出了复古竞赛(Retro Contest),这是一项迁移学习竞赛,在来自经典 SEGA Genesis 游戏的未见过的视频游戏关卡上评估强化学习算法,于 2018 年 4 月至 6 月期间进行。该竞赛使用 Gym Retro 平台,包括基准实现和技术基准论文,证明当前的强化学习算法在泛化任务上的表现明显低于人类。

OpenAI Gym Beta

OpenAI Blog

OpenAI 发布了 OpenAI Gym 公开测试版,这是一个用于开发和比较强化学习算法的工具包,包含不断增长的环境套件和可复现研究的平台。该工具包旨在标准化强化学习基准,并为研究社区提供多样化、易于使用的环境。

Safety Gym

OpenAI Blog

OpenAI 推出 Safety Gym,这是一个新的基准环境和工具包,用于研究受约束的强化学习和安全探索。该平台包含多个机器人和任务,旨在通过成本函数与奖励函数一起量化和衡量安全探索。

AutoGym:蓝图优先的可验证智能体训练环境生成

arXiv cs.AI

AutoGym提出一个框架,通过蓝图优先生成,从最小种子自动生成完整的智能体训练环境(包括任务、可执行环境和验证器),以确保可解性并实现主动课程综合,用于自适应难度调控。