标签
用密室逃脱的类比来入门强化学习环境,解释在预训练数据已经耗尽的当下,工具、任务和验证器如何结合起来,为AI智能体生成全新的训练信号。
一场 Hacker News 讨论,质疑那些构建RL环境并将其出售给 Anthropic、OpenAI 等前沿实验室的初创公司的价值主张,以及这些公司为何不自己训练模型。
Browser Use 宣布开源 rl-env-use:只需一行描述技能,即可自动生成基于真实案例的、经过验证的强化学习环境,适用于任意领域,可用于模型优化训练。
Secludy 发布了「谁在出售数据」免费目录,收录了 159 家向 AI 开发商出售训练数据、强化学习环境和评测的公司。每条信息均附有来源与核查日期,未知信息会明确标注,而非猜测。
推文讨论了强化学习(RL)环境构建领域的火热趋势,并引用 Karotte 框架获得来自 a16z、SignalFire、Scale Angel Group 等机构以及李飞飞、Ian Goodfellow 等研究者参与的 1600 万美元种子轮融资的新闻。
Kiln 的开发者发布了开源框架 Seahaven,用于构建强化学习和评测用的 AI agent 环境,提供隔离实例、冻结 fixture、状态 diff 和可复现运行,并附带一个可兼容官方 Stripe SDK 的模拟 Stripe 世界。
BenchFlow 软启动发布了 PostTrain Arena,这是一个开放的后训练竞技场,任何人都可以贡献可验证的 RL 任务包(task.md、Docker 环境、verifier、oracle),并依据八个领域中留出数据上的通过率变化进行排名。所有被采纳的任务包都会公开发布,以共建一个高质量训练环境的共享公共资源库。
小团队RL环境公司Halluminate推出Westworld Finance Due Diligence Bench,用于评估AI代理在并购尽职调查全流程中的能力,并声称四家美国顶级闭源实验室为其付费客户,年化收入达八位数中段且已实现盈利。
G2i.ai CEO Gabbe Greenberg 宣布公司本月将招聘 50 名 Staff 软件工程师,与前沿 AI 实验室合作进行评测(evals)和训练数据集构建,远程工作,时薪 $200–$300。G2i 将自己定位为 AI 训练的工程层,为顶尖实验室构建强化学习(RL)环境和精选评测集。
小米在 HuggingFace 上开源了约 7K 个用于训练 MiMo 的强化学习环境,而 billxbf 则向 Harbor Hub 上传了 7,780 条 MiMo 强化学习数据集,并发布了 Skill2Env,包含额外的 7,496 个强化学习数据集——合计 15,276 条强化学习数据免费提供,这些数据原本从供应商处采购需花费数百万美元。
作者讲述了在巴西联邦系统中发现重大数据漏洞的经历,并讨论了未经测试的AI环境和机器学习中强化学习扩展所带来的日益增长的网络安全风险。
Xiaomi在Hugging Face上发布了开源强化学习环境代码库,与购买类似资源相比,可节省AI任务获取的成本。
小米在 HuggingFace 上开源了用于训练其 MiMo 模型的约 7,000 个强化学习环境,涵盖代码、网络安全、通用、音乐和 Web 开发等领域。
Xiaomi MiMo 已开源强化学习训练环境和代码,适用于软件工程、漏洞复现和可视化开发等任务,提供详细指南和 Docker 支持。
SmolDataEnvs现已发布,这是一套包含5000个可验证RL环境任务的集合,专注于代码和数据科学领域的小型模型训练,完全开源。
来自 Salesforce 的这篇论文审计了用于终端智能体的公共强化学习环境,发现了重大缺陷,并介绍了 RIVER,一种训练方案,它过滤有缺陷的环境并惩罚重复行为以提升模型性能。
CodeMidas 是一个智能管道,它从源代码创建强化学习环境,扩展编程代理的训练,并在问题修复和程序构建等基准测试中展示性能提升。
Jerry Liu 分享了关于外派工程师(FDE)工作将如何转向定义目标、环境和评估,而自动化优化流程负责战术执行的想法。
The author argues that RL environments serve as the essential data for building AI agents, enabling systematic training, prompt optimization, and evaluation rather than manual iteration.
Standard Machines launches reinforcement-learning environments for chip design, aiming to accelerate tape-out and push frontier AI capabilities.