@jennyzhangzt: 通用智能需要重新思考探索

X AI KOLs Timeline 2026/05/16 00:46 论文

摘要

本文认为，探索对于所有学习系统（包括监督学习）都是至关重要的，并提出了一种通用探索框架，以推动开放式学习走向通用智能。

通用智能需要重新思考探索 https://t.co/QA4uKB6oDl

查看原文

查看缓存全文

缓存时间: 2026/05/17 01:25

通用智能需要重新思考探索

https://t.co/QA4uKB6oDl

通用智能需要重新思考探索

来源：https://arxiv.org/abs/2211.07819 查看PDF (https://arxiv.org/pdf/2211.07819)

摘要：我们正处于从“从数据中学习”向“学习应该从哪些数据中学习”转变的前沿，这一转变正成为人工智能研究的核心焦点。虽然一阶学习问题尚未完全解决，但基于统一架构的大模型（如Transformer）已将学习瓶颈从如何有效训练模型转移到了如何有效获取和使用任务相关数据。我们将此问题称为“探索”，它是真实世界等开放领域学习中普遍存在的方面。尽管AI中的探索研究主要局限于强化学习领域，但我们认为探索对所有学习系统都至关重要，包括监督学习。我们提出了广义探索问题，以在概念上统一监督学习和强化学习中基于探索的学习，从而突显不同学习环境之间的关键相似性以及开放的研究挑战。重要的是，广义探索是维持开放学习过程的必要目标，在不断学习发现和解决新问题的过程中，它为迈向更通用的智能提供了一条有前途的路径。