探索面向模型特化的自主代理数据工程
摘要
本文介绍了自主代理数据工程(Autonomous Agentic Data Engineering)这一任务,其中LLM自主执行端到端的数据整理流水线以实现模型特化,并展示了显著的性能提升(例如,GPT-5.2 将学生模型提升了 57.29%)。
查看缓存全文
缓存时间: 2026/06/01 03:18
论文页面 - 探索用于模型专业化的自主智能体数据工程
来源:https://huggingface.co/papers/2605.30407 作者:
,
,
,
,
,
,
,
,
,
,
,
摘要
大型语言模型可以通过迭代数据适应与优化,自主执行端到端的数据工程流水线,以实现模型专业化。
大型语言模型(Large Language Models,LLMs)在通用任务上表现出色,但在没有高质量领域特定数据的情况下,往往难以适应专业领域。现有的基于LLM的数据筛选(data curation)方法主要依赖人工设计的工作流程,尚未深入探究LLM能否自主执行端到端的数据工程流水线(end-to-end data engineering pipeline)以实现模型专业化(model specialization)。我们正式定义了自主智能体数据工程(Autonomous Agentic Data Engineering)这一新任务,旨在评估LLM作为自主数据工程师,通过端到端的数据筛选(data curation)推动模型专业化(model specialization)的能力。我们将数据视为可优化组件,并研究能够跨多个领域规划、生成并迭代优化训练数据的智能体,其优化方向由训练后性能提升(post-training performance improvement)引导。实验表明,自主LLM数据工程师带来了显著收益:GPT-5.2构建的训练课程使学生模型性能提升了57.29%,这完全是通过迭代的、智能体驱动的数据适应(agent-driven data adaptation)实现的。通过揭示潜力与瓶颈,我们的研究将自主数据工程确立为一项可衡量的能力,并为面向智能体驱动的模型专业化(model specialization)指明了道路。代码将在 https://github.com/zjunlp/DataAgent 发布。
查看 arXiv 页面(https://arxiv.org/abs/2605.30407)查看 PDF(https://arxiv.org/pdf/2605.30407)添加到收藏(https://huggingface.co/login?next=%2Fpapers%2F2605.30407)
在你的智能体中获取此论文:
hf papers read 2605.30407
没有最新的命令行界面?curl -LsSf https://hf.co/cli/install.sh | bash
引用此论文的模型 0
没有模型链接到此论文
请在模型 README.md 中引用 arxiv.org/abs/2605.30407 以从此页面链接。
引用此论文的数据集 0
没有数据集链接到此论文
请在数据集 README.md 中引用 arxiv.org/abs/2605.30407 以从此页面链接。
引用此论文的 Space 0
没有 Space 链接到此论文
请在 Space README.md 中引用 arxiv.org/abs/2605.30407 以从此页面链接。
包含此论文的收藏集 0
没有收藏集包含此论文
请将此论文添加到收藏集(https://huggingface.co/new-collection)以从此页面链接。
相似文章
@freeCodeCamp: 生产级ETL管道需要保持可靠运行,即使数据混乱或API失败。在本手册中,Brookly…
这本freeCodeCamp手册教读者如何使用真实洪水数据在Python中构建生产级ETL管道,涵盖增量加载、类型强制转换、去重和幂等性。
@Docker: 信任与安全是智能体时代成功的基石。没有哪家公司能独自构建这一基石…
Docker加入NVIDIA的Open Secure AI联盟,帮助为智能体AI时代构建信任与安全,使开发者能够在开放模型与前沿模型之间自由切换。
使用智能体集群在两天内清理并迁移400张混乱的遗留表
一个团队使用带有对抗验证的自主AI智能体集群,在两天内清理并迁移了400张遗留数据库表,将人工审阅减少到4%以下,避免了通常需要一个月的手动ETL过程。
极高的解码速度(tok/s)真的有用吗?
讨论:对于Qwen 3.5 397B或GLM-5.2等大模型,极高的解码速度(1k-10k tok/s)是否能解锁新的应用场景,还是更适合用来加载更大的模型。
Meta称AI让构建新应用变得更简单——更多应用即将推出
Meta正利用AI快速开发和发布新的独立应用,近期已推出Forum、Seller和Instagram Instants,并计划推出更多。