AI艺术无作者:研究发现生成图像常无法追溯至训练数据

MIT News — Artificial Intelligence 论文

摘要

MIT CSAIL的研究人员在大型生成式AI模型中发现了“归属衰减”现象,即生成的图像往往无法追溯到个体训练数据,这通过一种新型扩散集成架构实现。

<p dir="ltr" id="docs-internal-guid-86a5dc68-7fff-c9ca-b44f-a111a63d7ec5">当人工智能图像生成器创作一幅肖像时,谁的作品被纳入其中?这个问题在全球的诉讼、许可协议和拟议法规中处于核心地位。艺术家想要获得认可,公司希望明确责任,政策制定者则寻求一种分配责任的方式。</p><p dir="ltr">MIT CSAIL团队的一项新研究表明,对于在大规模数据集上训练的模型,这个问题往往可能没有答案。这不是因为寻找答案的工具不足,而是因为联系本身已经消失。</p><p dir="ltr">科学家们识别出一种他们称为“归属衰减”的现象:生成式模型训练的数据越多,任何单个训练示例对特定输出的影响就越小。这看似违反直觉,但他们发现,在足够大的规模下,你常常可以从训练数据中移除任何单张图像,或移除某位艺术家的所有图像,或移除某个人的所有照片,而生成样本却不会改变。</p><p dir="ltr">研究者认为,如果移除某物而不改变任何结果,那么它就不能对任何事情负责。</p><p dir="ltr">“如果你移除一个数据点而模型的输出没有改变,那么这个数据点就没有影响输出,”前MIT CSAIL研究员、该工作主要作者Zheng Dai SM ’21, PhD ’24说。“因此,将输出归因于该数据点没有太大意义。如果你接着逐一移除其他每个数据点,发现输出对任何数据点都没有改变,那么将输出归因于其中任何一个也没有太大意义。”</p><p dir="ltr">“所有先前的方法都是近似的,”MIT教授David Gifford说,他是MIT CSAIL的主要研究者。“它们实际上无法绝对证明删除单个事物不会改变输出。本文引入了第一种绝对方法。你实际上删除了输入并删除了所有输入的影响。这是第一种能够高效进行大规模删除并证明结果不变的精确方法。”</p><p dir="ltr">Dai和Gifford的项目在一篇开放获取<a href="https://www.nature.com/articles/s41467-026-75667-5">今天发表在<em>Nature Communications</em>上的论文</a>中描述。</p><p dir="ltr"><strong>重训练问题</strong></p><p dir="ltr">直接测试这个想法意味着回答一个假设性问题:如果这个模型从未见过这张特定图像,它会产生什么?诚实地回答意味着从头开始重新训练模型,不使用该图像,然后对下一张图像、再下一张图像重复此过程。对于数百万训练示例,数学计算很快变得不可行,这就是为什么归因领域的先前工作依赖于估计训练示例影响的近似方法,而不是实际移除它。</p><p dir="ltr">他们的变通方案是一个自建的架构,称为“扩散集成”。它不是一个单一的巨型模型,而是由许多更小的组件组成,每个组件在不同的数据切片上训练。想知道模型在没有特定图像时会做什么吗?只需关闭看到它的部分即可。无需重训练,无需近似。剩下的就是一个真实的反事实模型,而不是它的估计。</p><p dir="ltr">当然,一个巧妙的架构只有在它仍然作为生成器工作时才重要。因此,团队将集成模型与24个在完全相同数据上训练的传统扩散模型进行了头对头比较。通过标准度量,生成的图像看起来效果差不多。</p><p dir="ltr">数据中一个惊喜发现:训练数据越多,集成模型相对于单模型的表现越好,这表明它们可能更数据高效。</p><p dir="ltr">“当数据量低时,它们表现很差,”Dai说。“但如果你有更多数据,与普通扩散模型相比,它实际上扩展得更好。”</p><p dir="ltr"><strong>探索反事实宇宙</strong></p><p dir="ltr">随着消融工作正常,研究人员终于可以大规模地提出问题。取一个生成的图像,然后想象它的每个替代版本,每个版本通过移除不同的训练数据片段产生。团队称此为图像的反事实宇宙。原始图像与其最不同替代版本之间的距离,即反事实半径,捕获了任何单个训练数据片段可能的重要性上限。</p><p dir="ltr">他们在数据集上训练了24个集成模型,数据集大小从256张图像到超过16万张,来自七个公共集合,包括CIFAR-10、CelebA、MetFaces和ArtBench。模式是一致的:训练集越大,半径越小,沿反幂律缩小。无论是逐像素比较还是语义意义比较,差异都以统计显著性缩小。</p><p dir="ltr">团队还对自己的结果进行了压力测试。也许消融本身是罪魁祸首?他们在小规模上用蛮力方法重做,训练了1,282个独立模型,衰减仍然出现。也许更大的数据集只是使每个移除在比例上更小?他们固定了移除比例,它仍然存在。固定时期、文本提示模型、类别条件模型、四种相似性度量——这个发现在所有情况下都存活下来。</p><p dir="ltr"><strong>隐私悖论</strong></p><p dir="ltr">影响的方向让研究者自己都感到惊讶。</p><p dir="ltr">Gifford认为这个发现直接关系到模型输出是否为衍生作品的法律问题。</p><p dir="ltr">“思考这个问题的一种方式是这些模型是创造性的。它们不是简单地复制输入内容,而是创造全新的输出。如果这些输出与任何单个训练数据无关,这就引发了关于合理使用、输出本身是否可作为新作品获得版权、以及当模型输出无法归因于互联网上任何内容时作者如何获得补偿的问题。”</p><p dir="ltr">Gifford还指出,这项工作展示了如何生成保证不可归因的输出,他将此能力定义为行业的义务,而不是漏洞。</p><p dir="ltr">“为了让这些公司声称他们的输出不是以版权侵权方式从互联网衍生的,他们需要修改模型以利用这项工作的进展,从而证明他们没有创建个人或物品的衍生品。”</p><p dir="ltr">这项工作研究了扩散模型,这些模型现在在生成视听媒体中占主导地位,并在包括蛋白质结构建模和治疗发现在内的科学应用中普遍存在。对于处于最高调版权诉讼中心的大型语言模型,同样的衰减是否成立仍然是一个开放问题。</p><p dir="ltr">“如果归因有效,它将可靠地告诉我们模型输出与受版权保护作品之间的相似性是由于复制还是巧合,”康奈尔法学院和康奈尔理工学院的法学教授James Grimmelmann说。“但本文提供了理由认为归因对于有趣的模型将会失败。相反,技术专家和法院将需要诉诸其他方法来评估复制。”</p><p dir="ltr">Dai和Gifford的工作得到了Schmidt Futures的支持。</p>
查看原文
查看缓存全文

缓存时间: 2026/08/19 03:35

# 当AI艺术无作者:研究发现生成图像常无法溯源至训练数据 来源:https://news.mit.edu/2026/when-ai-art-has-no-author-generated-images-often-cant-be-traced-to-training-data-0818 当人工智能图像生成器创作肖像时,其中凝聚了谁的作品?这个问题正成为全球诉讼、授权协议与拟议监管的核心矛盾。艺术家要求署名权,企业需要明晰性,政策制定者则寻求责任归属机制。 麻省理工学院计算机科学与人工智能实验室(CSAIL)团队的最新研究表明,对于使用海量数据集训练的模型,这个问题往往无解——并非追踪工具不足,而是关联本身已经消失。 研究团队发现了他们称之为"溯源衰减"的现象:生成模型训练数据越多,单个训练样本对特定输出的贡献就越微弱。这看似违反直觉,但研究发现当数据规模达到一定量级时,即便删除训练集中任何单张图像、某位艺术家的全部作品、或某个人的所有照片,生成结果也可能保持不变。 研究者指出:如果移除某事物却未改变任何结果,就不能说该事物对结果产生了影响。 "如果移除某段数据而模型输出保持不变,说明这段数据未影响输出。"该项目首席作者、前MIT CSAIL研究员戴正(Zheng Dai,SM '21, PhD '24)解释道,"因此将输出归因于该段数据是缺乏逻辑的。如果我们对其他每段数据都进行同样操作,发现输出始终不变,那么将输出归因于其中任何一段数据都是不合理的。" "所有先前的方法都是近似性的,"MIT CSAIL首席研究员戴维·吉福德教授(David Gifford)表示,"它们实际上无法绝对证明删除个别内容不会改变输出。本文提出了首个绝对验证方法——通过实际删除输入内容及其所有影响。这是首个能高效执行大规模删除并验证结果不变的确切方法。" 戴正与吉福德的研究成果今日发表于《自然·通讯》期刊(https://www.nature.com/articles/s41467-026-75667-5)的开放获取论文中。 **重训难题** 直接验证这个设想需要回答一个假设性问题:如果模型从未见过这张特定图像,它会产生什么结果?诚实的回答需要从头重训模型——不含该图像的完整重训,然后对下一张图像重复此过程。面对数百万训练样本,数学运算会迅速变得不可行,这正是该领域先前研究依赖近似估算而非真实删除的原因。 他们的解决方案是自创的"扩散集成"架构:不同于单一巨型模型,该架构由多个子组件构成,每个组件在不同的数据子集上训练。若要测试移除特定图像的效果,只需关闭曾接触该图像的组件,无需重训或近似——剩下的就是真正的反事实模型,而非估算模型。 当然,巧妙的架构必须确保生成能力不受影响。研究团队将集成模型与24个使用相同数据训练的传统扩散模型进行对比,按标准衡量,两者生成的图像质量相当。 数据呈现一个惊喜发现:训练数据越多,集成模型相比单体模型的表现优势越明显——这暗示其数据效率可能更高。 "数据量较少时表现很差,"戴正说明,"但当数据充足时,其扩展性实际优于传统扩散模型。" **探索反事实宇宙** 实现消融实验后,研究团队终于能大规模验证核心问题:生成一张图像,然后想象每个因删除不同训练数据而产生的变体——他们称之为该图像的"反事实宇宙"。原始图像与最显著变体之间的距离(反事实半径),量化了单个训练数据可能产生的最大影响。 研究团队在七组公共数据集(含CIFAR-10、CelebA、MetFaces、ArtBench)上,用256张至超16万张图像训练了24组集成模型。规律始终如一:训练集越大,反事实半径越小,呈现逆幂律衰减趋势。无论是像素级还是语义级差异度量,该规律均具有统计显著性。 团队还进行了严苛验证:是否消融方法本身导致了衰减?他们在小规模数据集上暴力训练1282个独立模型,衰减现象依然存在。是否大数据集使每次删除的比例相对变小?锁定删除比例后衰减仍然持续。固定训练轮次、文本提示模型、类别条件模型、四种相似性度量——该发现经受住了所有测试。 **隐私悖论** 研究结果指向一个令团队自身都感到意外的方向。 吉福德认为该发现直接关系到"模型输出是否构成演绎作品"的法律争议。 "可以这样理解:这些模型具有创造性,它们并非简单复制输入内容,而是生成全新作品。如果输出结果与任何单个训练数据都无关联,这将引发关于合理使用、输出作品自身版权性,以及当模型产出无法溯源时如何补偿作者等问题。" 吉福德同时指出,这项研究展示了如何生成保证不可溯源的输出——他将此能力定位为行业责任而非漏洞:"这些公司若想证明其输出未以侵犯版权的方式演绎互联网内容,就需要利用本研究成果改进模型,以证明其未创造任何个人或物品的演绎作品。" 该研究针对当前主导视听媒体生成、并广泛应用于蛋白质结构建模等科学领域的扩散模型。对于处于最高调版权诉讼中心的大语言模型,同样的衰减规律是否成立仍是待解问题。 "如果溯源机制有效,本应可靠判断模型输出与版权保护作品的相似性是源于复制还是巧合,"康奈尔大学法学院与康奈尔理工学院法学教授詹姆斯·格里尔曼(James Grimmelmann)指出,"但本文表明,对于有实际意义的模型,溯源机制可能失效。技术专家与法庭或将需要采用其他方法评估复制行为。" 戴正与吉福德的研究获得了施密特未来(Schmidt Futures)基金支持。

相似文章

AI如何识别AI生成的内容?

Reddit r/ArtificialInteligence

探讨了AI模型在AI生成的内容上训练的问题,随着不准确性的累积,可能导致质量下降和真相的丧失。

AI只是更大规模的无授权抄袭

Hacker News Top

作者认为,AI模型通过未经同意训练受版权保护的内容构成无授权抄袭,并且AI生成的仿冒品在搜索结果中排名超过了原创者。