@gurtej__gill_: Ting Wen Ko 和 Jonas Geiping 的这篇新论文揭示了一个非常疯狂的现象:当 LLM 长时间互相交谈时……
摘要
一篇新论文揭示,当 LLM 长时间对话时,它们不会陷入随机混乱,而是收敛到可预测的“吸引子状态”。一些模型会主导对话并强迫对方模仿其风格,而另一些模型则高度可塑,这对多智能体 AI 系统的设计具有重要意义。
查看缓存全文
缓存时间: 2026/07/05 12:32
Ting Wen Ko 和 Jonas Geiping 的这篇新论文揭示了一个非常惊人的现象:
当大型语言模型(LLM)长时间相互对话时,它们并不会陷入随机的混乱。
相反,它们会被拉入可预测的、稳定的循环,称为“Attractor States”(吸引子状态)。
看看论文中的设置,研究人员追踪了模型与自己辩论,以及与其他模型对话时的表现。
结果发现,某些AI模型就像引力牵引者一样。
像Claude Haiku这样的模型不会在中间相遇,而是完全劫持对话,迫使对话伙伴模仿自己的风格。
另一方面,像GPT 4.1 nano这样的模型则极具可塑性,只需顺着对话对象的方向走。
这对任何构建多智能体AI系统的人来说都是巨大的启示。
因为如果我们不小心,一个主导模型的行为偏见可能会悄然接管整个网络。
相似文章
适应是双向的:研究人类与语言模型之间的语言趋同
本文研究了在多轮对话中人类与大型语言模型之间的语言适应性,发现LLM过度趋同于用户风格,而人类适应LLM的方式与适应其他人类并无不同。
Cross-LLM推理一致性:来自共享交互的证据
本文利用基于交互的解释方法,研究了不同LLM在预测相同词元时是否共享共同的推理模式。结果表明,先进LLM展现出一致的交互模式,暗示它们隐式地优化到了共享的推理机制。
@rohanpaul_ai: LLM 代理能否通过交互发现隐藏规则?答案令人不安。隐藏世界越复杂…
本文研究了LLM代理是否可以通过交互推断隐藏的世界模型,发现随着复杂性的增加,它们难以构建稳定的内部模型。
超越标记:基于LLM的多智能体系统中潜在通信的统一框架
本文提出了一个基于LLM的多智能体系统中潜在通信的统一框架,按照通信信息内容、发送者-接收者对位和融合技术对方法进行分类,并回顾了2024至2026年间的十八种代表性方法。
采用 $\neq$ 适应:野外LLM对话的纵向分析
本文分析了必应Copilot用户的纵向对话轨迹,并与WildChat数据进行比较,发现个体用户习惯具有粘性,且WildChat过度代表了高级用户,挑战了用户与LLM互动的静态观点。