representational-analysis

标签

Cards List
#representational-analysis

将大型语言模型(LLM)中的身份形成建模为通过多实例关系交互驱动的超图演化,并测量激活空间中的结构分歧。

Reddit r/ArtificialInteligence · 6天前

作者提出了一种新颖的实验框架,旨在通过多实例交互来研究大语言模型(LLM)的身份形成过程,将其视为超图的演化。该框架与标准的多智能体辩论不同,它关注的是激活空间中的结构差异,而非任务性能。

0 人收藏 0 人点赞
#representational-analysis

大型语言模型中的推理源于受限推理流形

arXiv cs.LG · 6天前 缓存

本文将大语言模型中的推理视为一种内在的动力学过程,发现推理时的表征会自组织成低维流形。文章提出了一种基于内部动力学的无标签诊断方法,以评估推理质量,表明有效的推理受到几何和信息约束的支配。

0 人收藏 0 人点赞
← 返回首页

提交意见反馈