IONS:一种在LLM外部存储声明、证据和推理路径的推理图
摘要
IONS是一种开源的AI记忆与推理方法,它使用名为认知构建块(CBBs)的基于证据的声明图,将知识存储在模型权重之外,从而使推理过程可检查。
我一直在试验一种名为IONS的开源替代方案,用于AI记忆与推理。其基本思想是,不将所有知识存储在模型权重内,而是将知识表示为一系列基于证据的声明图,这些声明称为认知构建块(CBB)。每个CBB包含:
- 一个声明
- 支持证据
- 置信度元数据
- 来源
- 与其他声明的关系
关系是有类型的:
- supports
- causes
- contradicts
- depends_on
- derived_from
当执行查询时,系统遍历图并返回:
- 答案
- 支持性声明
- 置信度分数
- 用于得出结论的推理路径
目标不是取代LLM,而是让推理和知识变得可检查,而非隐含。当前我正在探索的问题:
- 这与GraphRAG相比如何?
- 显式声明存储是否能提高可解释性?
- 置信度能否根据证据质量计算,而非由模型生成?
- 知识能否在独立节点间共享,而无需重新训练模型?
公共节点:162.243.203.243:8000
白皮书:[github.com/nomad505050/ions-genesis/docs/whitepaper.md](http://github.com/nomad505050/ions-genesis/docs/whitepaper.md)
欢迎从事GraphRAG、知识图谱、记忆系统、智能体记忆或可解释AI的人士提供反馈。
相似文章
模仿游戏:当LLMs通过代码中心推理数据合成学会像程序一样推理
MIMIC是一个框架,它使用可执行代码为LLMs合成推理轨迹,通过代码工具奖励增强其确定性推理,并在推理基准测试中取得改进的性能。
REAL: 一种用于LLMs长期记忆管理的推理增强图框架
REAL是一种用于LLMs长期记忆管理的推理增强图框架,它利用时间与置信度感知的有向属性图,采用非破坏性时间更新和混合波束搜索检索,平均性能提升22.72%。
面向忠实知识图谱推理的结构内化规则语言模型
本文提出了一种结构内化规则语言模型(SIRLM),旨在解决知识图谱推理中使用大语言模型时的推理证据感知漂移问题,通过耦合结构和参数知识来提高忠实性和有效性,实验表明其优于最先进的方法。
AIPO:通过与主动交互学习推理
本文介绍了 AIPO,一种强化学习框架,通过允许模型在探索过程中主动咨询协作智能体,从而克服能力边界,提升大语言模型的推理能力。
LEDGERMIND:基于结构化证据账本的来源约束多模态智能体推理
本文介绍了LedgerMind,一种来源约束的多模态智能体推理框架,它使用结构化证据账本确保视觉问答中推理的立足性和忠实性,解决幻觉和过度推理等失败模式。