multi-document

标签

Cards List
#multi-document

@akshay_pachaar:你的 KV 缓存中 90% 从未被重用。(提示缓存从未旨在解决此问题)如果你的系统提示和工具定义…

X AI KOLs Following ↗ · 2026-07-20 缓存

CacheBlend,EuroSys 2025 最佳论文,解决了由于提示缓存中严格的前缀匹配导致 90% 的 KV 缓存从未被重用的问题。通过选择性地仅重新计算文档之间的边界令牌,它在不损失质量的情况下实现了 2-4 倍的多文档处理速度提升,并在开源 LMCache 层中实现。

0 人收藏 0 人点赞
#multi-document

Parsewise API

Product Hunt ↗ · 2026-05-22

Parsewise 是一个用于智能体多文档处理的 API,能够高效处理多个文档。

0 人收藏 0 人点赞
#multi-document

CHOP: 多文档RAG的分块式上下文保留框架

arXiv cs.CL ↗ · 2026-04-20 缓存

CHOP是一个通过使用上下文感知元数据和基于大语言模型的分块相关性评估来改进多文档检索RAG系统的框架,可以减少语义冲突和幻觉现象。该方法通过智能分块和上下文保留策略实现了90.77%的Top-1命中率。

0 人收藏 0 人点赞
← 返回首页

提交意见反馈