workload-analysis

标签

Cards List
#workload-analysis

对于代理循环而言,Claude Fable 5.1的缓存读取折扣是关键所在

Reddit r/AI_Agents ↗ · 2026-09-02

这篇文章比较了Claude Fable 5.1和5,显示由于缓存读取享受75%的折扣,长时间的代理循环成本降低了7.5%,这在长期会话中主导了计费。

0 人收藏 0 人点赞
#workload-analysis

LLM服务的一年:负载演化、缓存与负载均衡

arXiv cs.AI ↗ · 2026-08-17 缓存

本文分析了来自Chutes的一年生产追踪数据,以研究LLM服务负载,揭示时间演化和用户-模型交互,以改进服务系统基准测试。

0 人收藏 0 人点赞
← 返回首页

提交意见反馈