sharding

BriskDB 是一款处于早期阶段的数据库工具，它将 SQLite 文件转化为一个支持并行写入、兼容 PostgreSQL 并嵌入 Rust/Python API 的分片系统，旨在扩展 SQLite 的同时保持其简洁性。

This paper from Carnegie Mellon researchers shows that giving an LLM judge more compute doesn't fix oversight failures when it must check many requirements in one call. It proposes sharding—dividing requirements into smaller groups handled by separate calls—which improves accuracy, resists presentation-based adversarial attacks, and can make a weaker sharded judge match a more capable holistic judge.

PlanetScale 描述了它如何通过为每个分片启动 EC2 实例、从对象存储恢复之前的备份并重放 WAL，来对分片 Postgres 数据库执行大规模并行备份，从而实现超过 50 GB/s 的 PB 级备份速度。

本文档介绍了 hijax 类型，这是 JAX 的一项新功能，允许定义具有自身不变量、切线类型、批处理和分片行为的自定义类型，并通过量化数组的示例进行说明。

Manticore Search 27.1.5 引入了内置身份验证、分片表、对话式搜索以及更快的 HNSW 向量搜索，同时修复并改进了复制、KNN 等多个方面。

本文针对大语言模型在多轮对话中因信息分散而表现不佳的“迷失在对话”问题，提出了一种可扩展的分片流水线，将单轮问答数据集转化为多轮训练数据，并利用基于可验证奖励的强化学习训练一个维持紧凑滚动记忆的记忆增强策略，从而提高了多轮推理准确性，并零样本泛化到更困难的任务。

本文介绍网络流量分析工具 Akvorado 如何通过实现分片来扩展其 BMP 路由信息库（RIB），以处理数千万条路由，并提升并发更新性能。

Ben Dicken 强调，分片是构建可扩展数据库和设计数据密集型应用的关键。