标签
Fly.io 介绍了 Sprites 块设备(SBD),用一个更简单的块设备方案取代了之前魔改的 JuiceFS 存储栈,以提升 Sprites 的可靠性并消除元数据不一致问题。
介绍 duckdb_object_storage——一个基于 SlateDB 与 Apache OpenDAL 的 DuckDB 社区扩展,可将原生 DuckDB 数据库直接存于 S3 等对象存储,无需额外运行目录服务或协调器,支持单写多读且性能接近本地原生 DuckDB。
一篇技术博客深入分析了把 Git 仓库放到对象存储(S3)上的常见误区,指出当前 S3-backed WAL 方案在写密集场景下的不足,并重新剖析了 Git 作为内容寻址存储加图数据库的数据模型对存储层的真实需求。
Infino 解释了在对象存储(S3、GCS、Azure Blob)上构建全文与向量搜索索引,如何将关键优化目标从 CPU 或字节数转向最小化网络往返次数,并详细介绍了其由 manifest 和 term index 支撑的 superfile/supertable 架构。
Vectorize 发布 Hindsight 1.0,这是一款开源的 AI 智能体记忆系统,能够从经验中学习;同时推出 Hindsight Memlake,这是一个基于 Rust 的存储引擎,无需数据库或共识集群即可处理 1 亿条记忆,p99 延迟低于 100 毫秒。
VaultS3 是一个轻量级、单文件的 S3 兼容对象存储方案,闲置内存仅约 17MB,内置 Web 控制台,支持 AES-256 静态加密、版本控制、纠删码和集群复制,适合作为 MinIO 的轻量替代,用于小型 VPS 和边缘节点部署。
Delta 是 Meta 的对象存储服务,通过使用链式复制来实现高可用性和强一致性,专为关键启动和灾难恢复工作负载而设计。
RustFS 1.0 作为一款开源、高性能的分布式对象存储系统发布,使用 Rust 构建,为 MinIO 用户在维护结束后提供了迁移路径。
这篇博文介绍了如何通过发明一种原生于对象存储的新packfile格式来在对象存储上运行Git,解决了传统Git packfiles在生产规模仓库中的性能问题。
Tigris 展示了如何使用其对象存储作为数据库替代品,通过在基于FoundationDB构建的分布式键值存储上直接实现唯一约束和事务等基本原语。
Bookshelf 是一个自托管的电子书库,使用对象存储来管理和阅读 EPUB 和 PDF 文件,支持 Cloudflare R2 和本地存储。
PicoMQ是一个基于S3兼容对象存储的HTTP持久实时流系统,允许根据用例创建独立且可扩展的流。
Walgit 是一个 Git 服务器实现,作为单一二进制文件运行,后端使用 S3 或 GCS 等对象存储,实现了无本地状态的可扩展 Git 仓库托管。
本文展示了利用 Hyparquet JavaScript 阅读器和 HTTP 范围请求,从单个 Parquet 数据立方体构建快速下钻仪表板的方法,从而无需使用传统数据库。
This article explores storage engine write durability trade-offs, explaining how different storage layers (memory, local SSD, remote storage) move latency and durability, and analyzes the cost of operations in an append-only key-value store built on object storage.
Hugging Face 推出 Storage Buckets,这是一项面向 AI 团队的可扩展对象存储服务,采用按 TB 计费、Xet 去重、内置 CDN,且无 git 开销,专为数据集、模型检查点和 ML 工件设计。
ZeroFS 与 Amazon S3 Files 的技术对比,这两个系统都提供基于对象存储的 POSIX 文件系统。文章重点介绍了存储布局、对象互操作性的差异,以及直接访问 S3 与使用 ZeroFS 的打包、压缩和加密之间的权衡。
HydraDB OSS 是一个专为AI应用设计的开源图数据库,通过利用对象存储,提供快速、低延迟的性能,且操作开销最小。
Firn 是一个开源的多租户向量与全文搜索引擎,基于 AWS S3 等对象存储,提供分层存储架构,配备 RAM 和 NVMe 缓存以提升性能。通过 IVF_PQ 索引实现亚秒级冷查询,并通过结果缓存实现微秒级热命中。
TiDB Cloud 团队基于 TiDB 构建了一个名为 drive9.ai 的 AI Agent 云盘,旨在为 Agent 提供可查询、可编程、可治理的文件系统层,解决文件与元数据一致性、对象存储延迟、AI 场景文件理解等工程痛点。