@almoggavra:这项优化现已部署至 Dropbox,其 SlateDB 启动时间降低了 60 倍。LIST 调用代价高昂,各位。
摘要
Almog Gavra 宣布,一项使用 HEAD 请求替代 LIST 调用的性能优化已在 Dropbox 部署,将 SlateDB 启动时间减少了 60 倍。
这项优化现已部署至 Dropbox,其 SlateDB 启动时间降低了 60 倍。
LIST 调用代价高昂,各位。
查看缓存全文
缓存时间: 2026/05/30 06:31
该方案已在 Dropbox 部署,SlateDB 启动时间因此减少了 60 倍
LIST 调用成本高昂,切记
Almog Gavra(@almoggavra): 了解你的 S3 操作延迟与成本。有时用 HEAD 请求探查文件比用 LIST 更划算。
刚合并到 Slate:https://t.co/q65sgsTmkB 采用指数探测 + 二分查找处理顺序文件
相似文章
@Greptime: GreptimeDB 的扁平格式查询现在可以在任何列上预过滤——标签、字段、时间戳——而不仅仅是主键。而…
GreptimeDB 的扁平格式查询现在支持在任何列(标签、字段、时间戳)上预过滤,而不仅仅是主键,性能提升高达 4.5 倍。此外,mito2 存储引擎移除了其遗留扫描路径,清理了约 1800 行代码。
@cognition: Beau Rothrock 在 @AngelList 工作两个月时,接手了一个陷入严重困境的从 Redshift 迁移到 Snowflake 的项目……
Beau Rothrock 使用 AI 编程助手 Devin,在五周内将 14,000 个仪表盘从 Redshift 迁移到 Snowflake,成功克服了项目延误的问题。
@vanstriendaniel: 您现在可以对21.9亿个网页运行SQL查询,无需下载!@CommonCrawl 2026年4月的爬取数据及URL索引已上线@huggi...
一个Hugging Face Space允许您对Common Crawl的21.9亿个网页运行SQL查询而无需下载,它使用DuckDB直接从Hugging Face存储桶读取数据。
@jhleath: https://x.com/jhleath/status/2065408690992148698
作者解释了如何构建一个能够在恒定时间内每秒启动数百万个沙箱的计算平台,重点介绍了使用Cassandra和S3进行解耦调度和能力聚合。
HN发布:Ardent (YC P26) – 零迁移秒级Postgres沙盒
Ardent是一家由YC支持的初创公司,提供零迁移秒级Postgres数据库沙盒,使编码代理能够在类似生产的数据上无风险测试代码。