performance-optimization

标签

Cards List
#performance-optimization

@RealYDT: 用 Claude 做性能优化,为什么很多人越改越臃肿?全怪大家一上来就爱让 AI“加个缓存” 刚看到一套专治慢代码的狠人指令:逼 Claude 按面向数据(DOD)重写,把哈希表拍平成数组、用索引高位塞常用数据,把 AoS 改成 SoA …

X AI KOLs Timeline ↗ · 2026-11-02 缓存

文章分享了一套让 Claude 做性能优化的提示词技巧:用面向数据设计(DOD)重写代码,把哈希表拍平成数组、指针改为数组索引、AoS 改成 SoA,甚至删光所有缓存,以彻底压榨硬件性能而非用缓存掩盖慢设计。

0 人收藏 0 人点赞
#performance-optimization

7900xtx 提速了

Reddit r/LocalLLaMA ↗ · 2026-11-01

用户分享的一个 GitHub 仓库展示了在 AMD Radeon RX 7900 XTX GPU 上本地运行 Qwen3.8 27B 时,推理速度得到显著提升。

0 人收藏 0 人点赞
#performance-optimization

@akshay_pachaar:推测解码技术迎来重大突破!它让我 MacBook 上的 9B 大模型速度提升了 4 倍,比普通推测解码还快 2.6 倍……

X AI KOLs Timeline ↗ · 2026-10-30 缓存

TryMirai 开源了 uzu —— 一款 Apple Silicon 推理引擎,其核心特性是 Weaver + DFlash 投机解码,能让 9B 参数 LLM(Qwen3.5)在本地运行速度提升 4 倍,比标准投机解码快 2.6 倍。

0 人收藏 0 人点赞
#performance-optimization

@NVIDIARTXSpark:想要在你的 NVIDIA DGX Spark 上获得更高的每秒 token 数?探索三种加速 MoE 推理的技术,从优化内核…

X AI KOLs Following ↗ · 2026-10-29 缓存

@NVIDIARTXSpark 分享了三种加速 NVIDIA DGX Spark 上混合专家模型(MoE)推理的技术,涵盖优化内核、FP8 量化和多 token 预测,以提升每秒 token 吞吐量。

0 人收藏 0 人点赞
#performance-optimization

解决 Postgres 的 Count 性能问题

Hacker News Top ↗ · 2026-10-28 缓存

ParadeDB 详细介绍了基于 Spooky LSM 压缩论文的段分区技术以及其他优化手段,如何在 Postgres 搜索工作负载上大幅提升了 COUNT 查询和带过滤、排序的搜索性能——速度最高可提升至原来的 66 倍。

0 人收藏 0 人点赞
#performance-optimization

@PyTorch:TorchTitan 在原生 PyTorch 中发布重大性能与架构更新,新增完整的 5D 并行支持…

X AI KOLs Following ↗ · 2026-10-21 缓存

TorchTitan 发布重大性能与架构更新,新增对 DeepSeek-V4、Qwen3.5、Kimi K3、Muse Spark Open 等 SOTA 模型的完整 5D 并行支持,并推出统一后训练与智能体工作负载的 TitanRL 框架,FlexShard 与 torch_checkpointing 大幅提升大规模训练效率。

0 人收藏 0 人点赞
#performance-optimization

使用 Claude AI 开发的《上古卷轴4:湮灭 重制版》模组可将帧率提升超过 40%,并在不牺牲画质的情况下大幅减少卡顿

Reddit r/singularity ↗ · 2026-10-21 缓存

一位 Reddit 用户在 Anthropic 的 Claude AI 帮助下,开发了一款开源的《上古卷轴4:湮灭 重制版》性能优化模组,包含 40 多项引擎级优化,可将帧率提升 40% 以上,并大幅减少卡顿,同时不牺牲任何画面效果。

0 人收藏 0 人点赞
#performance-optimization

惊人的免费 3090 提速技巧,经验证有效,免费提升 15% PP、5% TG 性能

Reddit r/LocalLLaMA ↗ · 2026-10-21 缓存

gpu-unlock 1.0.0 发布候选版是一个 Linux 内核模块,通过在 NVIDIA 驱动绑定前解锁 RTX 3090 的 BF16 全速档位,免费实现约 15% 的提示词处理与 5% 的词元生成提速,无需修改驱动或 UEFI。

0 人收藏 0 人点赞
#performance-optimization

TorchNeuron 性能分析(第 1 部分):在 AWS Trainium 上进行系统级性能分析

Hugging Face Blog ↗ · 2026-10-21 缓存

亚马逊关于在 AWS Trainium 上分析 TorchNeuron 工作负载的系列教程第 1 部分,涵盖如何使用 Neuron 后端配置 torch.profiler、解读 key_averages() 输出,以及通过 Neuron Explorer 追踪操作。

0 人收藏 0 人点赞
#performance-optimization

让 dns_erlang 更快:面向 BEAM 的二进制技巧

Lobsters Hottest ↗ · 2026-10-19 缓存

DNSimple 详细介绍了他们如何通过纯 BEAM 二进制处理技巧重写开源 DNS 库 dns_erlang 的热路径,在无需 NIF 或 C 代码的情况下实现每次查询 CPU 降低 12%、每秒查询量提升 14%。

0 人收藏 0 人点赞
#performance-optimization

整数转字符串(2014)

Hacker News Top ↗ · 2026-10-18 缓存

L. Pereira 于 2014 年撰写的一篇博客文章,探讨了在 C 语言中将整数转换为字符串的多种逐步优化的方法,比较了朴素的除法方案、Lwan 中使用的免原地反转的变体,以及 Facebook 的双位数查表技巧——该技巧大致将除法次数减半,带来约 31% 的速度提升。

0 人收藏 0 人点赞
#performance-optimization

@JiaZhihao:如果形式化验证能让 GPU kernel 既更安全又更快呢?隆重介绍 SentryWard,一个开源的形式化…

X AI KOLs Timeline ↗ · 2026-10-16 缓存

介绍 SentryWard:一个开源的 GPU kernel 形式化验证工具,可证明同步安全、无数据竞争与资源生命周期正确性,并通过系统性移除冗余同步使 NVIDIA B200 上的 kernel 最快提速 1.4 倍。

0 人收藏 0 人点赞
#performance-optimization

Accelerating the Zig Tokenizer (with AVX-512)

Lobsters Hottest ↗ · 2026-10-13 缓存

Niles Salter 的演讲介绍如何利用 SIMD 数据并行与位运算原语(CTZ、TZCNT 等)加速 Zig 分词器,实现 820 MB/s 的吞吐量,并探讨 AVX-512 带来的进一步提速空间。

0 人收藏 0 人点赞
#performance-optimization

稍快、更精简的 curl

Lobsters Hottest ↗ · 2026-10-13 缓存

curl 8.23.0 引入多项性能优化,包括 base64 编解码、URL 编解码、日期和数字解析提速,以及约 40% 的结构体内存缩减和更少的内存分配。

0 人收藏 0 人点赞
#performance-optimization

通过……不使用不必要的安全哈希方法来加速 Unreal 编辑器

Lobsters Hottest ↗ · 2026-10-12 缓存

一篇工程博客分享了如何通过将 Unreal 编辑器着色器哈希从缓慢的 SHA1 替换为引擎内已有的 xxHash,从而加速编辑器启动与资产处理。文章强调应避开已被高度优化的代码路径,转而寻找被忽视的低垂果实。

0 人收藏 0 人点赞
#performance-optimization

@yibie:strata-mlx 更新:・被其他请求中断的长对话不再重新读取。对于一个 10,000 token 的对话,下一轮输出首字符的时间从 19.7 秒降至 0.26 秒(M4 Max,需要添加 --conversation-cache-mib)

X AI KOLs Timeline ↗ · 2026-10-12 缓存

strata-mlx 更新:中断的长对话不再重读,10K token 会话的首字符输出时间从 19.7 秒降至 0.26 秒(M4 Max),并优化了 32 GB Mac 的内存管理,避免 swap。该项目是运行 Qwen3.8-Flash-Next 等 125B MoE 模型的 Apple Silicon MLX 推理引擎,吞吐量显著优于 llama.cpp 和 LM Studio。

0 人收藏 0 人点赞
#performance-optimization

strix-llama 新分支:提示词处理性能比 Vulkan 提升 21–54%,在 128k 时最高达到原版 ROCm 内核的 2.7 倍,输出质量相同

Reddit r/LocalLLaMA ↗ · 2026-10-12

strix-llama.cpp 的 rdna35-perf 分支为 Strix Halo(Radeon 8060S)带来新的 RDNA3.5 闪存注意力与 GEMM 内核优化,提示词处理速度比 Vulkan 快 21–54%,在 128k 长上下文下最快可达原版 ROCm 的 2.7 倍,且输出质量与原版 ROCm 基本一致。

0 人收藏 0 人点赞
#performance-optimization

@no_stp_on_snek: 过去几天一直在借来的 Strix Halo(Ryzen AI… 上帮 @Italianclownz 加速他的 llama.cpp 分支 ROCmFPX

X AI KOLs Following ↗ · 2026-10-11 缓存

开发者帮助优化了 llama.cpp 的分支 ROCmFPX 在 AMD Strix Halo(Ryzen AI Max+ 395)上的运行速度,通过合并 16 个 PR,大幅提升了预填充和解码速度,并提高了量化精度。

0 人收藏 0 人点赞
#performance-optimization

提醒:如果你还没试过,不妨试试概率式 MTP。散文文本解码速度提升 14%

Reddit r/LocalLLaMA ↗ · 2026-10-11

提醒用户尝试 llama.cpp 中新合并的概率式 MTP(多 token 预测)功能,在散文生成场景下解码速度提升约 14%,最优 draft-n-max / draft-p-min 参数与贪心采样基本一致。

0 人收藏 0 人点赞
#performance-optimization

在 NumPy 2.5 中让 np.searchsorted 速度提升最高 25 倍

Lobsters Hottest ↗ · 2026-10-10 缓存

NumPy 2.5 引入了 np.searchsorted 的向量化实现,通过批处理和缓存友好技术实现了最高 25 倍的加速,惠及包括 SciPy 和 scikit-learn 在内的更广泛的 Python 科学生态系统。

0 人收藏 0 人点赞
Next →
← 返回首页

提交意见反馈