optimization

标签

Cards List
#optimization

Φ-Bench: 大型语言模型能否设计驱动自身的基础设施?

Hugging Face Daily Papers ↗ · 2026-09-09 缓存

Φ-Bench是一个基准测试,旨在评估大型语言模型在工程设计和优化LLM基础设施栈方面的能力,覆盖从内核优化到端到端系统设计的任务。

0 人收藏 0 人点赞
#optimization

@Hass_Abdallah11: 我们有两篇新的 Colfax 文章,关于优化 FlashAttention-4,其中包括我(解码)和 Jack Carlisle(反向传播)的工作…

X AI KOLs Timeline ↗ · 2026-09-08 缓存

文章详细介绍了 FlashAttention-4 的优化技术,包括用于解码的 S/P 乒乓方法以重叠操作,在 NVIDIA Blackwell GPU 上实现了高达 16% 的性能提升。

0 人收藏 0 人点赞
#optimization

@jcjohnss: 我们的新Atlas模型经过一些密集的推理优化后,现在可以实时运行!生成和导航世界变得更加互动了…

X AI KOLs Following ↗ · 2026-09-08 缓存

Atlas模型经过密集的推理优化后,现在可以实时运行,使得在B200和MI355X硬件上的世界生成和导航更加互动。

0 人收藏 0 人点赞
#optimization

Python中的集合和字典可能具有二次方时间性能

Hacker News Top ↗ · 2026-09-08 缓存

本文解释了Python的dict和set数据结构通常被认为是O(1)的,但在涉及哈希冲突和内存层次结构效应的场景中,可能表现出二次方时间性能。

0 人收藏 0 人点赞
#optimization

为电子表格代理设置响应预算,而非仅单元格范围参数

Reddit r/AI_Agents ↗ · 2026-09-08

这篇文章建议为电子表格AI代理设置响应预算,以确保高效和完整的数据检索,专注于限制输出并允许上下文跟进。

0 人收藏 0 人点赞
#optimization

JavaScript的深度:247字节内的扫雷游戏

Lobsters Hottest ↗ · 2026-09-08 缓存

本文展示了可在浏览器中运行的247字节版本的JavaScript扫雷游戏实现,详细介绍了为达成如此极小代码量所采用的编程技巧。

0 人收藏 0 人点赞
#optimization

针对Strix Halo - 官方llama.cpp并非理想选择及如何实现最高吞吐量

Reddit r/LocalLLaMA ↗ · 2026-09-08

本文讨论了在Strix Halo硬件上优化性能的官方llama.cpp替代方案,其中特定分支在AI推理任务中实现了显著更高的吞吐量。

0 人收藏 0 人点赞
#optimization

@omarsar0:这个方法与 GPT-6 Astra 配合得非常好:给它一条展示 Astra 惊人演示的推文。要求 Astra(中等模式)复现它……

X AI KOLs Following ↗ · 2026-09-05 缓存

这篇文章推荐使用 GPT-6 Astra,通过将任务分解为步骤,首先用中等设置复现一个演示,然后使用最大设置优化结果,利用子代理提高效率。

0 人收藏 0 人点赞
#optimization

@UnslothAI: 我们让 GLM-5.3-Flash 在本地运行速度提升3.3倍!本地 GGUF 推理现在快1.6–3.4倍,通过优化解码和…

X AI KOLs Following ↗ · 2026-09-04 缓存

Unsloth AI 宣布对 GLM-5.3-Flash 进行优化,实现1.6–3.4倍更快的本地 GGUF 推理,支持多令牌预测和运行本地模型的硬件要求。

0 人收藏 0 人点赞
#optimization

LeanGRPO: 消除扩散强化学习中的冗余重计算

arXiv cs.LG ↗ · 2026-09-04 缓存

LeanGRPO通过引入无重计算的训练计划,消除扩散强化学习方法中的冗余重计算,在保持优化目标的同时实现高达1.83倍的速度提升。

0 人收藏 0 人点赞
#optimization

Tail-Likelihood Reinforcement Learning

arXiv cs.LG ↗ · 2026-09-04 缓存

该论文提出了一种名为 Tail-Likelihood Reinforcement Learning (TailRL) 的优化方法,该方法专注于奖励分布的上尾部分,以改善生成任务中的策略性能,并在多种应用中进行了演示。

0 人收藏 0 人点赞
#optimization

失去顺序,保持层次:HTN计划的去序技术

arXiv cs.AI ↗ · 2026-09-04 缓存

本文将经典规划中的两种计划去序技术应用于层次任务网络规划,展示了在保持计划有效性的同时显著减少排序约束。

0 人收藏 0 人点赞
#optimization

适应不断变化的需求:用于零售供应链运营的代理AI

arXiv cs.AI ↗ · 2026-09-04 缓存

本文提出了一种图约束的代理AI框架,利用大型语言模型适应零售供应链运营的不断变化需求,并在与零售合作伙伴的评估中显示,与直接LLM重构相比,提高了正确性和端到端成功率。

0 人收藏 0 人点赞
#optimization

你的HTML中无需使用initial-scale

Lobsters Hottest ↗ · 2026-09-03 缓存

文章指出,在viewport meta标签中,`initial-scale=1.0`参数对于现代浏览器来说是多余的,可以省略以减小HTML文件大小。

0 人收藏 0 人点赞
#optimization

FlashKAN:通过截断幂形式实现B样条KANs

arXiv cs.LG ↗ · 2026-09-03 缓存

FlashKAN提出了一种加速柯尔莫哥洛夫-阿诺德网络(KANs)的方法,通过将Cox-de Boor递归替换为截断幂形式来评估B样条,提供了融合的GPU实现和一个开源包。

0 人收藏 0 人点赞
#optimization

信念校准优化:一个明确的智能体优化世界模型

arXiv cs.AI ↗ · 2026-09-03 缓存

介绍了信念校准优化(BCO),这是一种通过显式跟踪和修正对编辑环境响应的信念来维护持久世界模型以提高LLM智能体性能的方法。

0 人收藏 0 人点赞
#optimization

TaRA:训练感知的低秩适应初始化

arXiv cs.CL ↗ · 2026-09-03 缓存

TaRA是一种针对低秩适应(LoRA)的训练感知初始化方法,它提高了梯度保真度,从而在各种任务中提升了大型语言模型的微调性能。

0 人收藏 0 人点赞
#optimization

你如何确认长共享前缀确实被缓存了?

Reddit r/AI_Agents ↗ · 2026-09-02

作者描述了提示中易变的请求标识符如何干扰前缀缓存,导致高流量用户的成本和延迟增加,并询问缓存改进的验证方法。

0 人收藏 0 人点赞
#optimization

QTEA:采用稀疏残差显著权重与按列优化的三值大语言模型

arXiv cs.LG ↗ · 2026-09-02 缓存

QTEA是一种面向大语言模型的亚2比特训练后量化框架,通过稀疏残差显著权重与按列优化,实现了三值权重压缩,并提升了准确率与硬件效率。

0 人收藏 0 人点赞
#optimization

REAL-Q:通过动态梯度下降实现端到端大语言模型量化

arXiv cs.LG ↗ · 2026-09-02 缓存

本文提出REAL-Q,一种新颖的端到端对齐训练后量化方法,用于大语言模型,该方法利用动态梯度下降来减轻量化误差,在KL散度降低方面相较于最先进方法实现了显著改进。

0 人收藏 0 人点赞
← Previous
Next →
← 返回首页

提交意见反馈