optimization

标签

Cards List
#optimization

为什么本地代理不应在显存中保持所有模型热加载:来自代理循环的实际数据

Reddit r/AI_Agents ↗ · 2026-09-11

通过实现一个基于Rust的守护进程来动态休眠不活跃的AI模型,本地代理的GPU内存使用可以从122 GB减少到43 GB,唤醒延迟低于200毫秒,使得在单个工作站上运行多个模型变得可行。

0 人收藏 0 人点赞
#optimization

@omarsar0: 构建并拥有你的工具,各位。很少有人理解定制和优化智能体工具背后的魔力…

X AI KOLs Following ↗ · 2026-09-11 缓存

该推文强调构建自定义AI智能体工具以优化性能,提到了Pi的应用,并讨论了自我改进算法和本地模型,以实现更好的控制和效率。

0 人收藏 0 人点赞
#optimization

神秘加拿大公司声称其工具将Qwen3.8-27B提升至超越Fable 5。免费发布该工具。

Reddit r/ArtificialInteligence ↗ · 2026-09-11

一家神秘的加拿大公司发布了一款免费工具,声称能增强Qwen3.8-27B以超越Fable 5,并附有GitHub和arXiv链接。

0 人收藏 0 人点赞
#optimization

@__oQuery: 为进一步优化了@lobehub的体验。清理页面文件以实现完全冷启动后,现已接近 Electron 的性能极限…

X AI KOLs Following ↗ · 2026-09-11

一位开发者分享,在优化 Electron 应用程序后,通过清理页面文件实现冷启动,其性能现已接近极限。

0 人收藏 0 人点赞
#optimization

@PyTorch: 更聪明地训练。从分布式训练到优化技术和基础模型,#PyTor…的训练专轨

X AI KOLs Following ↗ · 2026-09-11 缓存

本文介绍了PyTorch北美会议的训练专轨,其中包括分布式训练、优化技术和基础模型的实用会议,旨在提升AI系统的效率。

0 人收藏 0 人点赞
#optimization

优化变形雕塑

Hacker News Top ↗ · 2026-09-11 缓存

作者提出了一种通过梯度下降和可微分渲染优化3D网格来创建变形雕塑的方法,并展示了由汽车、猪和鸽子网格组成的猪形剪影作为示例。

0 人收藏 0 人点赞
#optimization

CUDA/HIP:Flash Attention 调优(gfx1201)由 pwilkin · 拉取请求 #28102 · ggml-org/llama.cpp

Reddit r/LocalLLaMA ↗ · 2026-09-11 缓存

此拉取请求为 llama.cpp 项目中的 CUDA/HIP 引入了 Flash Attention 调优优化,针对 gfx1201 硬件以提升推理性能。

0 人收藏 0 人点赞
#optimization

@Kay2289123: 分享一份最近整理的AI基础设施入门阅读清单——建议收藏并慢慢阅读……

X AI KOLs Timeline ↗ · 2026-09-11 缓存

这篇文章分享了一份精选的AI基础设施入门阅读清单,重点关注大型模型推理主题,如vLLM、连续批处理和性能基准测试。

0 人收藏 0 人点赞
#optimization

CityPlanner:用于可执行城市规划的沙箱代理

arXiv cs.AI ↗ · 2026-09-11 缓存

CityPlanner引入了用于可执行城市规划的统一沙箱环境和原子任务强化学习,在真实世界基准测试中超越了启发式、特定任务的强化学习以及通用LLM代理基线。

0 人收藏 0 人点赞
#optimization

针对对抗状态扰动的风险敏感强化学习下界验证

arXiv cs.LG ↗ · 2026-09-11 缓存

本文将验证方法扩展到风险敏感强化学习,通过凸优化建立了在状态对抗扰动下期望奖励的下界,并展示了通过风险厌恶训练改进的验证下界。

0 人收藏 0 人点赞
#optimization

优化自旋锁

Lobsters Hottest ↗ · 2026-09-10 缓存

这篇博客文章详细介绍了优化C++中的自旋锁,通过逐步改进和基准测试,实现了5.7倍加速和5.4倍能耗降低。

0 人收藏 0 人点赞
#optimization

Pi Agent 用户 - Nvidia 推出 Sol-Pi - 基于 AutoResearch 循环的 Pi 扩展,提升 Harness 效率

Reddit r/LocalLLaMA ↗ · 2026-09-10

SoL-Pi 是针对 Pi agents 的独立扩展,通过行动融合和上下文压缩等机制减少令牌流量和推理工作,从而提升效率。所有功能均为可选启用,并保留原始证据。

0 人收藏 0 人点赞
#optimization

人工智能与民主:抵制优化的权利

Lobsters Hottest ↗ · 2026-09-10 缓存

这篇文章探讨了人工智能优化如何通过将人简化为可评估的要素,进而威胁到民主人文主义,并强调在公共生活中保留相互理解与责任追究等人类独特能力的重要性。

0 人收藏 0 人点赞
#optimization

@jakevin7: 哇靠,这太惊人了!DeepSeek,这真的只是小版本的微调吗???V4.1 Flash 做了大量……

X AI KOLs Timeline ↗ · 2026-09-10 缓存

DeepSeek V4.1 Flash 引入了针对长上下文处理的架构改进,包括因果编码器-解码器、CSA2、分层稀疏索引器和量化,从而大幅优化了内存和计算。

0 人收藏 0 人点赞
#optimization

基于上下文和删失需求的定价与库存学习

arXiv cs.LG ↗ · 2026-09-10 缓存

本文提出了一种结合上下文信息和删失需求的联合定价与库存控制框架,引入了一种高效算法,并证明了其遗憾界。

0 人收藏 0 人点赞
#optimization

具有恒定遗憾的在线资源分配的一阶学习算法

arXiv cs.LG ↗ · 2026-09-10 缓存

本文介绍了一种用于在线资源分配的一阶学习算法,该算法通过梯度上升更新,无需求解线性规划或依赖非退化假设,就能实现与时间范围无关的恒定期望加性遗憾。

0 人收藏 0 人点赞
#optimization

单一学习率不够:LoRA微调的自适应各向异性学习率

arXiv cs.LG ↗ · 2026-09-10 缓存

本文提出了一种用于LoRA微调的自适应各向异性学习率模型,以解决模块内异质性问题,提升性能并在各基准测试中提高秩容量利用率。

0 人收藏 0 人点赞
#optimization

解决:当服务器窗口未聚焦时,Windows上的LLM推理速度降低2-3倍

Reddit r/LocalLLaMA ↗ · 2026-09-09

由于CPU调度延迟,当服务器窗口未聚焦时,Windows上的LLM推理速度降低2-3倍;以分离/无头模式运行服务器解决了这个问题,并保持性能一致。

0 人收藏 0 人点赞
#optimization

GPT-6 Astra利用一篇2014年的数学论文优化了我的Rust回测引擎

Reddit r/ArtificialInteligence ↗ · 2026-09-09 缓存

GPT-6 Astra利用一篇2014年的数学论文优化了一个Rust回测引擎,解决了其他AI模型无法解决的问题,作者认为这表明AGI即将到来。

0 人收藏 0 人点赞
#optimization

为什么Emacs Consult异步搜索感觉慢以及如何加速

Lobsters Hottest ↗ · 2026-09-09 缓存

本文解释了为什么Emacs Consult的异步搜索命令感觉慢,并提供了通过调整防抖、节流和刷新延迟设置来提高速度的配置调整方法。

0 人收藏 0 人点赞
← Previous
Next →
← 返回首页

提交意见反馈