matrix-multiplication

标签

Cards List
#matrix-multiplication

OpenAI 和 Anthropic 宣称:AI 攻克了计算机科学领域一个长达 27 年的核心难题

Reddit r/artificial ↗ · 2026-10-30

OpenAI 和 Anthropic 声称,他们的人工智能系统已破解计算机科学领域一个悬而未决长达 27 年的问题,标志着人工智能驱动的数学发现取得重大里程碑式进展。

0 人收藏 0 人点赞
#matrix-multiplication

@ickma2311: ∇ Stanford CS336(Spring 2026)— 第 6 讲:Kernels 与 Triton 更短的张量表达式不一定意味着更少的 GPU 内存往返

X AI KOLs Following ↗ · 2026-10-18 缓存

斯坦福 CS336(2026 春)第 6 讲的笔记,讲解如何通过减少 GPU 内存往返来优化内核:对比 softmax 多次遍历与融合行内核的内存流量,介绍 Triton 的块级编程模型,并强调先用 CUDA event 测量基线、再做内核融合与分块优化。

0 人收藏 0 人点赞
#matrix-multiplication

面向机器学习应用的代数整数量化

arXiv cs.LG ↗ · 2026-10-12 缓存

本文提出代数整数量化(AIQ)作为大语言模型推理的有损压缩格式,利用代数整数可实现无误差乘加运算的特性构建矩阵乘法引擎,在等比特预算下达到与业界标准 MX 格式竞争的精度。

0 人收藏 0 人点赞
#matrix-multiplication

Anthropic内部模型推翻了3SUM与APSP猜想:首个真正次二次3SUM与真正次三次APSP算法(Alman & Vassilevska Williams)

Reddit r/singularity ↗ · 2026-10-06 缓存

Anthropic内部的Claude模型发现了首个真正次二次的3SUM算法(O(n^1.9992))与真正次三次的APSP算法(O(n^2.9995)),推翻了细粒度复杂性理论中长期悬而未决的3SUM与APSP猜想。这一成果由Josh Alman和Virginia Vassilevska Williams写成论文加以形式化,源自一种新的稀疏矩阵乘法算法,并已通过Lean 4完成验证。

0 人收藏 0 人点赞
#matrix-multiplication

更换乘积,保留参数:Transformer的关联代数层

Hugging Face Daily Papers ↗ · 2026-09-26 缓存

本文研究了将Transformer层中的矩阵乘法替换为关联代数积,以在保留参数的同时降低计算成本,证明了其可行性,提高了吞吐量,但存在一些性能权衡。

0 人收藏 0 人点赞
#matrix-multiplication

vulkan: 针对AMD RDNA3和RDNA4的int8 coopmat1矩阵乘法实现 (… · ggml-org/llama.cpp@70c4e15)

Reddit r/LocalLLaMA ↗ · 2026-09-24 缓存

此更新为llama.cpp引入了基于Vulkan的int8协作矩阵乘法实现,针对AMD RDNA3和RDNA4 GPU,提升这些硬件平台上的推理性能。

0 人收藏 0 人点赞
#matrix-multiplication

@jessiedong_: split-K 矩阵乘法即使在代码和输入相同的情况下也以给出不同的答案而闻名。但 h…

X AI KOLs Timeline ↗ · 2026-09-02 缓存

本文描述了关于 split-K 矩阵乘法的实验,揭示了答案的变异性取决于块布局和分割计数,在 B200 GPU 上的测试显示了不同条件下的输出变化。

0 人收藏 0 人点赞
#matrix-multiplication

利用现代优化与AlphaEvolve改进矩阵乘法指数

Hugging Face Daily Papers ↗ · 2026-08-17 缓存

本文提出利用现代技术和AlphaEvolve改进组合损失分析中的优化问题,从而得到矩阵乘法指数的改进上界。

0 人收藏 0 人点赞
#matrix-multiplication

手工计算离散傅里叶变换

Hacker News Top ↗ · 2026-08-14 缓存

本文提供了手工计算离散傅里叶变换(DFT)的逐步指南,展示其涉及类似深度神经网络中的矩阵乘法。

0 人收藏 0 人点赞
#matrix-multiplication

@ProfTomYeh:手动反向传播 ~ 下面11个步骤详解 反向传播是真正训练神经网络的算法…

X AI KOLs Timeline ↗ · 2026-07-20 缓存

通过矩阵乘法手动演练一个3层网络的反向传播,展示从梯度到权重更新的全部11个步骤。

0 人收藏 0 人点赞
#matrix-multiplication

85.3 GFlops:在单个AMD Zen 3核心上优化FP32矩阵乘法

Hacker News Top ↗ · 2026-07-17 缓存

在AMD Zen 3上对FP32矩阵乘法优化的系统性探索,使用AVX2/FMA内联指令实现了85.30 GFLOPS(理论峰值的63.5%),超越了朴素实现56.5倍,并达到了优化库的性能水平。

0 人收藏 0 人点赞
#matrix-multiplication

AI芯片的强劲动力(6分钟阅读)

TLDR AI ↗ · 2026-07-16 缓存

本文解释了脉动阵列如何处理AI芯片中超过95%的计算,详细介绍了它们的设计、工作模式以及为什么它们在矩阵乘法中高效。

0 人收藏 0 人点赞
#matrix-multiplication

x86准备好迎接ACE了吗?

Hacker News Top ↗ · 2026-07-14 缓存

本文分析了x86生态系统咨询小组提出的新ACE规范,该规范扩展了英特尔的AMX,用于AI矩阵乘法,具有固定块大小和外积指令,并与Arm的SME进行了比较。

0 人收藏 0 人点赞
#matrix-multiplication

@mkvenkit: Google的Tensor Processing Unit (TPU)采用脉动阵列架构——一个源自1978年的想法——来加速矩阵乘法…

X AI KOLs Timeline ↗ · 2026-06-27 缓存

Google的TPU采用源自1978年的脉动阵列架构,以更少的内存移动来加速矩阵乘法。该帖子分享了原始论文和TPU设计的链接,并建议在FPGA上构建一个小型版本。

0 人收藏 0 人点赞
#matrix-multiplication

[x86] AI计算扩展(ACE)规范

Hacker News Top ↗ · 2026-06-18 缓存

x86生态系统咨询小组发布了AI计算扩展(ACE)规范,该规范定义了新的x86指令和寄存器状态,用于加速机器学习工作负载中的矩阵乘法和低精度数据格式。

0 人收藏 0 人点赞
#matrix-multiplication

用 Swift 训练大语言模型,第一部分:将矩阵乘法从 Gflop/s 提升到 Tflop/s

Hacker News Top ↗ · 2026-05-10 缓存

作者详细介绍了在 Apple Silicon 上优化 Swift 自定义矩阵乘法内核以训练大语言模型的过程,旨在通过利用 CPU、SIMD、AMX 和 GPU 能力,实现超越 C 实现的性能。

0 人收藏 0 人点赞
#matrix-multiplication

在Ryzen AI 7 350 NPU上达到峰值TOPS性能

Lobsters Hottest ↗ · 2026-05-08 缓存

关于在AMD Ryzen AI 7 350 NPU上实现峰值TOPS性能的技术深度剖析,与Xilinx AIE-ML v2 AI引擎进行比较,并解释用于矩阵乘法工作负载的硬件架构。

0 人收藏 0 人点赞
← 返回首页

提交意见反馈