edge-deployment

标签

Cards List
#edge-deployment

@rohanpaul_ai: 就在几天前,Thinking Machines Lab (TML) 展示了一种让 AI 交互从轮次式变为连续式的新方法…

X AI KOLs Following · 2026-05-17 缓存

Thinking Machines Lab 和 OpenBMB 发布了 MiniCPM-o 4.5,这是一个 9B 参数的全双工全模态模型,采用 Omni-Flow 框架,支持连续、时间对齐的实时视频和语音交互,超越了之前的模型,并以开源形式提供。

0 人收藏 0 人点赞
#edge-deployment

@FeitengLi: OpenBMB 开源 MiniCPM-V 4.6 了,1.3B 参数(SigLIP2-400M + Qwen3.5-0.8B),262k 上下文,视觉编码 FLOPs 比上一代少 50%+。 同任务 token 成本比 Qwen3.5-0…

X AI KOLs Timeline · 2026-05-16 缓存

OpenBMB releases MiniCPM-V 4.6, a 1.3B-parameter multimodal LLM with 262k context and significantly reduced visual encoding FLOPs, achieving strong benchmark performance and broad inference framework support.

0 人收藏 0 人点赞
#edge-deployment

Ternary Bonsai:1.58 比特下的顶级智能

Hacker News Top · 2026-04-18

一种使用三值权重(-1、0、1)的高效 AI 模型架构,仅需 1.58 比特/参数即可实现具有竞争力的性能,可部署在极度受限的设备上。

0 人收藏 0 人点赞
#edge-deployment

将机器人AI引入嵌入式平台:数据集录制、VLA微调和设备端优化

Hugging Face Blog · 2026-03-05 缓存

NXP和Hugging Face展示了在嵌入式机器人平台上部署视觉-语言-动作(VLA)模型的技术,涵盖数据集录制最佳实践、VLA微调以及针对i.MX 95处理器的设备端优化,包括量化和异步推理调度。

0 人收藏 0 人点赞
#edge-deployment

Tequila:一种面向大语言模型的无陷阱三元量化方法

Papers with Code Trending · 2025-09-28 缓存

本文介绍了Tequila,这是一种针对大语言模型的无陷阱量化方法,通过将陷入死区的权重重新利用为动态偏置,提高了三元量化的准确性和推理速度。

0 人收藏 0 人点赞
← Previous
← 返回首页

提交意见反馈