unified-model

标签

Cards List
#unified-model

UniSpark:面向多模态理解与生成的混合注意力探索

Hugging Face Daily Papers ↗ · 2026-11-12 缓存

UniSpark-9B 是一个统一多模态模型,在 Mixture-of-Transformer-Experts 主干中结合了全注意力与 Gated DeltaNet 线性注意力,联合支持视觉问答、文本到图像生成、指令引导编辑以及图文交错预测,在 MME-S 上取得 2470.3 分,在 GenEval 上取得 0.83 分。

0 人收藏 0 人点赞
#unified-model

UniAVC:基于渐进式训练与非对称调度的统一音视频创作

Papers with Code Trending ↗ · 2026-10-17 缓存

UniAVC 通过渐进式训练与模态解耦的非对称噪声调度,实现单一模型的文本驱动音视频联合生成、跨模态生成与指令引导编辑,无需任务专用适配器。

0 人收藏 0 人点赞
#unified-model

Intern Lumina U2:面向全视觉理解与图像生成的多码本扩散大语言模型

Hugging Face Daily Papers ↗ · 2026-10-14 缓存

Intern Lumina U2 是首个采用多码本离散视觉词元的扩散语言模型,能够在一个统一骨干网络中实现图像、视频、3D 生成与文本的统一建模,达到领先性能,并通过稳定性感知采样策略将图像生成速度提升 4.45 倍。

0 人收藏 0 人点赞
#unified-model

@HuggingPapers:UniEvo-VL 一个自进化框架,单个多模态模型同时充当教师和学生,通过自身的…

X AI KOLs Following ↗ · 2026-10-01 缓存

UniEvo-VL 是一个自进化框架,让单个多模态模型同时充当教师和学生,通过自身的建设性反馈在无外部监督的情况下提升图像生成能力。

0 人收藏 0 人点赞
#unified-model

Multimodal Flow:语言与视觉在嵌入空间中的统一流建模

Hugging Face Daily Papers ↗ · 2026-09-30 缓存

Multimodal Flow 提出了一种用于语言和视觉的完全连续生成架构,采用基于连续嵌入超块(hyperchunk)的共享分块因果流骨干网络。MF-1 在 0.6B 至 1.6B 规模上进行预训练,仅使用 150B tokens,便在 GenEval、DPG-Bench、VQAv2、MMBench 和 POPE 上取得了具有竞争力的表现。

0 人收藏 0 人点赞
#unified-model

SenseNova-U1.5: 迈向原生统一视觉智能

Hugging Face Daily Papers ↗ · 2026-09-10 缓存

SenseNova-U1.5是一个8B原生统一多模态模型,它通过补丁重建、精选数据和专家优化,在无需编码器或VAE的情况下执行视觉理解、推理和生成,实现高保真度和指令遵循。

0 人收藏 0 人点赞
#unified-model

UniGD:一种用于工业检索的统一生成-判别框架

arXiv cs.AI ↗ · 2026-08-05 缓存

快手研究者提出UniGD,一个用于工业检索的统一生成-判别框架,将检索与相关性评分整合到单一模型中,并采用CAGE与CAM等技术来提升效果并降低延迟。在线A/B测试显示,广告收入提升5.78%,推理延迟降低33.1%。

0 人收藏 0 人点赞
#unified-model

Hunyuan3D-Buffalo 1.0:面向可扩展3D生成、理解与编辑的统一多模态模型

Hugging Face Daily Papers ↗ · 2026-08-03 缓存

Hunyuan3D-Buffalo 1.0 是一个用于3D生成、理解与编辑的统一多模态模型,基于87M规模的3D多模态语料库进行训练。它结合了Hunyuan3D-VLM和Hunyuan3D-DiT,在文本到3D生成和3D编辑基准上取得了最先进的性能。

0 人收藏 0 人点赞
#unified-model

SwanTale:面向指令和零样本任务的统一多说话人语音与音频生成

Hugging Face Daily Papers ↗ · 2026-08-03 缓存

本文介绍了SwanTale,一个支持零样本和指令任务的统一多说话人语音与音频生成模型,以及用于数据标注的SwanData-Caption和用于高质量多音频模态生成的SwanVAE。

0 人收藏 0 人点赞
#unified-model

S1-Omni:用于科学理解、预测和生成的统一多模态推理模型

arXiv cs.AI ↗ · 2026-07-20 缓存

S1-Omni是一个用于科学任务(包括理解、预测和生成)的统一多模态推理模型。它基于包含200个科学任务的语料库进行训练,在大多数基准测试上优于GPT-5.5和Gemini-3.1-Pro。

0 人收藏 0 人点赞
#unified-model

UniVR:在视觉空间中思考以实现统一视觉推理

Hugging Face Daily Papers ↗ · 2026-07-14 缓存

UniVR提出了VR-GRPO,一种用于统一视觉推理的强化学习范式,能够从纯视觉演示中学习复杂推理和物理动力学,在VR-X基准测试上实现了高达25%的性能提升。

0 人收藏 0 人点赞
#unified-model

将交错多模态推理桥接为统一决策过程

arXiv cs.AI ↗ · 2026-07-07 缓存

BRAID是一个框架,它将交错文本-图像-文本推理形式化为统一的马尔可夫决策过程,通过强化学习实现文本和视觉生成的联合优化,并由VLM裁判提供密集的轮次级反馈。

0 人收藏 0 人点赞
#unified-model

视觉作为统一多模态生成

Hugging Face Daily Papers ↗ · 2026-07-07 缓存

本文介绍 SenseNova-Vision,一个统一的多模态模型,将计算机视觉任务表述为生成问题,在多种视觉任务上实现了与专用系统相当的性能。它引入了一个大规模指令-响应语料库,并公开发布模型和数据集。

0 人收藏 0 人点赞
#unified-model

统一音频智能,且不牺牲文本智能

Hugging Face Daily Papers ↗ · 2026-07-06 缓存

这篇论文介绍了Audex,这是NVIDIA推出的统一音频-文本大语言模型,在多种音频和语音任务上实现了最先进的性能,同时保持了强大的文本推理能力,且没有出现退化。

0 人收藏 0 人点赞
#unified-model

@AdinaYakup: Boogu-Image-0.1 全新统一图像生成与编辑模型家族 - 10B Base/Edit/Turbo - Apache 2.0 - 快速 Turbo 推理…

X AI KOLs Following ↗ · 2026-07-03 缓存

Boogu-Image-0.1 是一个全新的统一图像生成与编辑模型家族,拥有10B参数,采用 Apache 2.0 许可证。它支持快速 Turbo 推理(仅需4步),在10倍更少的数据上训练,并支持中文和英文。

0 人收藏 0 人点赞
#unified-model

照亮统一多模态模型,实现自由形式交错图文生成

Hugging Face Daily Papers ↗ · 2026-06-29 缓存

ILLUME-X 是一个统一的自由形式交错图文生成多模态模型,具有改进的数据效率、稳定的训练以及名为 ILScore 的全面评估指标。它在风格迁移、图像分解和故事讲述等任务上优于之前的模型。

0 人收藏 0 人点赞
#unified-model

Boogu Base、Turbo、Edit —— 开源统一图像生成与编辑模型系列

Reddit r/LocalLLaMA ↗ · 2026-06-23

Boogu 发布了一系列开源统一图像生成与编辑模型,包括 Base、Turbo 和 Edit 变体。

0 人收藏 0 人点赞
#unified-model

UniDDT: 通过解耦扩散变换器统一多模态理解与生成

Hugging Face Daily Papers ↗ · 2026-06-15 缓存

UniDDT提出了一种解耦扩散变换器框架,通过利用Noisy ViT编码器和LLM进行语义编码,统一了多模态理解与生成,在两个任务上均取得了强劲性能。

0 人收藏 0 人点赞
#unified-model

音频交互模型

Hugging Face Daily Papers ↗ · 2026-06-03 缓存

本文介绍了Audio-Interaction,一种统一的流式音频模型,通过端到端框架将离线任务执行与实时音频指令跟随相结合。它提出了用于感知-决策-响应循环的SoundFlow,并在多个基准测试中评估了其具有竞争力的性能。

0 人收藏 0 人点赞
#unified-model

无瓶颈统一多模态模型的 Representation Forcing

Hugging Face Daily Papers ↗ · 2026-05-29 缓存

介绍了 Representation Forcing(RF),一种技术,使得统一多模态模型能够在没有外部VAE潜在空间的情况下端到端地执行感知和生成,在图像生成方面达到最先进的基于VAE的模型水平,同时提升理解能力。

0 人收藏 0 人点赞
Next →
← 返回首页

提交意见反馈