audio-visual-generation

JoyAI-Echo是一个开源的GitHub仓库，提供长期音视频生成和全模态世界模型，用于创建持久故事和交互式世界。

本文介绍了JoyAI-Echo-1.5，这是一个统一的音视频生成系统，适用于长视频和交互式世界，使用跨镜头记忆和几何感知控制来保持连贯性和持久性。

EchoWM 介绍了一种开放的全模态世界模型，能够生成同步的视频、声音、音乐和语音，并支持连续的6自由度导航，用于可进入的生成媒体。

LongAV-Compass是一个综合基准，用于评估分钟级音视频生成在文本、图像和视频条件模态下的表现，衡量长时间序列上的质量、一致性和对齐程度。