multi-party-dialogue

本文介绍了DraDDP，这是首个公开的英文多模态多方对话话语解析数据集，基于美国电视剧构建，包含495个片段、6,374个话语和9.1小时的视频。基准测试表明，多模态信息有助于改善对话结构和关系类型的解析。

When2Speak是一个合成数据集及流程，用于训练LLM在多方对话中决定何时发言。在该数据集上微调显著改善了话轮转换，强化学习将漏干预率从50%降至约20%。