标签
IndicTalk 是一个大规模多语言对话语料库,涵盖9种印度语言,包含代码混合对话,通过自动化流水线生成,结合新闻基础(news grounding)和角色条件(persona conditioning),旨在推动面向代表性不足语言的对话AI发展。
本文介绍了ToxGate,一种信任融合头,它将外部毒性信号在编码器表示上进行条件化,以改进多语言和代码混合的滥用检测,在多个数据集和编码器的高风险审核切片中展示了增益。