human-agreement

标签

Cards List
#human-agreement

LLM 标注员能否达到人类的一致性水平?人类标注一致性基准评估与基于对比知识的多智能体优化

arXiv cs.CL ↗ · 2026-10-26

论文提出 ANT-A 多标注者基准(跨7个数据集、每样本5个人工标注)以及多智能体标注框架 ANT-OR,通过从正负反馈中提炼对比决策规则优化提示,在 Fleiss kappa 一致性上显著超越基线。

0 人收藏 0 人点赞
← 返回首页

提交意见反馈