experiment-reproduction

标签

Cards List
#experiment-reproduction

LLM能否生成可靠的评分标准?实验复现的元评估

arXiv cs.CL · 3天前 缓存

本文首次系统性地对LLM生成的用于复现研究论文实验的评分标准进行元评估。它将评分标准重新表述为检查表格式,并从内在(语义相似性)和外在(分数对齐)两方面评估生成设置,发现增强设置改善了下游评估对齐,但生成的评分标准往往过于细粒度,且偏向高分。

0 人收藏 0 人点赞
← 返回首页

提交意见反馈