educational-assessment

标签

Cards List
#educational-assessment

LLM评分器的成功与失败之处:来自两场计算机科学考试的证据

arXiv cs.CL ↗ · 2026-09-25 缓存

论文评估了LLM作为计算机科学考试评分器的表现,发现提示设计对评分准确性有显著影响,并表明LoRA微调能够缓解问题,使其性能匹配人类评分者。

0 人收藏 0 人点赞
#educational-assessment

测量部分分数差距:越南2025凸面评分方案的严格基准测试

arXiv cs.AI ↗ · 2026-08-20 缓存

本文介绍了THPT-Ladder,这是一个使用越南2025凸面评分方案评估AI模型的基准测试,揭示了部分分数差距如何导致与标准准确度指标相比的不准确评估。

0 人收藏 0 人点赞
#educational-assessment

基于模拟响应概率的多模态项目参数估计

arXiv cs.CL ↗ · 2026-08-12 缓存

本文介绍了使用基于Qwen3.5的微调多模态大语言模型来模拟学生响应概率,并估计多项选择题的项目难度参数,从而近似3PL和MCM曲线。

0 人收藏 0 人点赞
#educational-assessment

面向教育评估中可扩展自动作文评分的成本高效生成式AI摘要方法

arXiv cs.CL ↗ · 2026-07-20 缓存

本文提出了一种基于GPT-5模型变体的生成式AI辅助摘要框架,以解决自动作文评分中输入长度限制的问题,并在ASAP 2.0数据集上展示了模型能力、摘要保真度和计算成本之间的权衡。

0 人收藏 0 人点赞
#educational-assessment

LLM推理轨迹中的认知片段实现可解释的人类题目难度预测

arXiv cs.CL ↗ · 2026-06-29 缓存

介绍了Epi2Diff,一个将LLM推理轨迹映射为认知片段以预测人类题目难度的框架,其性能优于基线方法,并提供可解释的过程证据。

0 人收藏 0 人点赞
#educational-assessment

LLM 在真实、双重评分的 GCSE 基准测试上的表现

arXiv cs.CL ↗ · 2026-06-25 缓存

介绍了一个包含32,534份双重评分的GCSE学生答案的数据集,涵盖五个科目,发现表现最佳的LLM与考官的一致性程度高于考官之间的一致性,包括手写和主观任务。

0 人收藏 0 人点赞
#educational-assessment

LLMs难以衡量区分不同水平学生的能力:阅读理解评估中题目区分度研究

arXiv cs.CL ↗ · 2026-06-18 缓存

本文评估了42个大语言模型在测量阅读理解评估中题目区分度的能力,发现其与人类校准指标弱相关,并指出这是心理测量评估中的一个开放挑战。

0 人收藏 0 人点赞
← 返回首页

提交意见反馈