workflow-state

标签

Cards List
#workflow-state

审计医疗大语言模型智能体的升级处理可靠性:工作流状态故障的扰动受控基准测试

arXiv cs.AI ↗ · 5天前 缓存

该论文提出了一个受扰动控制的医疗LLM智能体基准测试,包含400个多轮episode,评测在缺失、过时、冲突和迟到信息下的升级/拒答决策能力。结果显示模型在干净环境下准确率达0.97,但在不确定性扰动下漏掉32-97%的必要升级,且基于词汇规则的控制器在未见过的同义改写下召回率降至0。

0 人收藏 0 人点赞
← 返回首页

提交意见反馈