使用LLM陪审团构建食品元数据

Hacker News Top 2026/07/14 01:41 工具

llm metadata food ai-jury data-annotation

摘要

一种使用LLMs作为评审团来构建或验证食品元数据的方法，提高了数据质量和一致性。

暂无内容

查看原文

相似文章

arXiv cs.CL

本研究评估了 LLMs 在电子商务任务中作为数据质量标注器的表现，发现当需要背景知识时，它们优于基线方法，但对于具有强烈词汇信号的任务优势有限，同时展示了跨运行的高度一致性。

X AI KOLs Timeline

本文介绍了UPHELD，这是一个带有大量人工标注的基准，用于评估对话型LLM，以及Mixture-of-Judges框架，可将评估准确性提高30%。

arXiv cs.CL

本文提出一个风险控制框架，用于在事实评估中将LLM作为判断器。该框架校准不确定性阈值以维持用户指定的错误率，并在必要时路由到检索增强模式，从而实现具有可证明可靠性保证的更高覆盖率。

arXiv cs.CL

本教程论文概述了如何为低资源语言构建多语言多模态大语言模型，涵盖数据创建、模型对齐、微调和评估，重点提供实用方案和动手资源。

arXiv cs.LG

本文提出了一种两阶段抽样设计，其中LLM评估用于增强而非替代人工评分，并利用缺失数据文献中的双重稳健估计量，提供了确定人工和LLM评审样本量的指导。