consistency-evaluation

本文提出了一个框架来测试LLM估计是否在不同子群体间遵循统计自一致性（全概率定理），发现了广泛的违反以及“宏观谬误”，即细粒度估计与人类数据的一致性更好。