FairRSFM:面向遥感基础模型的生物群落感知基准与去偏差框架

Hugging Face Daily Papers 论文

摘要

本文提出 FairRSFM——一个生物群落感知的基准与去偏差框架,用于揭示遥感基础模型中存在的生态性能差异,并在四个下游数据集上对 Prithvi-EO-2.0、SatMAE 和 DOFA 进行评估,同时引入 BOLP、Dynamic Biome Reweighting 和 GroupDRO 等缓解基线进行对比。

遥感基础模型(RSFMs)通常使用聚合指标进行评估,这可能会掩盖不同生态区域之间系统性的性能差异。我们提出 FairRSFM,这是一个用于评估 RSFMs 生态群体鲁棒性的生物群落感知基准。FairRSFM 将来自 14 个陆地生物群落类别的地理定位样本映射为六个具有生态意义的宏分组,并在统一的冻结主干(frozen-backbone)评估协议下对模型进行评估。该基准涵盖四个下游数据集:m-EuroSAT、m-BigEarthNet、m-SA-Crop-Type 以及带有 Dynamic World 标签图的 MMEarth20K。通过在三个随机种子上使用 Prithvi-EO-2.0、SatMAE 和 DOFA 进行实验,我们发现聚合性能在不同架构和任务中始终掩盖了依赖于生物群落的性能差异。例如,Prithvi-EO-2.0 在 m-EuroSAT 上的整体 macro-F1 达到 90.98%,但最差群体的平均得分仅为 83.72%;而在 m-SA-Crop-Type 上,整体 mIoU 从 27.30% 下降至 Xeric 与 Mineralogical 分组中的 18.47%。我们进一步将 Biome-Orthogonal Linear Probing(BOLP)、Dynamic Biome Reweighting(DBR)和 GroupDRO 作为互补的缓解基线进行评估。它们的有效性因模型和任务而异;例如,BOLP 无需更新 RSFMs 主干,即可将 Prithvi-EO-2.0 在 m-BigEarthNet 上的最差群体 F1@opt 从 46.12% 提升至 50.27%。FairRSFM 为诊断和缓解遥感基础模型中的生态鲁棒性差距提供了一套可复用的协议。代码和数据集可在以下地址获取:https://github.com/aminurhossain/FairRSFM。
查看原文
查看缓存全文

缓存时间: 2026/10/06 16:56

论文页面 - FairRSFM:面向遥感基础模型的生物群落感知基准与去偏框架

来源:https://huggingface.co/papers/2610.05790

摘要

遥感基础模型(RSFM)通常采用聚合指标进行评估,这会掩盖其在不同生态区域之间的系统性性能差异。我们提出 FairRSFM,一个面向生物群落感知的基准,用于评估 RSFM 的生态群组稳健性。FairRSFM 将来自 14 个陆地生物群落类别的带地理参考样本映射为六个具有生态学意义的宏分组,并在统一的冻结主干(frozen-backbone)评估协议下对模型进行评估。该基准涵盖四个下游数据集:m-EuroSAT、m-BigEarthNet、m-SA-Crop-Type,以及带有 Dynamic World 标签图的 MMEarth20K。我们使用 Prithvi-EO-2.0、SatMAE 和 DOFA,并在三个随机种子下进行实验,结果表明:聚合性能在不同架构和任务中始终掩盖了与生物群落相关的性能差异。例如,Prithvi-EO-2.0 在 m-EuroSAT 上的总体宏 F1 达到 90.98%,但最差分组的平均得分仅为 83.72%;而在 m-SA-Crop-Type 上,总体 mIoU 从 27.30% 降至干旱与矿物(Xeric and Mineralogical)分组中的 18.47%。我们进一步评估了生物群落正交线性探测(Biome-Orthogonal Linear Probing,BOLP)、动态生物群落重加权(Dynamic Biome Reweighting,DBR)以及 GroupDRO 作为互补的缓解基线。它们的效果取决于模型与任务:例如,BOLP 在不更新 RSFM 主干的情况下,将 Prithvi-EO-2.0 在 m-BigEarthNet 上的最差分组 F1@opt 从 46.12% 提升至 50.27%。FairRSFM 为诊断和缓解遥感基础模型中的生态稳健性差距提供了一套可复用的协议。代码与数据集已发布于:https://github.com/aminurhossain/FairRSFM。

查看 arXiv 页面 (https://arxiv.org/abs/2610.05790) 查看 PDF (https://arxiv.org/pdf/2610.05790) GitHub0 (https://github.com/aminurhossain/FairRSFM) 添加到收藏 (https://huggingface.co/login?next=%2Fpapers%2F2610.05790)

在你的代理中获取这篇论文:

hf papers read 2610.05790

还没有最新的 CLI?curl -LsSf https://hf.co/cli/install.sh | bash

引用本文的模型0

暂无模型关联此论文

在模型的 README.md 中引用 arxiv.org/abs/2610.05790,即可从本页面链接到它。

引用本文的数据集0

暂无数据集关联此论文

在数据集的 README.md 中引用 arxiv.org/abs/2610.05790,即可从本页面链接到它。

引用本文的 Spaces0

暂无 Space 关联此论文

在 Space 的 README.md 中引用 arxiv.org/abs/2610.05790,即可从本页面链接到它。

包含本文的合集0

暂无合集包含此论文

将本文添加到合集 (https://huggingface.co/new-collection),即可从本页面链接到它。

相似文章

可扩展且可信的地球观测基础模型

arXiv cs.LG

本章回顾了地球观测基础模型的设计原则和当前格局,强调了领域特定适应、物理上合理的表示以及一致评估基准的必要性。包含关于有害藻华预测和自适应监测站点选择的案例研究。

BehaviorBench:面向行为科学任务的基础模型基准测试

arXiv cs.CL

本文介绍了BehaviorBench,一个用于评估基础模型在行为科学任务(包括行为预测、战略决策、主体特征推断和行为知识应用)上表现的综合基准。它还介绍了Be.FM-1.5,一个经过微调的模型,实现了出色的分布对齐,突显了通用模型与行为适应模型之间的差距。

FFASR排行榜发布:真实场景下的ASR评测

Hugging Face Blog

介绍FFASR排行榜,这是一个开放、社区驱动的基准测试,用于在真实远场声学条件下评估自动语音识别模型,突显了近场和远场场景之间的显著性能差距。