GeoCR:从异构观测中学习通用云移除先验

Hugging Face Daily Papers 论文

摘要

GeoCR 提出了一种通用云移除模型,在单一流式 Transformer 中统一了仅 RGB 与多光谱云移除(可选 SAR 引导),并在十个数据集、883,331 张无云图像上训练,无需针对特定数据集微调即可在 FID/DISTS 指标上达到最先进水平。

云移除方法通常针对特定的数据集和输入配置进行专门设计,这限制了其在不同传感器、光谱波段和观测场景之间的复用。我们提出了 GeoCR,一个通用模型,在单一网络中统一了基于仅 RGB 的云移除和基于多光谱的云移除(支持单时相或多时相有云观测),并可选地引入 SAR 引导。为适应不同的光谱和传感领域,紧凑的输入和输出分支扩展了一个预训练的 RGB 自编码器,同时保持其编码器和解码器主干冻结。这一共享的潜空间接口使得单个流式 Transformer 能够联合建模干净的 RGB 与非 RGB 潜变量,并以独立的有云观测流和可选的 SAR token 作为条件。通过对十个数据集的训练集(共 883,331 张无云目标图像)进行联合预训练,GeoCR 学习到了跨这些异构配置的共享云移除先验。同一预训练检查点既支持无需针对特定数据集微调的直接推理,也支持通过低秩适配(LoRA)进行高效适配。我们在各数据集的测试集上,以全波段和仅 RGB 两种设置,将 GeoCR 与通用图像复原方法及云移除方法进行了对比评估。GeoCR 在全波段的 SEN12MS-CR 和 Sen2_MTC_New 以及仅 RGB 的 CUHK-CR2 上均取得了最优的 FID 和 DISTS,超越了现有模型,证明了可复用生成模型在多样化场景下的有效性。
查看原文
查看缓存全文

缓存时间: 2026/10/06 16:57

论文页面 - GeoCR:从异构观测中学习通用云去除先验

来源:https://huggingface.co/papers/2609.32510

摘要

云去除方法通常针对特定数据集和输入配置进行专门化设计,限制了其在不同传感器、光谱波段和观测设置之间的复用。我们提出 GeoCR,一个通用模型,在单一网络中统一了基于纯 RGB 的云去除和基于多光谱的云去除,支持单时相或多时相的含云观测,并可选地加入 SAR 引导。为适配不同的光谱和传感域,我们扩展了预训练的 RGB 自编码器,为其添加紧凑的输入和输出模块,同时保持其编码器和解码器主干冻结。这种共享的潜空间接口使单个 flow transformer 能够联合建模干净的 RGB 与非 RGB 潜变量,条件设置为独立的含云观测流以及可选的 SAR token。通过在十个数据集的训练集上进行联合预训练(共包含 883,331 张无云目标图像),GeoCR 学到了覆盖这些异构配置的共享云去除先验。相同的预训练检查点可直接用于推理而无需针对特定数据集进行微调,并可通过低秩适配(LoRA)实现高效适配。我们在全波段和仅 RGB 两种设置下,将 GeoCR 与通用图像修复和云去除方法在各数据集的测试集上进行了对比评估。在全波段的 SEN12MS-CR 和 Sen2_MTC_New 以及仅 RGB 的 CUHK-CR2 上,GeoCR 取得了最优的 FID 和 DISTS,超越了现有模型,证明了一个可复用的生成模型在多样化设置中的有效性。

查看 arXiv 页面 · 查看 PDF · 项目页面 · GitHub2 · 添加到收藏

在你的 agent 中获取这篇论文:

hf papers read 2609.32510

还没有最新版 CLI?curl -LsSf https://hf.co/cli/install.sh | bash

引用本文的模型 1

JeonghyeokDo/GeoCR Image-to-Image • 更新于约 7 小时前 • 1 (https://huggingface.co/JeonghyeokDo/GeoCR)

引用本文的数据集 0

没有数据集链接到本文

在数据集 README.md 中引用 arxiv.org/abs/2609.32510 即可将其链接到本页面。

引用本文的 Spaces 0

没有 Space 链接到本文

在 Space README.md 中引用 arxiv.org/abs/2609.32510 即可将其链接到本页面。

包含本文的收藏 0

没有收藏包含本文

将本文添加到收藏即可将其链接到本页面。

相似文章

GeoSET:面向 SAR 到 EO 图像翻译的通用基础模型

Hugging Face Daily Papers

GeoSET 提出了首个面向 SAR 到 EO 图像翻译的通用基础模型,在超过 300 万对 SAR–EO 数据上进行预训练,并可通过 LoRA(仅更新 0.60% 参数)适配下游数据集,在六个基准测试中取得了最先进的 FID 和 DISTS 指标。

空间支撑至关重要:几何感知图融合用于降雨场重建

arXiv cs.AI

本文提出了一种几何感知的多支撑异构图神经网络,用于精细尺度降雨场重建,融合了点雨量计、路径积分微波链路以及格点雷达/卫星数据的观测。该方法在新加坡数据上相比经典插值方法将RMSE降低了23.2%,并且当降雨场相对于其空间相关长度欠采样时,其增益最为显著。