观潮 · 模式预报与气象 AI 观察
RemoTAP-Hybrid 给全物理反演配神经网络初值:AOD 的 RMSE 降到 0.051,有效反演多 4%,计算时间少 43%
> 气溶胶反演长期卡在一个取舍里:查表快但不准,全物理反演准但慢。这篇把多个协作神经网络(MCNN)塞进 RemoTAP 只做一件事——给全物理反演出一个准的初值,剩下的迭代仍由辐射传输正演收敛;同时把气溶胶描述从三模态扩成含细模态非球形的四模态。用 SPEXone 一年(2024-03-01 至 2025-02-28)的观测做全球陆地+海洋反演,AERONET 验证下 AOD 的 RMSE 为陆地 0.051、海洋 0.037;相对现役 RemoTAP,陆海有效反演数分别多 4% 和 3%,计算时间分别少 43% 和 32%。作者也点明 MCNN 的天花板:它对小的吸收性光学厚度(AAOD)会高估,这一步只能靠全物理反演补回来。
缺的是哪一块
多角度偏振仪(MAP)反演气溶胶现有三类做法,各有硬伤:
路线 · 快/慢 · 硬伤
查表(LUT) · 快 · 从离散的预模拟表里挑最拟合的气溶胶模式,精度不如全物理反演
机器学习(ML) · 快 · 本质是对全物理反演的快速近似,性能取决于训练集的复杂度、精度与参数分布
全物理反演(FPI) · 慢 · 反演过程中要显式计算辐射传输
全球尺度上同时做陆地和海洋气溶胶反演的 FPI 算法,此前只有 GRASP 和 RemoTAP 两个。缺的不是又一个新的端到端神经网络,而是把两条路线的长处拼起来——神经网络出初值,全物理反演保证最终精度。
第二个缺口在气溶胶本身的参数化:原来的模态描述没有细模态非球形,遇到以细模态非球形气溶胶为主、或与之混合的场景就处理不了。
方法怎么搭的
输入数据。SPEXone L1C v3.0:陆地和海洋取 407—749 nm 的 34 个波段辐亮度;线偏振度(DoLP)在陆地取 413—749 nm 的 33 个波段、海洋取 413—707 nm 的 32 个波段。海洋 749 nm 的 DoLP 被剔除,原因是海洋在长波的辐亮度本来就小,对探测器零点偏移、杂散光更敏感。该版本数据存在 +2.5% 的辐射偏差,本文做了 2.5% 辐射校正。SPEXone 另有 400 个波段的高光谱辐亮度,本次没用——现有波段选择对气溶胶反演精度已足够,400 波段太耗时、不适合业务化。时段取 2024 年 3 月 1 日至 2025 年 2 月 28 日一整年。反演里的测量不确定度设为仪器噪声与固定噪声底的平方和:辐亮度 2%(相对)、DoLP 0.003(绝对)。为说明方法对不同 MAP 仪器通用,另用 POLDER-3 的 2008 年辐亮度与 DoLP 做了一组实验。
验证基准。AERONET v3.0,时段与卫星一致。AOD 与 AE 用 level 1.5 多波段产品(中可见光 AOD 不确定度 0.01、紫外 0.02);SSA、AAOD、细模态有效半径(reff_fine)与球形比例(SF)用 level 1.5 的 Almucantar 反演产品(SSA 0.03、AAOD 0.004—0.006、reff_fine 0.01;SF 没有文献给出不确定度);细/粗模态 AOD 用 SDA 产品(细模态 AOD 比例不确定度 0.1)。时空匹配:陆地取站点 20 km 内、海洋 50 km 内的平均,有效反演少于 2 个(陆地)/3 个(海洋)的过境剔除;时间窗 AOD、AE、FAOD、CAOD 取 ±2 小时,SSA、AAOD、reff_fine 取 ±3 小时。另外用 AERONET 的时间变化代理空间变化,把变化过大的配对剔掉(AOD/FAOD/CAOD 变化 >0.05 或 30%、AE >0.2、SSA >0.03、reff_fine >0.02)。
前向模型。SRON 的线性化辐射传输模型 LINTRAN v2.0,配 Dubovik 的 Mie 与改进 T 矩阵几何光学数据库(球与椭球混合)把微物理参数换算成光学参数。陆地表面用 Ross-Li 模型算方向性总反射、Maignan 模型算偏振反射;海洋用粗糙海面的 Fresnel 反射矩阵,海体内的吸收与散射另由一个用海洋水体辐射传输算例训练的神经网络计算。
两处改动。一是气溶胶描述扩成参数化四模态:细非球形、细球形、粗非球形、粗球形。二是用多个协作神经网络(MCNN)产出全部气溶胶与地表参数的初值,再交给全物理反演迭代。
合成实验。用前向模型造 50000 个像元的合成数据集,状态向量的分布与范围按表 III,覆盖多种气溶胶条件与不同模态主导的情形,地表也覆盖 BRDF/BPDF 参数的完整范围。收敛判据取陆地 χ²<5.0、海洋 <10.0。由于气溶胶负载小时 AE 和 SSA 反不准,这两个量用 AOD>0.05 过滤,另做 AOD>0.2 的更严格版本作为对照。
结果数字
要求阈值怎么定的(表 V)
量 · 合成数据 · 实测(AERONET 验证)
AOD · max(0.03, 10%)(GCOS) · max(0.04, 10%)
AE · 0.2 · 0.2
SSA · 0.03(GCOS) · 0.03
AAOD · max(0.01, 10%)(无既有要求,本文自定) · max(0.01, 10%)
FAOD / CAOD · max(0.03, 10%)(同 AOD) · max(0.04, 10%)
reff_fine · 10% · 10%
MCNN 单独作为初值(合成数据,图 4)
量 · 陆地 RMSE · 海洋 RMSE · 陆地落在要求内占比 · 海洋落在要求内占比
AOD · 0.036 · 0.024 · 83.1% · 95.2%
AE · 0.260 · 0.167 · 69.6% · 83.1%
SSA · 0.058 · 0.047 · 51.5% · 57.6%
AAOD · 0.015 · 0.011 · 76.5% · 82.0%
MCNN 整体够准,但对小的 AAOD 明显高估,这与大的 SSA 被低估相联系;即使只挑大 AOD 的反演来看,SSA 高值被低估的倾向依然存在。
RemoTAP-Hybrid 相对 MCNN 的改善(合成数据,图 5)
量 · MCNN · RemoTAP-Hybrid
AE 陆地 RMSE · 0.260 · 0.237
AOD 海洋 RMSE · 0.024 · 0.020
AAOD 海洋 RMSE · 0.011 · 0.008
SSA 陆地 RMSE · 0.058 · 0.056
SSA 海洋 RMSE · 0.047 · 0.041
SSA 陆地 RMSE(AOD>0.2) · 0.045 · 0.032
SSA 海洋 RMSE(AOD>0.2) · 0.036 · 0.023
AE 海洋 RMSE(AOD>0.05) · 0.167 · 0.181
AE 海洋 RMSE(AOD>0.2) · 0.121 · 0.114
关键的不是 RMSE 那点改善,而是偏差:AAOD 与 SSA 的偏差被显著改善且趋于无偏,MCNN 在小 AAOD 上的有偏问题由全物理反演这一步补了回来;MCNN 里小 AOD 的可见偏差也随之改善。与用多模态 LUT 出初值的现役 RemoTAP 相比,合成数据上 RemoTAP-Hybrid 在各量上均更优。
实测 AERONET 验证:相对现役 RemoTAP
指标 · 现役 RemoTAP · RemoTAP-Hybrid
陆地 AOD 落在要求内占比 · 77.3% · 78.3%
陆地小 AOD(<0.2)落在要求内占比 · 83.5% · 85.1%
陆地 AE 的 RMSE · 0.204 · 0.186
陆地 AOD 匹配数 · 1054 · 1093(+4%)
海洋 AOD 的 RMSE · 0.040 · 0.037
海洋 AOD 的偏差 · 0.011 · 0.005
海洋 AOD 落在要求内占比 · 76.0% · 80.8%
海洋 AE 的 RMSE · 0.242 · 0.207
海洋 AOD 匹配数 · 608 · 624(+3%)
陆地 FAOD 的 RMSE · 0.060 · 0.047
海洋 FAOD 的 RMSE · 0.040 · 0.031
计算时间:受益于 MCNN 又快又准的初值,陆地减少 43%、海洋减少 32%。小 AAOD(<0.01)的偏差改善明显,实测上近乎无偏的表现印证了合成实验的结论。
RemoTAP-Hybrid 的绝对水平(陆地 / 海洋):AOD RMSE 0.051 / 0.037,落在 GCOS 要求内的比例 78.3% / 80.8%;AE 0.186 / 0.207;SSA 0.038 / 0.044;AAOD 0.023 / 0.014;FAOD 0.047 / 0.031;CAOD 0.043 / 0.027;reff_fine 0.021 / 0.026。
全球季节分布。撒哈拉 AOD>0.5 的高值(低 AE、中等 SSA 与 AAOD)主要出现在夏季和春季,对应沙尘季;亚马逊的生物质燃烧集中在夏秋干季,表现为高 AOD、高 AE、高 AAOD 的小粒子吸收性烟尘;赤道非洲的烟羽在南半球夏季、北半球冬季达到峰值,并向大西洋输送;非洲的烟尘比亚马逊更吸收(SSA 更低),原因是非洲主要燃烧稀树草原和草地,产生的黑碳更多。印度与东南亚等强人为污染区及其外流区四季都是高 AE、中等 SSA 与 AAOD。开阔洋面的海盐则是低 AE、高 SSA、低 AAOD 的非吸收性大粒子。微物理上,撒哈拉、阿拉伯半岛、塔克拉玛干表现为高有效半径、低细模态体积分数、低球形比例、实部折射率 1.53、虚部折射率 0.001 的尘埃特征。
原文图

MCNN(多个协作神经网络)的流程:由多个网络分工产出气溶胶与地表参数的初值。

RemoTAP-Hybrid 的完整流程:MCNN 出初值之后,再进入全物理反演迭代收敛。

MCNN 在合成观测上的反演散点:AOD 与 AE 精度高,SSA 与 AAOD 的偏差集中在小吸收一端。

同一批合成观测下 RemoTAP-Hybrid 的反演散点:小 AAOD 与小 AOD 的偏差被全物理反演修正。

现役 RemoTAP 算法(多模态 LUT 出初值)的对照验证散点,用作 RemoTAP-Hybrid 的基线。
作者承认的限制
限制 · 原文口径
MCNN 的内在局限 · 对小的 AAOD 存在高估,与大的 SSA 被低估相关;即使只选大 AOD 的反演,SSA 高值被低估的倾向仍在
合成对比不完全独立 · 为定位 MCNN 的反演极限,MCNN 训练集与合成测量的状态向量分布都按同一个表 III 设定,以避免干扰;更独立的对比在实测部分给出
海洋 AE 反而变差 · 在 AOD>0.05 的过滤下,RemoTAP-Hybrid 的海洋 AE 的 RMSE(0.181)大于 MCNN(0.167),只在 AOD>0.2 时才优于 MCNN
全球图的幅宽限制 · SPEXone 幅宽约 100 km,只能辨认大尺度型态
参照数据本身的不确定度 · AERONET 反演产品的 SSA 0.03、AAOD 0.004—0.006、reff_fine 0.01、细模态 AOD 比例 0.1;球形比例没有文献给出不确定度
输入数据的偏差 · 所用 SPEXone v3.0 存在 +2.5% 的正辐射偏差,本文做了校正
方法替代留待后续 · 非神经网络的机器学习方法(随机森林、极端梯度提升树)可作为 MCNN 的替代方案,尚未在本研究中检验
一句话判断
把神经网络放在"出初值"而不是"出结果"的位置,既拿回了全物理反演的精度与无偏性,又换来了 43% 的提速和更多有效像元——代价是 AE 在海洋上、以及小吸收情形下的上限仍由物理反演决定,不是神经网络能独立解决的。