精读笔记

Problem Setting

RTE-FM-Dehazer（arXiv preprint / 2026）实际解决的不是传统意义上“从一张雾图恢复清晰图”的定义问题，而是真实世界去雾中的建模错配问题：训练时的雾形成假设太简单，测试时的雾/烟/散射过程太复杂。ASM 把雾压缩成 transmission + global air-light 的低维模型，在均匀、单散射、光照简单的场景下足够，但对空间非均匀雾、局部烟团、多次散射、反射光和颜色污染明显不够。深度网络虽然绕过了显式 transmission estimation，但大多仍被合成数据的 ASM bias 绑定；生成式方法能补视觉真实感，却容易引入颜色漂移、结构 hallucination 和 patch artifact。关键矛盾是：去雾需要强先验来约束 ill-posed inverse problem，但过强且错误的物理先验会损害真实泛化；纯生成先验又缺少颜色与光传输一致性。

Motivation

作者的核心观察是，真实雾更接近 participating media 中的 radiative transfer，而不是 ASM 的单次散射线性混合。因此，与其继续在 ASM 下做更大的网络或更精细的 transmission map，不如换一个更宽松的物理结构：RTE 至少形式上同时容纳 scattering、absorption 和非均匀介质。另一个动机是生成模型路线已经说明“直接回归 clean image”不够灵活，但 diffusion/VQGAN 的随机或离散先验会破坏原图颜色分布。缺的是一种可连续控制、确定性、又能在每个中间状态注入物理约束的生成式去雾框架。flow matching 正好提供连续 ODE 轨迹，RTE 的 diffusion-absorption 形式又能自然转成 velocity regularizer；这就是论文的建模入口。

Core Idea

论文真正的核心不是“用 RTE 做去雾”，而是把去雾建模为从 hazy latent 到 clean latent 的连续运输，并把 RTE 简化后的扩散-吸收算子嵌入速度场学习。这样，模型不是一次性预测 clean image，也不是从噪声随机采样，而是在 latent manifold 上学习一条确定性路径；每一步的 tangent direction 同时受数据配对方向和 RTE-style local dynamics 约束。

这个改变引入了一个新的 inductive bias：去雾过程应该既有局部能量扩散/平滑，又有雾密度衰减/吸收，而不应只是任意 pixel translation。和 prior work 的本质差异在于，物理先验不再只用于合成数据、估计 transmission 或做输出端 loss，而是直接作用在 generative trajectory 的 velocity field 上。理论上这可能更 generalizable，因为它约束的是变换路径的局部几何，而不是某个固定 haze model 的显式参数。

Method

方法层面可以压缩为三个机制。第一，latent flow matching 解决的是传统 supervised regression 过于刚性的问题：它把 hazy-to-clean 映射拆成连续速度场，使模型能处理空间非均匀变化，而不是在一次 forward 中完成全部反演。第二，RTE regularizer 解决的是纯 flow matching 缺少光传输约束的问题：用 Laplacian diffusion 表示局部能量/对比度重新分布，用 absorption 表示雾导致的衰减反向补偿，最终让 velocity field 接近一个 diffusion-absorption direction。第三，P-HAZE 数据管线解决的是真实配对数据稀缺问题：用 VLM 生成复杂雾，再通过 dense matching/homography 对齐，给 flow matching 提供大规模 pair supervision。

需要注意，文中 RTE 是 reduced / inspired form，不是完整 RTE 求解。D、μ_a 的估计、五点 Laplacian、VAE latent 上的算子都更像 differentiable structural regularization。SD VAE 和 U-Net 主要提供可训练的 latent representation 与高效计算；它们不是论文最关键的新机制。

Key Insight / Why It Works

最可能真正有效的部分有两个：一是大规模 VLM 生成数据带来的分布覆盖，二是 velocity-level regularization 对颜色漂移和局部 artifact 的抑制。P-HAZE 让模型看到了比 ASM 合成更复杂的雾形态，包括局部烟团、非均匀密度、复杂光照，这本身就可能解释很大一部分跨域提升。RTE-FM 的 regularizer 则在训练时压制 velocity field 的任意性，使模型不容易走向生成式 hallucination，尤其对颜色保持、残雾平滑、局部过增强有帮助。

我会把 RTE 部分理解为 better inductive bias，而不是严格 physics. 在 latent space 上做 Laplacian 和 absorption 并不等价于图像域 radiative transfer；“pretrained decoder acts as local isometry”这个前提文中未充分说明，也很难验证。因此 RTE 的价值更像：给 flow matching 加了一个符合去雾直觉的局部 PDE prior。它可能比 DCP 这类 handcrafted prior 更兼容神经运输，因为它约束速度而不是直接硬约束输出统计。

增益来源不清是这篇最需要警惕的点。Vanilla FM 已经在 P-HAZE 上表现不差，RTE-FM 在某些真实集上大幅提升，但缺少足够强的 data ablation：例如同样 P-HAZE 下更强 rectified flow、更大 U-Net、更长 Euler steps、不同 VAE latent、更丰富 prompt 的对比。论文声称 regularizer 主导泛化，但目前证据只能说明“RTE regularizer + P-HAZE + FM”组合有效，不能充分证明 RTE 是主因。部分结果可能主要来自 scaling / data，而不是物理建模本身。

Relation To Prior Work

这篇位于三条路线的交叉点：物理先验去雾、生成式图像恢复、合成数据扩展。相对于 DCP/ASM 系列，它放弃了显式 transmission 与 global air-light，改用更宽泛的 diffusion-absorption 结构；这避免了 ASM 的强假设，但也牺牲了可解释参数。相对于 CNN/Transformer supervised dehazing，它不是单步 regression，而是连续 flow transport；本质上更接近 rectified flow / conditional flow matching 的图像复原化。相对于 diffusion/VQGAN prior，它的差异在于确定性轨迹和 velocity-level physics constraint，目标是减少随机采样和 codebook retrieval 带来的颜色/结构漂移。

看似新的地方里，VAE latent + U-Net + Euler ODE + flow matching 都是已有生成模型范式的重组；VLM 合成训练对也属于当前低层视觉数据扩展趋势。相对实质的创新是把 RTE 简化算子作为 flow matching velocity regularizer，而不是作为 forward synthesis model 或 post-hoc physical loss。这个新增信息在于：物理先验可以约束“路径”，而不仅是约束“端点”。

Dataset / Evaluation

评估覆盖了 indoor fog、outdoor non-uniform haze、smoke、synthetic haze 等多个场景，基本能支撑“比 ASM/纯合成训练更跨域”的方向性 claim。尤其 NH-HAZE、SMOKE 这类非均匀或烟雾场景更贴近论文动机，比只看 RESIDE 更有说服力。论文也比较了传统 prior、CNN/Transformer、VQGAN/生成先验等路线，baseline 类型相对完整。

但 evaluation 仍有明显 limitation。第一，P-HAZE 是 VLM 生成数据，测试集是否与 VLM 训练分布、prompt bias、公共图像分布存在隐式 overlap 未讨论；这会影响“真实泛化”的可信度。第二，VLM 生成 haze 再 homography 对齐，本质上仍不是真实 paired capture，像素级指标可能受对齐误差和合成风格影响。第三，缺少足够细的归因实验来分离 data scaling、prompt diversity、alignment quality、RTE regularizer、Euler step 数量和 backbone capacity。当前实验更能证明系统有效，而不是证明物理 regularizer 独立有效。

Limitation

方法成立依赖几个强前提。首先，latent space 中的 Laplacian diffusion 和 absorption 必须和图像域雾散射有足够结构对应；这个前提文中未充分说明，也缺少可视化或理论验证。其次，VLM 生成雾必须覆盖真实雾分布；如果真实 deployment 中出现夜间强光、多层玻璃反射、雨雾混合、动态烟、传感器噪声，P-HAZE 的覆盖可能不够。第三，homography 对齐假设生成图与原图主要存在平面/相机内参式变形，但 VLM 可能改动局部物体、边界和纹理，这会把错误监督注入模型。

最核心的限制是方法可能把问题从“设计真实 haze prior”转移成“生成足够真实的 paired data”。如果 P-HAZE 的质量和规模下降，RTE-FM 是否仍显著优于 vanilla FM 不清楚。所谓 RTE 物理一致性也可能主要表现为一个 edge-aware smoothing/attenuation regularizer，而非真正建模 multiple scattering。计算上，多步 Euler 提高质量意味着 test-time compute 增加；若部署到实时场景，需要 distillation 或少步求解。论文自己提到 pixel-space 可能更好，也侧面说明 latent approximation 在细节和极端厚雾下存在上限。

Takeaway

• 最值得记住的不是“RTE 比 ASM 更物理”，而是“把物理先验放到生成轨迹的速度场里”这一建模方式。
• 对低层视觉复原任务，这比端点 loss 或合成数据 prior 更可迁移：去雨、去烟、低照增强、散射校正都可以尝试把 PDE-like dynamics 写成 flow/ODE regularizer。
• 第二个 takeaway 是，真实世界复原的提升越来越可能来自 data engine + weak physics bias 的组合，而不是单独更复杂的网络结构。
• VLM 生成数据虽然不是真实物理采集，但能提供比传统 simulator 更宽的视觉扰动覆盖；未来关键会是如何验证和校准这种 synthetic realism。

一句话总结

RTE-FM-Dehazer 是一篇把真实去雾从 ASM-supervised regression 推向“VLM 数据扩展 + deterministic flow matching + PDE-style velocity prior”的工作，真正贡献在于路径级物理归纳偏置，但最终增益很可能是数据覆盖与结构化 regularization 共同作用的结果。