精读笔记

Problem Setting

论文标题：Leveraging Phase Information to Boost Unrolled Network Learning for Image Deblurring（arXiv preprint / 2026）。这篇论文处理的不是一般意义上的“去模糊网络设计”，而是 blind deblurring 中如何显式利用 Fourier phase 来提升结构恢复的问题。真正困难点在于，模糊退化既改变频谱能量分布，也破坏相位中的几何对齐信息；噪声和 kernel uncertainty 会让理想卷积模型下的 amplitude multiplication / phase addition 失效。以前的深度 deblurring 多数依赖大数据学习空间域逆映射，unrolled 方法则多在图像域或 kernel-image 变量上做可学习迭代，频域结构通常只是辅助 feature。关键矛盾是：越依赖黑箱网络，越需要数据覆盖；越依赖经典反卷积，越难处理真实复杂退化。本文试图用 phase-amplitude decomposition 在二者之间建立一个更强的模型约束。

Motivation

已有路线缺的是一个把“相位对结构恢复重要”转化为可训练优化机制的框架。频域先验本身并不新，phase importance 也不是新观察；真正缺口是：在 noisy / blind setting 下，如何估计观测图像的 amplitude 与 phase，并把这种估计误差显式纳入恢复过程。作者的核心观察是，真实模糊和噪声下，Z = H · U 的 polar decomposition 并不能简单等价于 A_Z = A_H A_U 和 θ_Z = θ_H + θ_U；直接按 naive Fourier relation 做逆问题会把噪声、kernel mismatch 和非理想成像误差硬塞进 latent image。由此自然想到用统计估计替代硬物理等式，再把统计估计器 unroll 成网络。

Core Idea

核心思想是把 deblurring 的信息流从“输入模糊图像 → 空间域特征 → 清晰图像”改成“模糊观测的 amplitude / phase → latent image 与 kernel 的 amplitude / phase 交替更新 → 重建图像”。这个改变不是简单换到频域，而是把 phase 作为独立 latent variable 反复估计，使网络不能完全忽略结构相位信息。理论直觉上，phase 承载边缘位置、结构轮廓和几何对齐；在 blur 下 amplitude 往往表现为能量衰减，而 phase error 更直接对应结构错位和细节 smear。因此显式恢复 phase 可能比只增强高频 amplitude 更稳定。

和 prior 的本质区别在于，本文不是把 FFT 当作 attention 或 spectral filtering 的实现技巧，而是把 amplitude / phase 写进目标函数和 unrolled update。它引入的 inductive bias 是：blur kernel 应该相对平滑，image amplitude / phase 应该带有稀疏或结构性约束，且观测的 amplitude / phase 应通过可学习的 LMMSE-like 线性关系与 latent variables 对齐。这种结构化约束解释了为什么它在低数据和高噪声下可能更 generalizable：网络搜索空间被限制在一类近似 inverse-imaging algorithm 中，而不是完全依赖数据拟合。

Method

方法的必要机制可以压缩成三点。第一，LMMSE amplitude / phase estimator 用来替代 naive Fourier convolution relation；它解决的是噪声和 kernel uncertainty 下观测频域变量不再服从理想乘法 / 加法的问题，核心变化是把固定物理等式放宽成元素级可学习线性统计映射。第二，regularized phase-amplitude objective 把 latent sharp image 和 blur kernel 分别拆成 A_U、θ_U、A_H、θ_H，并用不同正则表达 image 与 kernel 的结构差异；它解决的是 blind deblurring 中变量耦合和解不适定的问题，核心变化是让结构相位不再只是重建结果的副产物，而是优化对象。第三，交替优化 + HQS 的闭式更新被 unroll 成 UPADBlock，并让 W_i 和频域 mask 随迭代学习；它解决的是固定统计参数不可用、真实退化分布复杂的问题，核心变化是把经典 estimator 从 analytic prior 变成 data-adaptive prior。

不太重要但有工程价值的是 Weight Generator、多尺度堆叠和 GELU proximal approximation。它们更像让 unrolled 框架具备足够容量和可训练性的 implementation bridge，而不是论文最本质的贡献。尤其 GELU 替代 soft-threshold / ReLU 的论证偏工程化，不能被视为核心理论创新。

Key Insight / Why It Works

最可能真正有效的部分是 representation alignment：作者把恢复目标对齐到 degradation 在 Fourier domain 中自然作用的变量上，并进一步把 phase 单独拿出来建模。对于 deblurring，很多视觉质量损失并不是简单能量缺失，而是边缘位置、纹理周期和局部结构的相位错乱；如果网络在每个 unrolled step 都必须解释 θ_Z 与 θ_U、θ_H 的关系，它会更倾向于学习结构一致的逆映射。这是 better inductive bias，而不是 retrieval、memory reuse 或 test-time compute。

第二个有效来源是 optimization prior。UPADNet 的每个 block 都像一个受约束的 iterative solver，参数虽可学习，但更新形态仍限制了解空间。这类限制在低数据和高噪声下通常有优势，因为模型不需要从数据中重新发现反卷积结构。论文中低数据实验的趋势与这一点一致。

但必须直接指出：最终性能增益不一定全部来自 phase modeling。72 个 UPADBlocks、本身 27M 参数、多尺度下采样/上采样、动态权重生成、SG/SCA 组件都可能贡献大量效果。消融只看 block 数、activation 和 learning rate，没有展示“去掉 phase branch / 只保留 amplitude / 同等容量图像域 unrolling / 固定 W_i vs learned W_i”的关键对照。因此核心 claim 虽然可信，但增益来源不清。特别是 GoPro / RealBlur 上相对 SOTA 的提升很小，可能主要来自 engineering 和容量对齐；更有说服力的是 noisy COCO 和 reduced-data setting，但那部分又是合成退化，容易偏向满足本文建模假设的方法。

Relation To Prior Work

它最接近三条路线的交叉：经典 blind deconvolution 的 frequency-domain / Bayesian estimation，HQS / proximal algorithm unrolling，以及现代 restoration backbone 的频域建模。和 DUBLID、Net-A、DeepSN-Net 这类 unrolled deblurring 相比，真正不同点是变量选择：prior 多在 image/kernel 或 feature/image 域 unroll，本文在 amplitude / phase latent variables 上 unroll。和 FFTformer、MRLPFNet 等频域网络相比，本文的差异是频域不是 feature mixing trick，而是目标函数和更新规则的一部分。和传统 phase-based deblurring 相比，本文的新增信息是把 phase prior 接入可训练 end-to-end unrolling，而不是只做 kernel initialization 或 hand-crafted estimator。

看似新的部分中，LMMSE 推导本身并不深；元素级线性最小均方估计是标准结果，创新主要在于把它用于 amplitude / phase decomposition 并进一步做 unrolling。Weight Generator、SG/SCA、多尺度结构也不是实质创新，更像把模型驱动框架接到已有高性能 restoration engineering 上。实质创新是建模层面的：显式让 phase recovery 成为 deblurring network 的一等公民。

Dataset / Evaluation

评估覆盖了合成运动模糊、真实相机抖动数据和受控噪声退化，范围比只在 GoPro 报结果更有说服力。RealBlur 的加入支持其对真实 camera shake 的 claim；COCO 上不同噪声和低训练数据比例的实验更贴合作者关于 robustness / data efficiency 的叙事。整体看，evaluation 确实部分验证了“结构化频域 unrolling 在噪声和低数据下更稳”的主张。

但 evaluation 仍有明显 limitation。第一，COCO 退化由已知 motion kernels + Gaussian noise 合成，和文中 LMMSE / convolutional assumption 高度一致，因此对本文方法有天然偏置。第二，GoPro / RealBlur 上相对最强 baseline 的提升非常小，不能单独证明 phase decomposition 是决定性因素。第三，没有充分展示 cross-degradation generalization，例如在一种 blur/noise 分布训练、另一种真实退化测试。第四，缺少关键 ablation：phase 分支、amplitude 分支、LMMSE parameter learning、动态权重生成之间的因果贡献没有拆干净。

Limitation

方法成立依赖几个隐含前提。首先，它假设 Fourier amplitude / phase 的元素级统计关系足够稳定，可以通过可学习 W_i 捕获；但真实成像链路中的空间变化 blur、nonlinear ISP、saturation、rolling shutter、compression artifact 会破坏这种全局频域建模。其次，它仍然假设 phase 是可被稳定估计和优化的变量；相位 wrapping、低幅值频率处相位不可靠等问题文中未充分说明。第三，虽然作者强调 model-driven 和 data-efficient，但最终网络很深，72-block 设置明显有 scaling 成分，不能排除性能主要来自更大的 effective depth 和多尺度 engineering。

泛化 claim 也需要谨慎。低数据实验说明模型在同一合成分布下更省数据，不等价于真实跨域泛化。真实世界部分主要是 RealBlur benchmark，不能覆盖复杂 deployment。另一个问题是方法可能只是把 blind deblurring 的不确定性从 kernel/image 空间转移到 W_i 与动态权重生成器中；这些 learned matrices 是否有稳定物理意义，文中没有证明。若 W_i 只是学成了频域调制权重，那么“LMMSE estimator”的解释可能更多是 architectural story，而不是实际机制。

Takeaway

• 最值得记住的第一点是：对 deblurring 这类结构恢复任务，phase 不应只是频域表示里的副产品，而可以作为 unrolled optimization 的显式状态变量。
• 第二，model-driven network 的价值不在于复刻传统算法，而在于用算法形式限制表示学习的自由度；这种限制在高噪声、低数据、小分布偏移下尤其有用。
• 第三，频域方法未来真正值得做的不是再堆 FFT attention，而是更细地建模 amplitude / phase / uncertainty 的分工，尤其是相位置信度、低幅值频率的 phase reliability 和空间变化 blur 下的局部频域表示。
• 第四，这篇论文推动的是 restoration 中“latent structure-aware unrolling”的方向，但仍需要更严格的因果消融来证明 phase 建模本身，而不是 depth 和工程组件，才是主要收益来源。

一句话总结

UPADNet 是一篇把 phase-amplitude decomposition 显式嵌入 deblurring unrolled network 的模型驱动方法，真正贡献在于把相位恢复从隐式特征学习提升为优化状态变量，但其 SOTA 增益仍混有明显 scaling 和 engineering 成分。