精读笔记

Problem Setting

这篇论文实际在解决 classical denoising 的部署性问题，而不是单纯追求最高 PSNR。BM3D/NLM 的质量来自内容相关搜索，但搜索带来不规则访存、分支、不可预测延迟和较差并行性；深度去噪器质量更强，但需要训练数据、依赖训练域，并且 per-pixel compute 使 GPU 几乎成为默认假设。关键矛盾是：真实图像去噪需要足够强的图像先验，但越强的先验通常越依赖搜索、优化或训练。GALOSH 问的是：如果从设计上禁止 search，classical training-free denoising 还能剩下多少质量，以及能否换来固定图、跨域、硬件友好的计算。

Motivation

已有路线的不足不是某个模块慢，而是建模方式本身不适合固定延迟并行实现。BM3D/NLM 把信息利用建立在 patch matching 或邻域权重上，质量和计算路径都随内容变化；深度网络把先验压进权重，推理路径固定但训练域绑定明显。作者的核心观察是，很多 classical denoising 的有效部分并不一定必须依赖 search：variance stabilization、transform shrinkage、Wiener refinement、guided regression 都可以写成局部规则算子。关键缺口是一个把这些 classical pieces 重新组织成同一固定计算图、同时覆盖 raw Bayer 和 rendered sRGB 的方案。

Core Idea

GALOSH 的真正核心不是“用了 GAT + WHT + regression”这几个模块，而是把去噪的信息流从 search/retrieval 改成 variance-stabilized local estimation。它先把真实传感器噪声规整到一个近似统一方差的空间，使 shrinkage 不再需要在每个亮度区间重新建模；然后用 dense overlapping local transform 取代 BM3D 的非局部 patch stack，让每个像素执行相同计算。这样牺牲的是显式 non-local self-similarity，换来的是稳定 latency、可并行、可 fixed-point 的结构。

第二个核心是 luma/chroma 的结构性非对称。论文把亮度噪声看作可与纹理共存的 grain，因此对 luma 保守 shrinkage；把色度噪声看作 perceptually unacceptable blotches，因此用亮度结构强引导、强平滑的局部回归。这引入了一个明确 inductive bias：图像结构主要由 luminance 承载，chrominance 应该服从局部亮度几何并保持在输入色度 hull 内。这个 bias 比统一处理 RGB/CFA 分量更贴近感知，也更适合 training-free 场景。

Method

关键机制可以压缩成三件事。第一，blind Poisson-Gaussian fit + GAT 解决真实 raw/sRGB 噪声的异方差问题；没有这个规整，固定 threshold 的局部 shrinkage 会在不同信号强度下失效。第二，luminance 使用两阶段局部 WHT shrinkage：pilot shrinkage 给出结构估计，Wiener pass 用 pilot 估计局部能量；它保留了 BM3D “先粗估再 Wiener refine” 的思想，但去掉了 block matching。第三，chrominance 使用 denoised luminance guided local regression：它解决的是色度 blotch 与亮度结构错位的问题，核心变化是把 chroma 的去噪从“独立图像平滑”改成“受 luma 几何约束的局部条件估计”。Raw 和 sRGB front-end 只是把不同输入映射到这个共同 luma/chroma core，真正新增价值在 shared core 的 inductive bias。

Key Insight / Why It Works

最可能的核心贡献是“用感知不对称的局部先验替代搜索先验”。BM3D 的强项来自 patch group 中的重复结构；GALOSH 不再试图找重复 patch，而是押注两个事实：自然图像多数可去噪成分在小窗口内已有足够统计冗余；色度噪声的视觉容忍度远低于亮度噪声，因此 chroma 可以被更激进地约束到 luma geometry。这个判断在真实噪声场景下很合理，因为许多手机/相机噪声主要表现为 fine luma grain 和 low-frequency chroma blotch，而后者正是 classical white-noise baselines 容易处理不好的地方。

GAT 是必要但不像是主要贡献。论文的 VST ablation 表明，把同样的 variance stabilization 给 BM3D/NLM 并不能闭合差距；因此增益更可能来自局部 shrinkage 架构和 luma-guided chroma regression，而不是单纯噪声估计。WHT 本身也不是新东西，更像是为了 hardware regularity 和低成本 transform 选择的工程上正确的 basis。真正有效的地方是组合方式：固定局部 transform 负责保纹理，guided chroma regression 负责消除颜色 blotch，二者在 GAT 空间中共享尺度。

这不是 scaling，也不是 retrieval，也不是 hidden training。它更像是 better inductive bias + compute graph regularization。test-time compute 是固定的，不随内容做 adaptive search；memory reuse 来自局部窗口和 overlap-add，而不是 patch memory bank。需要警惕的是，论文中一些质量提升可能来自非常精心的工程组合：multi-scale chroma residual、clamping、CFA dark reference、joint-bilateral upsampling 等细节可能贡献不小，但消融不够细，增益来源仍有部分不清。

Relation To Prior Work

它最接近 BM3D 的两阶段 transform shrinkage 谱系，以及 guided filter / joint bilateral 的 cross-channel smoothing 谱系。看似新颖的部件多数不是新算法：Poisson-Gaussian fit、GAT、BayesShrink、empirical Wiener、LOESS/guided regression 都是已有思想。真正不同点在于系统级重组：把 BM3D 的 searched 3D collaborative filtering 改写为 dense cycle-spun local transform，把 color denoising 从统一处理改成 luma/chroma 异构算子，并让 raw Bayer 与 sRGB 共享同一核心。

相对 BM3D/NLM，本质差异是从 content-adaptive search prior 转向 fixed local perceptual prior。相对 Noise Clinic/EPLL/WNNM/K-SVD 这类 classical pipeline，它不走 patch prior optimization 或低秩检索，而是强调固定计算图。相对 CNN/Transformer，它没有 learned prior，因此上限较低，但泛化和硬件确定性更强。可以把它定位为 classical denoising 的“ISP-friendly reconstruction”：不是追求最强先验，而是追求足够强且可流式实现的先验。

Dataset / Evaluation

评估覆盖 raw Bayer 与 sRGB，两者都使用真实噪声数据，能较好支撑“multi-domain、blind、training-free”这一 claim。SIDD 和 RawNIND 的组合有意义：一个偏手机真实噪声与固定 benchmark，一个偏跨相机/跨 ISO；raw 与 rendered sRGB 同时评估也避免了只在传感器域证明有效。

但 evaluation 仍主要验证 offline benchmark 上的图像质量与速度，不等价于真实 ISP deployment。sRGB 结果受 rendering pipeline、tone curve、denoising/sharpening history 影响很大，论文承认 blind estimator 会低估 correlated rendered noise。与 deep baselines 的比较是合理但不完全对称：训练模型被当作 reference upper bound，而 GALOSH 的优势主要是 training-free 和速度。与 classical baselines 的 oracle-sigma 对比很关键，因为它说明问题不只是噪声估计；不过更强 classical optimization 方法、现代 plug-and-play 或 diffusion prior 没有作为主要对照，claim 的边界应理解为“相对测试的 BM3D/NLM-family”。

Limitation

最大前提是噪声模型和 luma/chroma prior 足够接近真实相机噪声。Raw Bayer 中 Poisson-Gaussian 近似通常成立；但 rendered sRGB 中，ISP 会引入空间相关、tone-mapped、可能已被 sharpen/compress 的噪声，GAT 只能一阶吸收，不能真正白化。论文在 sRGB 高 ISO 上仍落后 trained networks，说明固定局部先验的表达力上限已经出现。

第二个限制是 non-local structure 被主动放弃。对于重复纹理、规则图案、低信噪比文字、跨区域自相似，BM3D/learned models 能利用远程相似性或 learned semantic prior，而 GALOSH 只能依赖局部窗口和亮度引导。它的泛化是真实的，但不是无限制泛化；它泛化的是噪声域和硬件路径，不是复杂图像先验。

第三，增益归因未完全拆干净。文中证明 VST 不是全部，但没有充分分离 WHT shrinkage、two-pass Wiener、chroma regression、多尺度 residual、clamping、raw front-end 各自贡献。某些优势可能主要来自针对真实噪声视觉形态的工程组合，而不是一个单一可抽象的理论突破。固定点和 streaming 分析也只是 feasibility，不是完整硬件产品验证。

Takeaway

• 最值得记住的不是某个 transform，而是“去掉 search 后，classical denoising 仍可通过更强的局部感知先验保持竞争力”。
• 这对 ISP、移动端、边缘设备很重要：很多时候固定延迟和可预测带宽比理论最优质量更有价值。
• 第二，luma/chroma 不对称应该被视为一等建模原则，而不是颜色空间转换后的实现细节。
• 对其他 restoration 任务也类似：不同 perceptual failure mode 应该用不同 operator，而不是统一网络/统一滤波器强行处理。

一句话总结

GALOSH 是一条把 classical blind denoising 从 search-driven patch prior 重构为 variance-stabilized、luma/chroma-asymmetric、fixed-graph local prior 的路线，贡献不在新模块，而在用更适合并行硬件的 inductive bias 重新组织了 training-free 去噪。