精读笔记
Problem Setting
MambaLIE: Scene Light Intensity-Boosted Low-Light Image Enhancement with State Space Model（arXiv preprint / 2026）。这篇论文真正解决的是低照度增强里一个长期矛盾：增强需要全局照明一致性，但恢复又依赖局部纹理、边缘和颜色的精细保真。CNN 在局部恢复上天然合适，但跨区域 illumination inconsistency 处理弱；Transformer 能看全局，但对高分辨率图像恢复来说成本不经济。低照增强的关键并不是“亮度提升”，而是如何在非均匀照明、噪声、色偏和暗区结构缺失同时存在时，恢复一个全局自然且局部不崩的图像。作者把问题定位为：用线性复杂度的全局建模替代昂贵 attention，同时显式注入照明结构先验，缓解纯网络从暗图中自行推断 illumination map 的难度。
Motivation
已有路线缺的不是单个模块，而是合适的任务归纳偏置。Retinex/CNN 路线通常把 illumination/reflectance 的先验写得较硬，或者通过局部卷积隐式学习，面对大范围非均匀照明时容易局部合理、全局不一致。Transformer 路线用 self-attention 解决长程依赖，但其代价和部署友好性与低层视觉的高分辨率输入天然冲突。Vision-SSM 提供了一个中间选择：接近全局感受野，但线性复杂度。作者的观察是，直接把 Mamba 当 backbone 不够，因为 LIE 不是高层识别任务，它需要显式关注 illumination variation 和局部细节退化。因此缺口是：一个 illumination-aware 的 SSM 恢复框架，而不是又一个通用视觉 Mamba block。
Core Idea
核心思想可以概括为：先把低照图像中的低频光照分布显式提取出来，用它调制输入；再用 SSM 做跨空间的全局依赖传播；最后用局部卷积分支补偿状态空间模型对局部纹理恢复的不足。它改变的是信息进入恢复网络的方式：不是让网络从原始低照图像中同时学习“哪里该变亮、变亮多少、如何保结构”，而是先提供一个粗糙但稳定的 illumination scaffold，让后续网络围绕这个 scaffold 做恢复。
理论/直觉上，这个设计成立的原因在于低照增强强依赖低频照明场，而均值滤波得到的 scene intensity 虽然粗糙，却能压制高频噪声并保留大尺度亮度趋势。SSM 分支则适合把这种大尺度上下文沿序列传播，形成比卷积更大的有效感受野，同时避免 Transformer 的二次复杂度。和 prior 的本质区别不是“用了 Mamba”，而是把 Mamba 放在照明建模链路里：它更像一种高效的 global illumination/context propagation mechanism，而不是通用 token mixer。
Method
方法层面真正必要的机制有三类。第一，Scene Light Intensity Prior 解决的是低照输入中结构不可见、暗区噪声强、照明分布不稳定的问题；它用平滑亮度近似作为低频照明提示，再与原图门控，使网络输入带有更明确的结构和亮度分布线索。这个机制的核心变化是把 illumination estimation 从完全隐式学习变成半显式条件化。
第二，LESSM 解决的是全局依赖建模成本问题。双向 SSM 分支用前向/后向状态传播捕获长程依赖，适合处理非均匀照明下远距离区域之间的亮度一致性。这里的关键不是状态方程本身，而是用线性序列建模替代全局 attention，让高分辨率增强更可扩展。
第三，Local Enhanced Branch 解决的是 SSM 对局部高频结构不够敏感的问题。低层视觉任务不能只靠全局 token mixing，边缘、纹理、局部颜色过渡仍需要卷积式 inductive bias。CA 和 DGFN 更像表达能力和通道重标定的辅助组件：有增益，但不是论文的核心机制。
Key Insight / Why It Works
最可能真正有效的是 scene intensity prior 与 LESSM 的组合，而不是任何单个常规模块。scene prior 降低了恢复问题的不适定性：网络不必从极暗图像中完全隐式推断照明场，而是获得一个低频的、抗噪的初始估计。这个先验即使很简单，也能显著改变优化路径，因为它把增强目标从 arbitrary image-to-image mapping 拉回到 illumination-conditioned restoration。
LESSM 的有效性更像 better inductive bias + efficient scaling，而不是 Mamba 带来了某种深层“推理能力”。低照增强需要大感受野，但 attention 的全局建模在恢复任务中并不总是性价比最高；SSM 提供了足够长的依赖传播和更低成本，使模型能在较深 U-shaped 框架中堆叠全局混合而不过度爆炸。局部分支则防止 SSM 把低层细节平均化。
需要直接判断：CA、DGFN、U-Net skip、多层 encoder-decoder 很大程度是成熟工程组合，可能主要贡献稳定性和容量，不构成新 insight。消融显示 scene intensity 和 LESSM 有明显增益，但增益归因仍不完全干净：更大有效感受野、更多参数、更合适的归一化/门控、训练时长和数据覆盖都可能参与贡献。文中未充分说明 LESSM 相比其它线性 attention、large-kernel CNN、Retinex-aware CNN 的公平性边界，因此“SSM 是关键”的因果证据还不够强。
Relation To Prior Work
它最接近三条谱系的交叉：Retinex/illumination-prior 型 LIE、Transformer restoration、Vision-Mamba/SSM backbone。和 Retinex 类方法相比，它没有严格分解 reflectance/illumination，而是把 illumination prior 用作输入调制信号，因此更灵活但物理可解释性更弱。和 Retinexformer/LLFormer 等 Transformer 方法相比，它的核心差异是用 SSM 替代 MHSA 来获得全局依赖，以换取更好的复杂度曲线。和 VMamba/Vim 等通用 Vision-SSM 相比，它新增的是任务相关的 illumination-aware conditioning 和局部恢复分支。
看似新的部分里，U-Net、skip fusion、channel attention、gated FFN 都是已有恢复网络经验的重组；均值滤波光照先验也不是强新颖的物理先验。实质创新在于把这些东西组织成一个面向 LIE 的 SSM 信息流：低频照明先验先调制输入，SSM 再做全局光照/结构传播，卷积补局部细节。它属于“将通用高效序列建模器任务化”的方法演化，而不是提出新的低照成像理论。
Dataset / Evaluation
评估覆盖了常用成对 benchmark、无参考真实图像集合，以及 blur/noise 场景，范围比只在 LOL 上报结果更完整，能一定程度支持“通用低照增强”和“鲁棒性”说法。它也比较了 CNN、Transformer、Retinex、Mamba 类方法，说明作者想验证的是效率-质量 trade-off，而非单纯刷一个指标。
但这些实验主要还是离线图像增强 benchmark，不能完全支撑“适合消费电子部署”的强 claim。真实部署需要 RAW/ISP 位置、端侧 latency、功耗、memory peak、视频 temporal consistency、不同 sensor 的 domain shift，这些文中基本没有充分验证。无参考指标如 NIQE/PI/MUSIQ 对低照增强的感知质量并不总可靠，容易偏向某些纹理/对比度统计。另一个问题是，部分表格中 MambaLIE 并非所有指标都占优，例如 LOLv2-Real 的 LPIPS 不理想，这提示其增强可能在某些真实分布上存在感知或颜色偏差。
Limitation
方法成立依赖一个隐含前提：低照图像中的低频亮度分布仍是可信的 illumination proxy。这个前提在轻中度低照下通常成立，但在极暗、强噪声、局部饱和、彩色光源混合、曝光严重不足时会失效；一旦 scene prior 错，门控机制会把错误照明结构前置注入网络，后续 SSM 可能进一步传播错误。作者在 limitation 中也承认极端复杂照明下会有色偏和欠/过曝。
scalability 的上限也要谨慎看。SSM 是线性复杂度，但二维图像展开、扫描方向、GPU kernel 实现、内存访问模式都会影响真实端侧效率；论文没有给出手机/相机 NPU 上的实测。所谓全局建模不等于真实的物理照明推理，更可能是学习到 benchmark 中常见低照退化模式的长程统计。泛化可能依赖训练数据覆盖和 benchmark overlap，尤其在 LOL/FiveK 这类常用数据集上，方法间差距可能混杂了训练 recipe、模型容量和数据适配。
增益归因不够清晰。LESSM 与 transposed attention 的替换消融说明它有用，但没有充分排除更强 token mixer、更大感受野、更好门控或参数分配带来的影响。CA/DGFN 虽有增益，但属于标准工程增强。整体看，MambaLIE 不是解决了低照增强的物理不适定性，而是把问题转移为“用更合适的先验和更高效的全局混合器学习一个更稳的恢复映射”。
Takeaway
- 第一，低照增强里的全局建模不一定需要 Transformer attention；SSM 作为 illumination/context propagation operator 是合理方向，尤其适合高分辨率恢复。
- 第二，简单低频先验仍然有价值。
- 哪怕只是均值滤波，只要它进入网络的位置正确，也能显著改变信息流和优化难度。
- 这一点可迁移到去雾、夜间去噪、欠曝光视频增强等任务。
一句话总结
MambaLIE 是一篇把 Vision-SSM 任务化到低照增强的工程-机制混合型工作，真正贡献在于用低频照明先验引导线性全局状态建模，而不是提出新的低照成像理论。