精读笔记
Problem Setting
论文标题：Factor-Aware Mixture-of-Experts with Pretrained Encoder for Combinatorial Generalization（arXiv preprint / 2026-06-23）。这篇论文实际处理的是视觉机器人策略在环境因素组合变化下的泛化问题，而不是一般意义上的视觉表征增强。已有 diffusion policy + pretrained encoder 在标准环境或单一 shift 下可以工作，但一旦光照、纹理、相机、物理参数等因素组合变化，单一 policy 往往只能依赖训练分布覆盖，数据复杂度迅速上升。关键矛盾是：机器人策略需要对视觉外观变化保持不变性，同时又不能把与动作相关的几何/状态信息抹掉；直接微调大 encoder 容易破坏预训练表征，而完全冻结 encoder 又无法适配具体环境因素。
Motivation
作者真正抓住的缺口是：现有方法通常把环境变化看成整体 domain shift，让模型在混合数据上端到端吸收变化；但如果变化本身有因素结构，这种做法浪费样本，也不提供组合泛化的机制保证。论文的核心观察是物理环境中的很多变化可以近似独立地控制和采样，因此可以先学习单因素适配，再在多因素场景中组合。这个动机合理，但也很强依赖实验环境可控：如果因素不是事先可枚举、可隔离采样，FAME 的训练范式就不再自然成立。
Core Idea
FAME 的本质不是“给 DP 加一个 MoE”，而是把环境适配从 policy 参数空间转移到 frozen encoder 后的 feature transformation 空间。每个 factor-specific adapter 学到的是：当某个环境因素变化时，如何把 DINOv2 输出的特征拉回到 base diffusion policy 能理解的表示分布。这样，base policy 不需要重新学习动作技能，adapter 只负责修正视觉分布偏移。
更关键的是 router 对多个 adapter 做 dense soft composition，把组合环境解释为若干单因素 feature correction 的加权和。这引入了一个明确的 inductive bias：复杂环境变化可以由有限个单因素变换重组得到。相比直接在所有组合上训练一个大 policy，这种建模方式更 scalable；相比普通 PEFT，它多了“因素标签/因素专家”的结构化监督；相比传统 MoE，它的专家不是任务专家或技能专家，而是环境因素专家。
Method
方法中真正必要的机制有三层。第一，policy warm-up 用标准环境建立一个稳定的 base policy 和目标特征分布；这一步的作用是固定“什么样的视觉特征可以驱动动作”，否则 adapter 没有明确的对齐目标。第二，单因素 adapter 训练冻结 encoder 和 policy，只允许 adapter 修改中间特征；这迫使每个 adapter 学的是因素造成的表示偏移，而不是重新学任务策略。第三，joint fine-tuning 冻结 adapter bank，只训练 router 和新的/可训练 DP head；这一步让模型学习多因素组合时各 adapter 的使用比例，同时避免单因素专家在混合数据中被冲掉。
机制上最值得注意的是 dense MoE 而非 sparse MoE。dense 加权假设多个因素可以同时存在且贡献可叠加；这比 top-k routing 更符合组合变化，但也暴露了一个上限：若因素之间存在强非线性交互，简单加权 adapter 输出可能不足以表达真实组合效应。
Key Insight / Why It Works
最可能真正有效的部分是“factor-wise feature correction + frozen policy alignment”。预训练 encoder 提供通用视觉特征，但它的特征分布未必对机器人控制稳定；adapter 学到的是把特定环境 shift 后的特征映射回 policy 熟悉的 manifold。这比直接让 DP 在 action space 上吸收所有变化更容易，因为它复用了已经学到的控制映射。
第二个有效点是 curriculum/data organization。论文把数据显式拆成 standard、single-factor、multi-factor，训练顺序也从简单到复杂。这可能是很大的增益来源。换句话说，FAME 不只是 architecture trick，它同时引入了强 supervision：每个 adapter 都知道自己负责哪个因素。文中没有充分说明如果没有这种人工因素分解，router 是否还能自动发现同样结构。
第三，router 更像 domain retrieval / soft condition selector，而不是复杂推理模块。它可能根据输入视觉统计识别当前环境接近哪些因素，然后调用相应 adapters。这里的“combinatorial generalization”更接近 latent factor recombination，不是 planning 或 reasoning。若测试组合来自训练中因素的重新排列，这种能力是合理的；若出现新因素或因素交互超出训练覆盖，泛化上限会很快暴露。
MoE 本身可能不是核心创新，核心是把 MoE 的专家语义绑定到环境因素，并通过冻结策略保持专家可复用。增益来源不清的部分包括：DINOv2 表征、额外的单因素数据、adapter 参数效率、多阶段训练、router 组合能力分别贡献多少。当前实验能证明整体 pipeline 有效，但不能完全证明 factor-aware MoE 是唯一原因。
Relation To Prior Work
这篇工作位于 diffusion policy + pretrained visual encoder + PEFT/MoE 的交叉线上。相对 DP with DINO/CLIP/R3M，它新增的不是更强 encoder，而是对环境变化的结构化适配层；相对普通 adapter/LoRA，它不是单一任务适配，而是为每个环境因素训练独立 adapter；相对机器人中的 MoE，它的专家不是技能、任务或 failure mode，而是视觉/环境因素。
看似新的部分中，PEFT、adapter bank、MoE routing 都是已有思想重组；实质创新在于把这些机制组织成面向 combinatorial environmental variation 的训练协议，并把专家语义显式绑定到可控因素。它更像一种结构化 domain generalization 方法，而不是新的 diffusion policy 方法。论文标题中的 “learning theory” 标签略显牵强：文中没有真正给出理论保证，更多是基于因素独立性的工程假设和实验验证。
Dataset / Evaluation
仿真实验通过 MetaWorldEnvFactor 人工构造了 5 类因素变化，并在 9 个任务上测试单因素到多因素组合；这确实比普通单场景 benchmark 更贴近论文 claim。真机实验也覆盖了相机位置、桌面纹理及二者组合，说明方法不是纯仿真技巧。
但 evaluation 的核心 limitation 是：因素是作者定义并可控生成的，因此测试主要验证“已知因素的组合复用”，而不是开放环境中的未知 domain generalization。Mix Gen Dataset 中包含多因素变化数据，最终效果并非严格 zero-shot combination；它更像在少量组合数据上学习如何重组单因素专家。cross-task router transfer 的 heatmap 有启发性，但不是强证据，缺少更系统的跨任务、跨因素、跨物体验证。真机规模较小，且使用仿真 MoE 到 ResNet-18 的蒸馏，增益归因进一步混合。
Limitation
FAME 的最大隐含前提是环境因素可被人工枚举、单独采样，并且组合效应可由单因素 adapter 的 soft mixture 近似。这个前提在 benchmark wrapper 中成立，在真实开放环境中不一定成立。若因素之间强相关，例如光照改变导致纹理可见性变化、相机变化改变遮挡模式、物体材质影响抓取动力学，单因素 adapter 可能不再可组合。
第二个限制是 scalability。因素数量 K 增长时，需要为每个因素收集数据、训练 adapter，并训练 router 处理组合；虽然比枚举所有组合更好，但并不是 free lunch。对于连续因素，离散 adapter bank 如何覆盖空间文中未充分说明。
第三，泛化可能主要来自数据覆盖和 curriculum，而非 architecture 本身。每个 Gen Dataset 和 Mix Gen Dataset 都提供了强 supervision，router 学到的可能是视觉域分类，而不是可解释的因子分解。若测试分布与作者构造的因素集合高度重合，benchmark 可能高估了真实泛化。
第四，论文没有充分拆解真机增益来源。真实实验中引入了知识蒸馏、小模型部署、仿真预训练迁移和 FAME adapter 结构，这些因素耦合在一起；因此 35% improvement 不能简单归因于 factor-aware MoE。
Takeaway
- 最值得迁移的 insight 是：在机器人视觉策略中，与其把所有 domain shift 交给 policy 端到端吸收，不如把可控环境变化显式变成 feature-space adapters，并保持控制 policy 的稳定性。
- 第二，combinatorial generalization 的关键往往不是更大的模型，而是更好的数据组织和结构化归因。
- FAME 的价值在于用单因素数据建立可复用中间变换，再用少量组合数据学习路由。
- 第三，这条路线未来真正重要的问题不是再加复杂 MoE，而是自动发现因素、处理连续/相关因素、以及验证在非人工构造 domain shift 下是否仍能组合泛化。
一句话总结
FAME 是一篇把 PEFT/MoE 思想结构化移植到视觉机器人组合泛化中的工作，真正贡献在于把环境变化显式建模为可复用的单因素特征适配器及其软组合，而不是提出新的控制或扩散策略本身。