精读笔记
Problem Setting
这篇论文针对的是 embodied continual learning 中的 VLA 操作策略连续学习：机器人按任务流学习新 manipulation task，同时要在闭环 rollout 中保留旧任务行为。真正困难点不是离线分类式 catastrophic forgetting，而是旧任务 action representation 的小漂移会在闭环控制里通过状态分布偏移被放大，最终表现为轨迹偏离和任务失败。
以前方法主要卡在知识组织粒度上。task-level routing / replay 能隔离任务，但把每个任务当作独立单元，无法利用“拿起、移动、放置、开盖”等跨任务共享结构；skill-level discovery / retrieval 虽然更细粒度，但多停留在找到或调用 skill，没有显式建模 skill 如何组合、如何切换、如何在 action decoder 中保持连续。关键矛盾是：新任务需要复用旧技能并学习新组合，但这种组合学习又最容易扰动旧技能的动作流形。
Motivation
作者认为 ECL 的遗忘不应只从 task identity 或参数正则化角度处理，而应从机器人任务的组合结构处理。许多 manipulation task 的差异不是底层动作 primitive 完全不同，而是已有 primitive 的顺序、目标物和过渡方式不同。因此，如果 continual learner 不显式维护 skill-level structure，就会把每个新任务更新都压到同一个动作解码空间里，导致旧技能和新组合互相污染。
关键缺口是“structured skill reuse”。已有 skill 方法解决了 skill 是什么、如何检索、如何演化，但没有很好回答：一个新任务如何由多个旧技能组成？技能边界处该由谁负责？当状态同时带有前一技能和后一技能线索时，模型如何避免硬切换造成的动作不连续？SCE 就是围绕这个缺口设计的。
Core Idea
SCE 的核心不是简单加 MoE，而是把 ECL 的建模单位从 task 改为 skill composition。它先构造一个可增长 skill base，把 demonstration 中的时间片段映射到离散 skill；然后让动作解码器显式区分两类知识：skill 内部的稳定执行模式，以及 skill 之间的过渡/组合模式。这样，新任务学习不再是整体改写一个 task policy，而是调用旧 skill execution capacity，并主要学习或调整组合关系。
这个设计引入的 inductive bias 很明确：同一 skill 在不同任务中应共享局部动作规律；不同任务的差异更多体现在 skill sequence 和 transition dynamics；闭环稳定性要求 action-side feature 不被新任务全局拖动。相比 task-MoE，它更细粒度、更可复用；相比 skill retrieval，它多了 transition modeling，避免把组合问题简化成离散技能选择。
Method
方法层面可压缩成三件事。
第一，CSG 把 demonstration 转成 skill-indexed data。状态变化规则负责切分候选时间段，VLM grounding 负责给片段命名并与现有 skill base 匹配。它解决的是 skill 空间从哪里来，以及不同任务中的相似行为如何落到同一索引上。这里的核心变化是把连续轨迹监督转成 action prediction + skill classification 的双监督。
第二，Execution Expert Branch 给每个 skill 一个专门执行通道。给定当前 observation / instruction / robot state 预测出的 skill distribution，模型 hard route 到最相关的 execution expert。它的作用是隔离 skill-specific 更新，减少新任务对无关旧技能的动作特征漂移。这个分支本质上是 skill-indexed parameter isolation。
第三，Transition Expert Branch 处理 skill 边界和组合。它不按单一 skill hard select，而是把 skill distribution 注入 router，用多个 transition experts 的 mixture 建模跨技能关系。Adaptive Fusion 再根据 transition-aware feature 在 execution 和 transition 两个输出之间调权。这个机制解决的是纯 hard skill routing 的断裂问题：局部执行要专一，边界过渡要柔性。
Key Insight / Why It Works
最可能真正有效的是 action decoder 中的结构化容量分配，而不是 VLM 标注或 adapter 细节本身。ECL 遗忘在 VLA 中主要体现在 action-side feature drift；如果把所有任务更新压到共享 decoder，旧任务的动作 chunk 表征会随新任务漂移。SCE 用 skill-indexed execution experts 把局部动作模式锁在相对独立的子空间里，相当于把干扰从 task-level 降到 skill-level，这比 task-MoE 更容易复用，也比全共享 decoder 更稳定。
第二个有效点是显式把 transition 从 execution 中剥离。很多 skill-based 方法默认 skill 可以顺序拼接，但在闭环控制里，失败经常发生在 skill boundary：抓取完成到移动、移动到放置、开盖到取物，这些区域状态模糊、动作模式混合。如果只做 argmax skill expert，边界会出现不连续；如果全用 soft mixture，又会污染稳定执行。SCE 的 dual branch + adaptive fusion 是一个合理折中。
需要直说的是，CSG 可能既是贡献也是隐藏依赖。用 VLM 给 skill 命名并维护 skill base，本质上引入了外部语义先验和弱标注；在 LIBERO 这类任务中，skill phrase 很可能高度规则化，VLM grounding 容易成功。若换到细粒度接触丰富、视觉歧义强、语言不可描述的技能，skill annotation 噪声会直接伤害 routing。这里的“composition”更像结构化 retrieval + expert reuse，不是显式规划或长期 reasoning。
增益来源不完全清楚。SCE 同时增加了专家容量、skill auxiliary loss、VLM-derived supervision、replay、以及 transition mixture。消融显示每个组件有用，但没有完全剥离 capacity matching、annotation quality、replay dependence 的影响。因此最稳妥的归因是：它通过更好的 inductive bias 和 memory reuse 降低 action-feature drift，而不是证明了机器人获得了更强的抽象任务推理能力。
Relation To Prior Work
它最接近三条线：task-level ECL expert routing、skill-incremental / skill-retrieval robot learning、以及 adapter/MoE 式参数高效 continual learning。和 MoILE / Task-MoE 类方法的本质差异是组织粒度：SCE 不按任务隔离，而按可复用 skill 隔离，因此在任务共享操作片段时更有效。和 LOTUS / IsCiL / Stellar VLA 这类 skill-level 方法的差异是，它不只发现或检索 skill，而是把 skill execution 与 skill transition 同时接入 action decoder，显式处理组合连续性。
看似新的部分中，expert pool、routing、adapter、auxiliary skill prediction 都是已有思想重组；实质新增的信息是把 skill composition 作为 ECL 的主要结构假设，并在 action decoder 里给 execution 和 transition 分配不同参数通道。它属于“pretrained VLA + parameter-efficient modular adaptation + skill-structured continual learning”的技术谱系。创新不在单个模块，而在把机器人操作任务的可组合性变成抗遗忘机制。
Dataset / Evaluation
评估覆盖了 LIBERO-Goal、LIBERO-Long 和三个真机任务。LIBERO-Long 对长程组合有一定价值，真机实验也说明方法不是纯 simulator artifact。但整体任务仍是 tabletop manipulation，且任务之间显然存在较强技能重叠，这正是 SCE 最擅长的条件。因此实验很好地验证了“在共享 skill 较多的连续任务流上，skill-compositional expert 比 task-level 或普通 replay 更稳”，但没有验证开放域机器人 lifelong learning。
feature drift 分析是论文较有说服力的部分。作者不只报 final success，而是比较 first-learned checkpoint 和 final checkpoint 在 VLM feature、action feature 上的 cosine drift，并用 shared-anchor rollout 看闭环状态偏离。这比单纯成功率更贴近其 claim：闭环控制会放大 action-side drift，而 SCE 能缓解它。不过 shared-anchor rollout 仍是离线诊断，不等于真实部署中的长时分布外恢复能力。
评估 limitation 明显：任务顺序固定；每个旧任务仍保留 replay demo；真机只有 3 个任务、每任务 10 次试验；没有大规模 skill base 膨胀实验；也没有系统测试错误 skill grounding 对性能的影响。因此 claim 的边界应限定在“可分解、技能共享、标注较可靠”的 ECL setting。
Limitation
最大限制是方法把难题从“如何避免任务遗忘”部分转移成“如何获得稳定、可复用、可扩展的 skill space”。CSG 的 state-rule segmentation 和 VLM grounding 在规则化 manipulation benchmark 中合理，但在真实开放场景中，skill 边界并不总对应 gripper change 或末端趋势突变；同一 skill 的语义也可能随物体、约束、接触状态变化。文中未充分说明 skill matching、同义合并、错误新增、skill base 漂移如何处理。
scalability 也不清楚。Execution expert 是按 skill 增长的，skill base 越大，routing 错误和参数规模都会上升。Transition experts 虽然数量固定，但是否能覆盖组合爆炸没有证据。更关键的是，transition branch 可能学到的是 benchmark 内常见 skill adjacency，而不是可泛化的 transition dynamics。
泛化可能依赖 benchmark overlap。LIBERO 和真机任务都包含大量共享操作片段，SCE 的优势在这种 regime 下合理；若任务流不断引入真正新技能，或者旧 skill 只在语义上相似但动力学不同，SCE 可能退化成不断扩张的 expert library。所谓组合能力更像 retrieval + modular adaptation，不是显式 planner，也没有长期状态图或目标分解机制。
增益归因仍有混杂。SCE 相比 baseline 增加了专家容量、VLM 弱监督、skill auxiliary objective 和结构化 routing；即使消融显示 full model 最好，也不足以证明每个提升都来自“composition”。尤其 replay 仍存在，不能说明它在严格 rehearsal-free ECL 下同样成立。
Takeaway
- 1. 对 VLA continual learning，action-side feature drift 比 encoder feature drift 更关键；抗遗忘机制应直接作用在 action decoder / action chunk representation 上，而不是只保护视觉语言表征。
- 2. 机器人任务的 skill compositionality 可以作为比 task identity 更好的 continual learning bias：任务是 transient 的，skill 才是可复用 memory unit。
- 3. skill-based ECL 不能只做 skill discovery / retrieval，必须显式处理 skill transition；闭环失败往往发生在边界，而不是 skill 内部。
- 4. 未来更值得做的是可自校正的 skill space：自动发现、合并、拆分、验证 skill，并把 transition 结构从经验 mixture 推进到可泛化的 skill graph / dynamics model。
一句话总结
SCE 是一篇把 VLA embodied continual learning 从 task-level expert 隔离推进到 skill-compositional modular adaptation 的工作，真正贡献在于用 skill execution / transition 分解来降低闭环 action-feature drift，而不是发明新的底层 VLA 训练范式。