精读笔记

Problem Setting

论文标题：Coarse-to-Control: Action-Token Planning for Vision-Language-Action Models（arXiv preprint / 2026）。

这篇论文不是在重新定义 VLA，也不是主要解决 action tokenization 的压缩效率问题，而是在处理一个更结构性的缺口：当前 VLA 多数把 observation-language-state 直接映射到 action chunk，缺少一个 motor-level 的未来意图层。对于短 horizon manipulation，这种端到端直接预测可以靠局部视觉和 demonstration prior 撑住；但在长时序、多阶段任务中，早期动作必须服务于尚未发生的后续阶段，局部最优动作和全局任务进展之间会出现错配。

真正困难点在于：语言给的是 goal semantics，视觉给的是当前 scene grounding，而动作需要的是连续时空结构。直接生成动作时，模型需要同时完成 task decomposition、object-target binding、approach direction、gripper timing、trajectory shaping。以前的 textual / visual / spatial CoT 试图引入中间推理，但它们的中间表征仍不在控制流形上，执行分支仍要把抽象提示翻译成 motor commands。关键矛盾是：高层语义太远，低层动作太短视，中间缺一个可执行但又足够粗的运动意图表示。

Motivation

作者的动机可以概括为：VLA 需要 CoT，但 embodied CoT 不应该默认是语言或图像。文本 rationale 对机器人控制而言约束太弱；visual subgoal 虽然有空间结构，但通常代价高，并且从视觉前缀到动作仍有一层非平凡翻译；3D / spatial reasoning 更接近几何，但未必编码时间结构和 gripper/motion coupling。

作者抓住的缺口是：中间计划应该表达“接下来大概要怎么动”，而不是“任务是什么意思”或“未来画面可能是什么”。如果 intermediate representation 本身就是由未来动作轨迹压缩而来，它天然包含方向、阶段、时序和 gripper 状态等控制相关信息。于是 action-token space 被当作 reasoning medium：比 raw action 更抽象，比 text/image 更接近 execution。

Core Idea

核心思想很简单但有价值：把 VLA 的输出序列从单纯的 executable action tokens 改为 coarse plan tokens + executable action tokens。模型先 autoregressively 预测一个由长未来轨迹压缩得到的 action-token plan，再在该 plan 条件下生成真正执行的短动作 token。推理时 plan 不被机器人执行，只作为内部上下文影响执行 token 分布。

这改变了建模方式：直接 VLA 是 p(action | obs, lang, state)，Coarse-to-Control 实际变成 p(plan | context) p(action | context, plan)。这个 factorization 强迫模型先形成低频未来结构，再做局部控制细化。它引入的 inductive bias 是 coarse-to-fine temporal abstraction：先锁定阶段级运动方向和目标关系，再生成高频控制细节。

和 prior 的本质区别在于 reasoning medium。文本/视觉 CoT 增加的是 semantic/perceptual intermediate computation；这里增加的是 action-manifold 上的 intermediate computation。它不是把 planner 接到 controller 前面，而是把 planning token 作为 autoregressive suffix 的前半段，避免显式 planner-controller interface，同时增加了一点 test-time compute 和 latent structure。

Method

方法的关键不是模块堆叠，而是三个机制。

第一，coarse future action construction。作者从 demonstration 中取较长未来动作窗口，把 motion 维度按 chunk 求和，把 gripper 取 chunk 末状态，得到 K 步 coarse trajectory。这个操作的作用是去掉高频控制噪声，保留阶段级位移、方向和开合时机。它解决的是短 action chunk 看不到远期任务阶段的问题。

第二，joint-mode action tokenizer。计划分支编码 coarse long-horizon trajectory，执行分支编码 short executable action chunk，但二者共享 residual-VQ codebook，并通过 mode conditioning 区分粒度。这个设计的意义是让 plan token 和 exec token 落在同一个 action-semantic vocabulary 里，减少“计划语言”和“控制语言”之间的翻译损耗。Separate tokenizer ablation 下降，说明共享空间确实不是装饰。

第三，plan-execute autoregressive training。VLA 被训练去预测拼接序列 [z_plan, z_exec]，执行 token 条件化于已经生成的 plan token。这个机制把 planning 变成 teacher-forced supervised latent prefix，而不是外部搜索或显式 hierarchical policy。它的核心变化是信息流顺序：未来结构先被写入 token context，再由执行分支读取。

需要注意的是，方法并没有引入真正的 closed-loop symbolic planner 或 search；它仍是 imitation learning 下的 next-token prediction，只是监督目标被重排成 coarse-to-fine。

Key Insight / Why It Works

最可能有效的部分是 representation alignment + temporal abstraction，而不是“CoT”这个表述本身。

第一，coarse plan 提供了一个低频未来轨迹先验。对于长时序 manipulation，当前观测往往不足以唯一决定短期动作，因为多个局部动作都可行，但只有一部分通向正确后续阶段。粗计划把未来 demonstration structure 作为显式监督引入，使模型在生成 executable token 前先 disambiguate 任务阶段。这本质上是 latent structure / curriculum：先学长视野低频目标，再学短视野高频控制。

第二，共享 action vocabulary 是关键。若 plan token 属于独立 vocabulary，它对 execution branch 只是一个 arbitrary latent hint；共享 codebook 后，plan token 的身份更可能对应某类可执行运动模式，条件化信号更直接。这是 representation alignment，而不是单纯增加上下文长度。

第三，方法增加了 test-time compute，但 compute 很轻量：多生成一段 action-space prefix。相比 visual CoT 的长图像 token 前缀，它更短、更贴近控制目标，因此更 scalable。这里的 scaling 优势不是模型规模，而是 intermediate token budget 的有效性。

第四，增益也可能部分来自 hidden supervision：plan tokens 是用未来 ground-truth actions 构造的监督信号，相当于给模型额外训练一个未来轨迹预测任务。这不是坏事，但要承认它不是无监督涌现 planning，而是 demonstration-conditioned future trajectory distillation。所谓 reasoning 更接近“从当前状态检索/生成一个可能的 demonstration-like future motion sketch”，而不是显式因果推理或搜索。

第五，部分 benchmark 增益可能受数据覆盖影响。LIBERO 和 Bridge/real-world tokenizer pretraining mixture 与评测任务结构有相当重合，action-token plan 很可能学到常见 manipulation phase templates。文中 transfer probe 尝试控制 tokenizer coverage，但仍不能完全排除 implicit memorization。若换成组合性更强、目标布局分布外、需要中途重新规划的任务，plan token 是否仍有效文中未充分说明。

Relation To Prior Work

这篇最接近三条线：action-tokenized VLA、embodied CoT、hierarchical imitation / trajectory sketching。

相对于 RT-1/RT-2/OpenVLA/π0/FAST 类直接 action generation，它的新增信息不是更好的 backbone，而是把 action suffix 结构化成 plan-before-execute。它把 action token 从“压缩控制输出”提升为“中间推理介质”。

相对于 textual CoT 和 visual CoT，它的本质差异是中间表征的坐标系不同。文本/图像 CoT 解决的是理解或预测未来感知，仍需映射到控制；Coarse-to-Control 直接在 action manifold 上做 intermediate computation，因此更控制对齐，也更省 token。

相对于 Action CoT / trajectory reasoning，它的实质创新在 joint plan-execute tokenizer：不是简单输出动作解释或轨迹 token，而是让 coarse plan 和 executable action 共享 token vocabulary。这一点使得 plan 不是额外模态，而是 execution token distribution 的同空间先验。

看似新的部分中，coarse-to-fine、未来轨迹压缩、hierarchical control 都是老思想；真正的新组合是把这些思想嵌入 autoregressive VLA 的离散 action-token suffix，并把 CoT 从语言空间搬到控制空间。

Dataset / Evaluation

评估覆盖了 LIBERO、SimplerEnv-WidowX 和四个真实机器人任务，基本能测试作者关于长时序、多阶段任务的核心 claim。尤其真实任务每类 50 demos、20 rollouts，并报告 subtask progress，比单纯仿真表格更有说服力。planning horizon ablation 和 tokenizer sharing ablation 也直接对准机制假设。

但 evaluation 也有明显上限。LIBERO 上整体已经接近饱和，绝对差距不大，容易被训练 recipe、初始化 checkpoint、tokenizer pretraining 数据、评估随机性影响。SimplerEnv 的任务数有限，且真实到仿真的 protocol 对数据和动作 tokenizer 的偏好较强。真实世界任务数量少、场景变化有限，更多证明了在固定 manipulation family 内的 robustness，而不是开放泛化。

总体来说，实验支持“action-token plan 对长 horizon 有帮助”，但还不足以证明它具备一般意义上的 planning 或 compositional generalization。更强的验证应包括分布外物体布局、不可见中间状态、需要在线修改计划、以及 plan token 干预/反事实分析。

Limitation

最核心 limitation 是：这个 planner 没有显式世界模型、没有搜索、没有不确定性表达，也没有长期状态维护。它只是当前观测条件下生成一个粗未来动作 token prefix。若环境中途偏离 demonstration manifold，模型并不知道 plan 是否失效，只能在下一次 replanning 时重新生成；这与经典 planning 的可验证性和可修正性差距很大。

第二，方法强依赖 demonstration future actions 的可压缩性。如果任务存在多模态策略、长时间等待、接触动力学复杂、或未来轨迹对微小状态差异高度敏感，简单 chunk-sum coarse plan 可能丢失关键结构，甚至误导执行分支。

第三，joint tokenizer 的上限不清楚。共享 vocabulary 有助于 alignment，但 coarse motion 和 executable motion 的统计分布不同，强行共享可能带来 codebook capacity 竞争。文中只给出 overlap mass 约 0.16，说明共享不是完全统一；如何更有机地建模多粒度 action semantics 仍未解决。

第四，增益归因仍不完全干净。它同时引入了更长 horizon supervision、更多 autoregressive tokens、额外 auxiliary task、共享 tokenizer、以及可能更好的 token prefix regularization。虽然 ablation 部分拆了一些因素，但还不足以精确区分是 planning、curriculum、representation alignment，还是 simply richer supervision。

第五，所谓 reasoning 可能主要是 retrieval-like behavior。对于熟悉的 manipulation templates，plan token 可能只是匹配训练集中相似轨迹的粗 sketch；一旦进入真正组合式任务，是否能产生新计划文中未充分说明。

Takeaway

• 1. 对 VLA 来说，中间推理未必应该是语言或视觉；更自然的方向可能是 control-aligned latent reasoning，即在动作空间或 skill space 中进行 CoT。
• 2. Action tokenization 的价值不只在压缩连续控制，还可以成为 hierarchical policy 的接口。
• 未来 tokenizers 可能需要同时服务 reconstruction、planning、skill abstraction 和 controllability，而不是只优化 action fidelity。
• 3. Coarse-to-fine autoregressive factorization 是一个值得迁移的模式：先预测低频长视野结构，再预测高频局部输出。

一句话总结

Coarse-to-Control 是把 VLA 的 CoT 从语言/视觉空间迁移到共享 action-token 空间的一种 coarse-to-fine imitation 方法，其实质贡献是用控制对齐的未来轨迹前缀为执行动作提供长时序结构先验。