精读笔记

Problem Setting

这篇论文实际解决的是人形机器人在结构化地形上负载行走时的“落脚质量—身体稳定—载荷顺应”耦合问题。真正困难点不是上台阶本身，而是台阶边缘、坡面、过高 riser 和载荷力矩会共同压缩接触稳定裕度。以前的 perceptive RL 通常把地形当成高度输入，希望策略自己学出可踩区域；model-based footstep planner 虽然能选点，但往往没有成为 RL 训练中的持续监督信号。关键矛盾是：落脚需要显式几何/动力学判断，而部署策略又必须从有限感知中快速反应。

Motivation

已有路线缺的是对“接触质量”的显式建模。高度图告诉机器人哪里高，但不告诉它脚底是否会跨在边缘、坡度是否导致侧向冲击、当前速度下这个高度是否可达。载荷任务进一步放大了这个缺口，因为同样的落脚误差在更大质量或更大力矩下会变成更高 GRF 和更差 capture recovery。作者的核心观察是：结构化地形上的失败往往不是因为没有看到障碍，而是因为没有把地形几何转化为和足底接触、DCM 稳定性、运动可达性一致的训练信号。

Core Idea

TACT-ful 的本质是把 terrain affordance 从隐式视觉特征改成显式、多通道、物理可解释的 cost field，并让这个 cost field 同时支配 foothold planner 和 policy reward。这样做改变了信息流：planner 不再只是外部生成 landing target，而是把接触质量判断作为 dense supervision 注入 RL，使策略在训练中对齐“好的落脚点”而不是仅靠稀疏成功/失败反馈。

第二个核心思想是把 payload robustness 建模成 wrench-induced compliance，而不是简单质量随机化。虚拟外载不只改变重量，还通过 attachment point 产生力矩；reward 也不再强制机器人维持刚性名义姿态，而是允许骨盆高度和躯干姿态向 wrench-consistent target 偏移。这个 inductive bias 很关键：它把抗扰从“硬拉回平衡”改成“顺应后再恢复”，更接近负载行走中的真实控制需求。

Method

关键机制可以压缩为四点。第一，多通道 terrain cost 解决“高度不等于可踩”的问题：flatness 针对跨边缘接触，steepness 针对坡/竖直边缘冲击，height feasibility 针对当前速度下的运动学/动力学可达性，climb bonus 防止 planner 过度保守而不上台阶。第二，DCM foothold planner 解决短时 capturability 与落脚点选择的耦合，使 foothold 不是纯视觉分类，而是和 divergent mode interception 绑定。

第三，Bézier swing 与 tangent-guided orientation 解决从目标点到脚底接触姿态的执行问题；这部分更像工程上必要的 impedance between planner and actuator，避免脚尖撞 riser 或以错误姿态落在 tread 上。第四，virtual wrench compliance training 解决载荷扰动的结构化覆盖问题：通过 sampled attachment point 同时产生 force 和 moment，并用 compliance target 替代 rigid pose penalty，让策略学习下肢层面的被动/主动顺应。普通 PPO、depth encoder、asymmetric critic 等不是论文的核心创新，主要是承载这些 inductive biases 的训练框架。

Key Insight / Why It Works

最可能真正有效的是 affordance reward 与 DCM planner 的共享 cost，而不是 adaptive gait。实验里 adaptive gait 单独使用在 hard terrain 上反而更差，说明调步频如果没有落脚质量约束，会把 stance/swing timing 改坏。这篇的主要增益来自 better inductive bias 和 representation alignment：把“脚该踩哪里”的几何判断显式化，并让 actor-critic 在训练时反复对齐这个判断。

flatness/steepness/height-feasibility 的组合不是深层理论创新，但非常贴合结构化地形的 failure modes。它有效的原因是减少了 RL 需要从像素和失败信号中反推出的隐变量：接触平面性、边缘风险、动态可达高度都被手工暴露出来。这里的“reasoning”更像物理先验驱动的局部检索/打分，而不是长期规划或抽象推理。

compliance 部分的有效性也更像 data coverage + correct disturbance parameterization。相比随机推力或质量扰动，wrench sampling 覆盖了 moment-dominated payload，这是 wrist load 上收益更明显的原因。但它不是通用 payload understanding；当 centered load 到 20kg 附近收益消失，说明策略学到的是训练分布内的顺应模式，而不是显式载荷估计或可外推的力学模型。

Bézier swing、tangent orientation、frequency head 可能是重要辅助，但不是主要 scientific contribution。尤其 tangent orientation 在 stairs 上合理，在 slopes 上文中自己承认会失败；这说明它是针对离散台阶结构的工程 inductive bias，而不是通用表面接触策略。

Relation To Prior Work

最接近的是 FastStair / DCM-based foothold reward 与 perceptive humanoid locomotion 的视觉 RL 系列。TACT-ful 的本质差异在于：它不是只用单通道高度或 planner target，而是把接触质量拆成多个物理含义明确的 cost，并同时用于 planner search 和 reward shaping。相比 teacher-student 或 privileged-to-depth distillation 路线，它没有强调表示蒸馏，而是强调 planner-derived affordance signal 对 policy optimization 的塑形。

和 model-based footstep planning 相比，它没有追求全局最优或复杂约束求解，而是把局部 DCM search GPU 化、可并行化，并嵌入 RL loop。和纯端到端 perceptive RL 相比，它牺牲了一些“纯学习”美感，换来更强的 contact inductive bias。和 payload-aware locomotion / RMA / impedance tracking 相比，它不显式估计 payload，也没有独立 impedance controller，而是通过 wrench-aware reward 让单一 locomotion policy 内化顺应行为。实质创新是 terrain affordance shaping 与 payload compliance training 的统一；很多组件本身是已有思想的重组。

Dataset / Evaluation

评估主要在 MuJoCo 中进行，训练地形包括 stairs、slopes、stepping stones、rough height fields，hard sweep 用更高 riser 做 OOD 检验。这个设置能较好验证“结构化地形落脚质量”这一 claim，尤其 ablation 显示 TACT channel 对 foot-target alignment 和 success 有直接作用。payload evaluation 覆盖 centered pelvis load 和 wrist moment load，能支持“wrench sampling 对 moment-dominated load 有帮助”的说法。

但 evaluation 没有充分支持真实部署鲁棒性。所有定量 ablation 都是仿真，真机只是 qualitative demonstration；没有真实楼梯上的 success rate、GRF、失败统计，也没有 localization drift、动态载荷、低摩擦或可变形地形。hard terrain 上成功率本身不高，说明方法在超出训练 riser 后仍然脆弱。跨 embodiment 的附录结果有价值，但仍在仿真，且配置变化之外的传感、执行器、接触模型差异未充分说明。

Limitation

最大的隐含前提是 planner 的 elevation map 足够准。TACT-ful 把落脚判断建立在局部高度场上，如果 odometry 或 depth-to-map registration 漂移，cost field 会系统性误导 policy；文中没有给出可靠 fallback。第二个前提是地形可由刚性几何解释：flatness、steepness、height feasibility 对台阶很有效，但对软地、湿滑地、碎石形变或移动障碍并不成立。

泛化上限也比较清楚。terrain cost 是手工设计且权重手调，单个 channel 消融不敏感说明存在冗余，增益来源不完全可分。payload compliance 的上限由 sampled wrench distribution 和仅下肢控制决定；centered heavy load 下收益几乎消失，说明没有真正的 load inference。所谓 platform-agnostic 也主要来自 sole-geometry cost 的可移植性，不等于无需调参的跨机器人泛化。

此外，方法可能把一部分问题从 policy learning 转移到 planner/cost engineering。它让 RL 更容易，但需要人为定义哪些地形属性重要、如何加权、如何在速度下调整可达高度。长期规划能力也没有形成：DCM planner 是局部 foothold selection，不处理多步路线、遮挡后地形、侧向绕行或任务级策略。

Takeaway

最值得记住的是：结构化地形 locomotion 里，“高度感知”不够，必须把足底接触质量显式变成训练信号；planner 如果只在外部给 target，价值有限，真正有用的是让 planner 的 affordance 判断进入 reward/critic 对齐；payload robustness 不应只靠 mass randomization，wrench distribution 和 compliance target 是更合理的训练变量；未来更值得做的是把这些手工 cost 学成可校准、可迁移、带不确定性的 contact affordance model，并和真实传感误差闭环验证。

一句话总结

TACT-ful 是一篇把局部 DCM 落脚规划、物理接触 affordance reward 和载荷顺应训练整合起来的人形感知运动论文，真正贡献在于用结构化 inductive bias 降低端到端 RL 对地形和载荷耦合关系的学习难度。