精读笔记

Problem Setting

论文解决的是长时程 human-centered robotic assistance 中的 interaction scheduling 问题：机器人不仅要完成任务，还要让用户维持在其偏好的参与水平，同时不超过可接受 workload。真正困难点是三目标之间不是简单一致的：更多 query 通常提高 engagement 和任务鲁棒性，但也增加 workload；更少 query 降低负担，但会把用户变成 passive observer。

以前的 HITL 方法卡在 robot-centric formulation：用户输入只在 uncertainty/failure 时被调用，或者最多作为 workload-aware querying 的成本项被节制。这样的方法隐含假设是“少打扰用户就是好”，但在 assistive feeding 这类场景中，用户可能并不想完全自动化，而是希望有可控、可感知的参与。论文的关键矛盾因此不是 autonomy vs. success，而是 autonomy vs. engagement vs. burden。

Motivation

已有路线缺的是对“交互体验本身”的在线优化。failure recovery 关注的是机器人什么时候需要人；workload-aware HITL 关注的是机器人什么时候不该打扰人；但两者都没有问：用户什么时候希望参与、参与多少才合适。

作者的核心观察是，长时程辅助任务中 engagement 会随时间衰减，而用户的 sense of agency 很大程度来自持续但不过载的参与机会。单纯等待失败再问人，会在机器人能力较强时进一步减少用户参与；而 always query 又会快速变成负担。因此需要一个把 engagement 当作可控状态而非评价指标的 planner。这是论文真正的缺口定位。

Core Idea

核心思想是把 human-in-the-loop 从“故障恢复机制”改写成“用户状态调节机制”。E-MPC 维护一个 engagement state，并假设不同 query 类型会产生不同 engagement impulse，而 query 间隔导致 engagement 衰减。MPC 在滚动时域中选择 query action，使 engagement 追踪用户指定目标，同时压制 workload violation，并在任务风险过高时强制请求 task-assistive input。

这个建模引入了一个新的 inductive bias：交互不是越少越好，也不是越多越好，而是应该像控制系统一样围绕用户偏好进行 set-point regulation。和 prior 的本质区别不在优化器，而在目标变量从 robot uncertainty 扩展到了 user engagement；信息流也从“robot detects failure → asks human”变成“robot predicts user state/task state → proactively chooses interaction”。这使框架理论上更 general：只要能定义 skill confidence、query set、query impact 和 workload model，就能迁移到其他长时程 HRI 任务。

Method

1. Engagement dynamics：解决“参与感不是静态偏好，而是会随交互历史变化”的问题。作者用指数衰减的 prior engagement 加上 query-induced impulse 表示 engagement。这个模型很简单，但它给 MPC 提供了可预测的状态演化，使 engagement 能进入控制闭环。核心变化是把主观体验变量转成可规划状态。

2. Workload model：解决 engagement maximization 退化成频繁 query 的问题。沿用线性历史 workload 模型，本质上是给 query sequence 加一个累积负担记忆。它不是创新点，但对避免 always-query 行为是必要约束。

3. Task success constraint：解决“为了体验牺牲任务”的问题。低 confidence 且 retry 用尽时，action space 被限制到 task-assistive queries。这个机制把传统 failure recovery 嵌入 engagement-aware planner，保证 E-MPC 不是纯 social interaction planner。

4. Query type decomposition：这是方法中最有意思的机制。task-assistive query 和 engagement-only query 被放进同一个 action space，但对任务成功的作用不同、对 engagement/workload 的代价不同。这样 planner 可以用低负担 auxiliary query 维持 engagement，而不必总是调用高负担 task-assistive input。

5. Receding-horizon MPC：主要作用是处理长时程任务中用户目标、skill confidence、retry 状态的在线变化。MPC 本身并不新，但在这里提供了 test-time planning over interaction actions 的结构。

Key Insight / Why It Works

方法有效的核心原因不是 MPC 技术复杂，而是 objective re-specification：它显式优化 prior 方法完全忽略的变量。对于中高 desired engagement 用户，baseline 即使 task success 很好，也会系统性 under-query，因为它们只在 uncertainty 或 workload trade-off 下 query；E-MPC 则会主动制造参与机会，因此主观体验自然提升。

最可能的核心贡献是把 engagement 作为 set-point tracking problem，而不是作为越高越好的 reward。这个选择很关键：如果只是 maximize engagement，会得到 always query；如果只 minimize workload，会得到 never/rare query；tracking formulation 才能表达不同用户 persona。这是一个可迁移 insight。

第二个有效来源是 action space 中加入 engagement-only / fake queries。仿真和真机中大量收益很可能来自这些低 workload、高 engagement 的 auxiliary interactions。严格说，这不是机器人能力提升，而是 interaction design 给 planner 提供了更好的 control authority。没有这类 action，E-MPC 只能用 task-assistive query 调节 engagement，成本高且粗糙。

第三个来源是 test-time compute：MPC 在每一步根据当前 confidence、workload history、engagement estimate 重新规划，比固定 periodic/random schedule 更能适应局部状态。这属于在线 planning 的收益，不是 learning 或 representation 的收益。

需要直说的是，engagement dynamics 本身很可能过于简化。指数衰减 + query impact 的形式更像一个可控启发式，而不是经过强验证的人类状态模型。用户研究支持它在这个任务中能改善 self-report，但还不足以证明该 latent state 真正对应 engagement。增益归因也不完全干净：提升可能同时来自更多互动、更高 agency、novelty effect、fake query 设计以及 baseline 过于保守。

Relation To Prior Work

最接近的是 uncertainty-triggered HITL、workload-aware querying 和 shared autonomy。相对 uncertainty-triggered HITL，这篇的差异是 query 不再只由 robot uncertainty 触发，而由 user-state regulation 触发。相对 workload-aware contextual bandit，它新增了 engagement target 和 engagement dynamics，因此不是简单调 query threshold。相对 shared autonomy，它不在低层连续控制上融合人机输入，而是在高层离散 interaction planning 上决定问不问、问什么。

看似新的部分中，MPC、workload penalty、confidence-based asking 都是已有思想重组；真正新增的信息是把 engagement 作为可控 latent state 纳入 HITL 决策，并允许 non-assistive interactions 作为控制输入。这让它更像是 assistive robotics 中的 user-state-aware interaction control，而不是传统 robot learning HITL。

它属于一条从 robot-centric autonomy 向 user-centered autonomy 调整的技术谱系：早期目标是少失败，后来是少打扰，现在这里进一步变成按用户偏好调节参与度。

Dataset / Evaluation

评估分两层：仿真用于验证优化框架在已知 engagement/workload model 下是否能达到目标；真机用户研究用于验证这种模型化交互是否改善主观体验。任务集中在 robot-assisted bite acquisition，是真实物理机器人场景，但覆盖范围较窄，不是跨多任务验证。

仿真基本验证了 planner claim：在给定模型正确的前提下，E-MPC 确实能比 confidence-only、workload-aware、random/periodic 更好地平衡 engagement、workload、success。但这部分不能证明 engagement model 对真实人的有效性，因为指标本身由同一模型生成。

真机实验更有价值：10 名被试、模拟 mobility limitation、真实机器人取食，对比最强 baseline WorkloadAware。结果支持“显式 engagement-aware querying 提升主观 engagement、interaction satisfaction 和 agency”的 claim，同时没有明显损害 task success/workload。但 limitation 也明显：样本小、参与者不是目标人群、短时实验容易受 novelty 和 demand characteristics 影响；而且 baseline 没有 engagement-oriented fake queries，比较中 action space/interaction design 可能并不完全公平。

总体看，evaluation 支持概念有效性，但还没有证明长期部署、真实残障用户、多任务泛化或 engagement dynamics 的普适性。

Limitation

1. Engagement model 的成立前提很强。论文假设 engagement 可由 query frequency 和 response difficulty 主导，并可通过一个标量状态表示。这忽略了内容意义、任务阶段、用户信任、疲劳、成功/失败历史、界面透明度等因素。模型能用，不等于解释正确。

2. Calibration 是隐含瓶颈。用户需要预先估计某类 query 长期出现时的 engagement impact，并给出 desired engagement 和 workload threshold。这些 self-report 在真实部署中可能不稳定，而且用户往往不知道自己长期会喜欢什么。文中未充分说明 calibration noise 对控制稳定性的影响。

3. Fake queries 是双刃剑。它们显著提升 satisfaction，但也可能制造一种虚假的参与感。如果用户以为这些 query 会影响机器人行为，而实际上不会，就涉及 transparency/deception。该机制的伦理和长期接受度没有被充分验证。

4. 泛化目前主要是 formulation-level，而非 evidence-level。作者说只需替换 skill library、query set、confidence model 即可迁移，但不同任务中的 engagement dynamics 和 workload cost 可能完全不同。所谓 generalizable framework 仍依赖大量 task-specific interaction design。

5. 增益归因不清。E-MPC 的优势可能来自显式 engagement tracking，也可能来自引入低成本 MCQ、更多用户控制感、或者 baseline 没有同等丰富的 query action。文中 ablation 说明 fake queries 有用，但没有完全拆清“planner 的贡献”和“interaction affordance 的贡献”。

6. Agency 没有被建模。论文强调 agency，但只把 engagement 和 workload 放入状态，agency 是事后 self-report。若未来任务中 engagement 与 agency 不一致，例如用户频繁回答无效问题但并不觉得有控制权，当前框架会失效。

Takeaway

• 1. HITL 机器人不应只问“机器人什么时候需要人”，还应问“用户什么时候需要被纳入决策”。
• 这是这篇论文最值得迁移的视角。
• 2. 把 engagement 做成 set-point tracking 比 maximize engagement 更合理；用户体验变量往往不是单调目标，而是个体化目标区间。
• 3. Interaction action space 的设计可能比优化算法更重要。

一句话总结

这篇论文把 human-in-the-loop 机器人从 failure-triggered assistance 推向 user-state regulation，真正贡献是将 engagement 作为可控目标纳入在线 interaction planning，但其有效性目前仍高度依赖手工 engagement 模型、校准和精心设计的低负担交互。