精读笔记

Problem Setting

[Data and Learning Where it Matters for Contact-Rich Manipulation]（arXiv preprint / 2026）

这篇论文真正处理的是高精度接触操作中的数据分配问题，而不是一般意义上的 robot learning policy design。任务表面上是 shelf stocking、Lego stacking、fan cover assembly 等真机操作；实际困难是最后几毫米/几度的接触段：pose estimation 有残余误差，物体会形变，接触状态不可完全由视觉判断，力控和位置控需要同时工作。

以前方法卡住的地方在于端到端策略把整条轨迹当成同质序列来学习。这样模型在自由空间运动上浪费容量和数据，同时在真正决定成败的 contact-rich segment 上覆盖不足。很多 baseline 的 partial success 很高，说明 grasp、transport、coarse placement 并不是瓶颈；full success 低，说明失败集中在最终插入/装配闭合。关键矛盾是：全任务需要长时序和语义泛化，但真正高精度成败由一个局部、短时、接触主导的子问题决定。

Motivation

作者反对的不是 learning，而是无结构地收集和使用 robot data。大规模端到端路线默认“更多数据 + 更大模型”能覆盖长任务中的所有阶段，但在 contact-rich manipulation 里，数据需求高度不均匀：自由空间段可以由 pose estimation 和 motion planning 解决，接触段才需要高密度交互数据。

核心观察是：现有方法缺的不是又一个通用 visuomotor backbone，而是知道在哪里学习、在哪里不要学习。teleoperation 数据不仅贵，还受操作者技能影响；online RL 又在真机上不稳定且需要人工干预。关键缺口是一个能在真实硬件上自动产生接触段多样失败/成功数据、并把这部分能力接回完整任务执行的机制。

Core Idea

论文的核心思想是把 contact-rich manipulation 重新建模为一个组合系统：全局几何和自由空间运动交给显式 perception/planning，局部接触补偿交给 learned policy。这个建模改变了信息流：端到端策略不再从整图直接输出全任务动作，而是 planner 先把状态压到接触附近，learned policy 只处理 pose uncertainty、接触力反馈和局部视觉造成的 residual problem。

这和 prior 的本质区别不是“模块化”本身，而是数据预算和学习责任的重分配。过去的 modular policies 往往是多个 learned skills 的组合；这里更激进：简单段完全不使用 robot-specific data，困难段集中采集。它引入的 inductive bias 是接触失败局部化、误差可在 critical segment 内被恢复。理论直觉上，这会降低学习问题的 horizon、缩小 visual distribution、提高 contact state coverage，因此比全任务端到端更 data-efficient，也更容易在 scene-level OOD 下保持稳定。

Method

方法的必要机制可以压缩为四个。

第一，单次示教只用于定义任务骨架和到达 critical segment 的路径，而不是作为主要 imitation 数据源。它解决的是“如何自动把机器人带到有价值的数据采集区域”，核心变化是示教从行为监督变成数据采集初始化。

第二，critical segment 内采用 mixed greedy-random exploration。greedy action 保证有足够成功样本，random action 扩展局部接触状态覆盖。这里的关键不是随机探索本身，而是用一个有限安全区域把随机性限制在高价值状态分布内，形成接触段 curriculum。

第三，offline RL 从包含成功和失败的局部交互数据中学习策略。相比 imitation，它能利用非最优和失败轨迹；相比 online RL，它避免真机训练时的高方差和持续人工介入。SAC、critic ensemble、layer norm 更像稳定训练的工程选择，不是概念贡献。

第四，部署时使用接触事件触发 learned policy，用 Q-function 判断成功并退出。这个机制把 Q-function 从训练对象复用为 success detector，减少额外 reward classifier 需求。它解决的是 learned segment 与 planned segment 的边界问题，但阈值仍是人工调参成分。

Key Insight / Why It Works

最关键的有效性来源是 data coverage 被放在了真正高曲率的状态空间里。contact-rich insertion 的状态转移对毫米级误差、摩擦、形变和接触几何高度敏感；端到端数据中这些状态只占轨迹很小部分，所以即使总数据量相近，关键段覆盖也不足。本文不是简单减少数据，而是改变采样分布，把数据密度集中到 failure manifold 附近。

第二个有效来源是 horizon collapse。planner 负责把任务带到接触附近，RL 只学短时 residual correction。短 horizon 让 sparse reward 可用，也让 Q-function 成为相对可靠的 success classifier。如果把同样的 sparse reward 放到整条任务上，学习难度会完全不同。

第三个来源是局部感知分布更窄。策略看到的是 wrist camera crop + F/T + robot state，而不是全场景语义。OOD distractor 如果不进入局部接触视野，就不会显著影响策略。这不是开放世界泛化，而是通过结构化 pipeline 把不相关变化隔离掉。

第四个来源是 hybrid force-position control。论文把它作为控制细节呈现，但它可能贡献很大：对于插入/装配，低层控制先验直接改变可学习 dynamics，使策略不必从数据中学出基本 compliance。这里增益来源不清，可能有相当部分来自控制先验而非 offline RL。

我认为真正贡献是“targeted data + task decomposition”的系统归因，而不是新算法。探索策略、offline SAC、Q ensemble、DINO embedding 都不是新东西；有效性更像 better inductive bias + local data scaling + curriculum，而不是 representation breakthrough。文中没有证据表明 policy 学到了可组合的长期 reasoning；它更像在局部接触状态空间内做 robust residual control/retrieval。

Relation To Prior Work

它最接近三条路线：end-to-end visuomotor imitation/VLA，contact-rich assembly RL，以及 modular manipulation pipelines。和 DiTFlow、Diffusion Policy、π0.5 这类路线相比，它的差异不是模型容量，而是拒绝让一个策略承担整条任务。和 HIL-SERL 相比，它不做在线人机交互式强化学习，而是在真实硬件上自动生成离线接触数据。和传统 pose estimation + motion planning 相比，它承认几何 pipeline 在最终接触闭合处不够，需要 learned residual correction。

看似新的部分很多其实是已有思想重组：单次示教初始化、局部随机探索、force-position control、Q-based termination、planner-policy chaining 都有前史。实质创新在于把这些组件组织成一个清晰的数据经济学观点：robot data 应该只花在 analytic/planning 无法可靠解决的 segment 上。这属于“structured robot learning / hybrid planning-learning / data-centric manipulation”的谱系，而不是 foundation model scaling 路线。

Dataset / Evaluation

评估使用四个真实世界任务，覆盖纸盒形变、Lego 插合、工业塑料件装配和更困难 distractor 设置；这比纯仿真或单一 peg insertion 更有说服力。它确实验证了一个核心 claim：在这些可分段任务中，局部接触学习 + planning 比端到端策略更稳、更省数据。

但 evaluation 的边界也很清楚。任务都存在相对明确的 free-space 到 contact-rich transition，且物体/场景可以在数据采集阶段固定或用 fixture 保持。OOD 主要是 distractor、背景、物体位置变化，尚不能证明跨类别、跨几何机制或语义复杂任务泛化。fan cover hard 中使用 same policy 取得好结果很有价值，但也可能因为 critical contact geometry 未发生本质变化。

benchmark 支持“端到端在最终接触段失败”这一诊断，因为 partial success 与 full success 差距很大；但不完全支持“方法一般可扩展到 contact-rich manipulation”这个更大命题。评估更像证明在一类工业式、可定位、可规划、局部接触闭合任务上，这种结构化数据分配非常有效。

Limitation

最大前提是任务可被切成清晰阶段。对于 cloth manipulation、deformable object rearrangement、持续接触推拉、双手协作等边界模糊任务，critical segment 不一定能用 contact threshold 或 pose uncertainty 定义，本文机制会变弱。

第二，方法把一部分难题转移给 perception/planning 和硬件精度。pose estimation 必须足够好到把机器人带入 recoverable basin；硬件 waypoint tracking 必须稳定；接触触发必须可靠。端到端方法可以在大数据下吸收一部分系统误差，而这里显式 pipeline 的每个接口都有 calibration burden。

第三，所谓 OOD 泛化主要来自局部化和分解，不是策略获得了强泛化能力。若 distractor 进入 wrist crop、接触几何变化、材料摩擦变化、插入容差变化，policy 仍可能 OOD。文中也承认近距离 distractor 会失败。

第四，增益归因不够干净。autonomous data collection、局部 crop、F/T sensing、hybrid force-position control、planner、Q termination 都同时引入。缺少更强 ablation 去分离哪些是必要条件，哪些只是 engineering。核心能力可能主要来自数据覆盖和控制先验。

第五，scaling 上限取决于每个新任务能否快速定义安全探索区域、成功条件和 critical segment。虽然比 teleoperation 省力，但仍不是零人力数据生成；fixtures、示教、阈值、Q success threshold 都是隐含 supervision。

Takeaway

• 1. 对高精度接触操作，最重要的问题可能不是“更强端到端模型”，而是“数据应该采在什么状态分布上”。
• 2. 把学习限制在 planner 无法处理的 residual contact segment，是一种很强也很实用的 inductive bias；它牺牲端到端优雅性，换来数据效率和可靠性。
• 3. partial success/full success gap 是诊断 contact-rich manipulation 方法的好工具：如果 partial 很高而 full 很低，继续扩大全任务 imitation 数据未必是最高效路线。
• 4. 未来真正值得做的是自动发现 critical segment、学习 switching/termination、跨几何复用局部接触策略，而不是单纯把更大的 VLA 接到同样的数据分布上。

一句话总结

这篇论文在 contact-rich manipulation 中把问题从“端到端学完整任务”推进到“结构化地只在关键接触段花机器人数据”，本质贡献是数据分布和任务分解层面的 inductive bias，而不是新的策略学习算法。