精读笔记

Problem Setting

这篇论文处理的不是一般意义上的 bimanual mobile manipulation policy learning，而是 diffusion policy 中 action coordinate frame 选择造成的建模负担。对于同一段双臂移动操作，局部抓取在末端执行器 frame 下可能接近 invariant，移动底盘、保持物体竖直、双臂协同则可能在 base-aligned frame 下更简单。固定一个 frame 的 DP 实际上把多个几何结构不同的子问题压进同一个 action distribution，让 denoiser 去学习本可由坐标变换消掉的方差。

关键矛盾是：任务不是全程偏好某一个 frame，而是不同阶段偏好不同 frame。以前方法通常把 frame transforms 当作 observation 或 proprioception 输入，但 action denoising 仍发生在单一表示中；这等价于让网络自己在 latent 中学会坐标变换和分布简化。论文的判断是，这个负担不应留给 denoiser，而应作为 action-space inductive bias 显式注入。

Motivation

已有路线不够的地方在于，它们把 frame 当成条件信息，而不是把 frame 当成动作分布的参数化选择。对于 diffusion policy，denoising 的难度直接受 noisy action 所在坐标系影响；如果 frame 选错，网络要拟合的不是任务本身的多模态性，而是坐标表示引入的额外复杂度。

作者真正抓住的缺口是 multi-frame reasoning 尚未进入 diffusion denoising loop。传统 task-parameterized skill learning 有多参考系思想，point-cloud policy 有 frame mining，MoE-DP 有 expert routing，但这些都没有让“同一个 noisy action state”在多个 action frames 中同步 denoise。MoF 的出发点因此很明确：frame selection 不应是预处理或后处理，而应发生在每一步 reverse diffusion 中。

Core Idea

核心思想是把 action frame 从一个静态设计选择，变成 denoising 过程中的 mixture variable。MoF 维护一个 canonical noisy action，按当前 proprioceptive transforms 把它重表达到多个 frame，每个 frame expert 在自己的 action parameterization 下预测 noise，再把这些 noise 变回 canonical space 融合，推进同一个 diffusion trajectory。

这个设计改变了建模方式：expert 的差异不是任务、技能、模态或网络分支，而是同一物理动作在不同坐标系下的分布几何。它引入的 inductive bias 是“动作分布复杂度具有 frame-locality”：某些动作在某些 frame 下天然低方差、低曲率、更接近 unimodal。相比普通 MoE，它不是增加 capacity 后让网络自己分工，而是用机器人几何结构预先规定 expert specialization 的语义。相比最终动作 ensemble，它在 noise space 同步融合，避免多个 denoiser 各自收敛到不同 mode 后动作平均失真。

Method

第一，synchronized multi-frame denoising 解决的是 mode mismatch。若每个 frame 独立采样到最终 action 再融合，多模态任务中不同 sampler 可能选择不同解，最终平均没有物理意义。MoF 只保留一个 canonical diffusion state，让所有 expert 在每一步对同一个 latent sample 提建议，因此融合的是局部 score/noise estimate，而不是互不兼容的最终轨迹。

第二，frame-specialized denoiser 解决的是单一 action representation 下分布过复杂的问题。每个 expert 看到的是同一个 noisy action 的不同坐标表达，目标不是学不同任务，而是在更合适的几何坐标下估计 noise。router 或 uniform ensemble 只是决定如何混合这些 frame-local estimates。

第三，column-vector 6D rotation representation 是机制成立的技术前提。扩散中间态的 rotation channels 通常不是合法 SO(3)，如果用常规 row-based 6D 表示并在变换前 orthogonalize，就会投影并改变 diffusion state。作者改用 rotation matrix 的前两列，使 frame change 对位置和 rotation columns 都是普通线性变换；这让 noisy state 和 noise vector 都能精确、可微、无投影地跨 frame 对齐。

第四，per-expert auxiliary loss 不是核心思想，但很可能是训练稳定性的关键补丁。mixed loss 只监督融合后的 canonical noise，小权重 expert 容易拿不到足够梯度；aux loss 强迫每个 expert 在自己的 frame 中仍是可用 denoiser。没有它的 ablation 掉点明显，说明 routing 本身不足以保证专家分化质量。

Key Insight / Why It Works

最核心的 insight 是：在机器人操作里，很多所谓复杂动作分布并不是任务内在复杂，而是 action frame 选错导致的坐标复杂。MoF 有效主要来自 better inductive bias 和 representation alignment，而不是高层 reasoning。它把“网络需要学会的 invariance / equivariance”部分转移到显式 frame transform 上，使 denoiser 处理的是更规整的局部分布。

真正有贡献的是 synchronized noise-space fusion。这个点比“多个 expert”更重要。普通 MoE 只是在特征或网络容量上分工，仍然在一个 action space 中 denoise；MoF 则让每个 expert 在不同 action space 中形成局部 score estimate，并在 canonical noise space 对齐。这更接近把同一个物理 action manifold 的多个 chart 同时用于 score estimation。

column-based 6D 表示也是实质贡献，虽然看起来像工程细节。对 diffusion 来说，中间 noisy rotation 不在 SO(3) 是基本事实；如果 frame transform 依赖合法 rotation reconstruction，就破坏了扩散状态。这个表示让 frame transform 对 noisy variables 保持线性，是 MoF 能在 denoising loop 内工作而不是只在 clean action 上工作的前提。

router 的贡献要更谨慎看。仿真中 MoF-MoE 和 MoF-Ensemble 平均很接近，说明不少收益来自多 frame aligned averaging，而不是 learned routing。router 在有明显阶段切换的任务上更有价值，但不是所有任务都学出强 modulation。文中关于 router modulation 与 oracle advantage 的相关性有说服力，但样本只有 9 个任务，更多是机制提示，不是严格因果证明。

增益不太像 retrieval 或 long-horizon planning，也不是明显的 curriculum。它更像 test-time compute 增加后的几何 ensemble，加上强结构先验。可能有一部分来自 scaling：MoF 有多个 denoiser、auxiliary losses、更多参数与更多推理计算。作者用 same-frame ensemble 和 MoE-DP 做了对照，说明“只是多模型”解释不够，但参数量和训练动态的归因仍未完全剥离。

Relation To Prior Work

最接近的技术谱系有三条：task-parameterized movement primitives / skill learning，多 frame / object-centric robot representations，以及 diffusion policy / MoE diffusion policy。MoF 本质上是把 task-parameterized skill learning 的多参考系思想移植到现代 action diffusion 的 denoising loop 中。

和 frame mining 或 object-centric representations 的差异在于，MoF 不是只改变 observation encoding，也不是为 policy 提供额外几何 feature，而是直接改变 action denoising 的坐标 chart。这个差异是实质性的，因为 diffusion 的 score/noise 估计与 action parameterization 强绑定。

和 MoE-DP 的差异也不是 router 有无，而是 expert 的语义不同。MoE-DP 通常在 conditioning、技能、阶段或 denoising block 上做 mixture；MoF 的 expert 是同一动作分布在不同坐标系下的 score estimator。看似是 MoE 重组，但新增的信息是物理坐标变换约束和 cross-frame noise alignment。

和 equivariant diffusion policy 也有关系：二者都试图减少网络学习几何对称性的负担。但 MoF 不要求全局等变性成立，也不只处理单一 symmetry group；它更 pragmatically 使用多个 robot-relevant frames，让模型在不同局部 chart 中取长补短。

Dataset / Evaluation

评估覆盖了九个仿真任务和两个真机任务，任务类型包括移动双臂、桌面双臂、抓取、插入、清理、倒取与端到端移动操作。它足以支持“frame choice matters”这个 claim：不同任务最佳单 frame 明显不同，worst 与 oracle 差距也说明 action frame 是重要设计变量。

对“MoF 超过固定 frame”也基本支持。尤其是与 oracle task-level frame selection 的比较有意义，因为 oracle 已经知道每个任务最好的单 frame；MoF 在部分任务超过 oracle，说明收益不是简单自动选任务级 frame，而可能来自阶段级 frame mixing。

但 evaluation 仍有边界。仿真只用作者定义的四类 candidate frames，结论依赖这些 frames 已覆盖主要几何结构；如果关键 frame 是 object-centric 或 contact-centric 而不在集合里，MoF 未必有效。真机任务数量少，rollout 数有限，且真实实验缺少 base frame tracking，只验证了简化专家集合。泛化主要体现在颜色、位置、距离变化，尚不能说明跨 embodiment、跨任务族或未见几何关系的泛化。

文中没有明显 benchmark leakage 证据，但演示数据由任务生成或人类演示提供，且评估配置与训练任务结构高度一致。所谓 phase-dependent routing 更像在熟悉任务结构内选择合适 representation，而不是形成可迁移的高层 task reasoning。

Limitation

第一，方法成立依赖 frame set 由人预先指定。MoF 不是自动发现几何抽象，而是在 designer 已经给出 left/right/base/rel-traj 等合理候选后做融合。问题从“选哪个 frame”转移为“候选 frames 是否覆盖任务结构”。这在双臂移动操作中合理，但 scalability 上限明显。

第二，它依赖准确 proprioception 和 frame transform。真实机器人中 base drift、hand-eye calibration error、柔顺控制下的末端偏差都会污染 frame alignment。论文没有充分讨论 frame uncertainty 下 noise-space fusion 的稳定性。

第三，router 的监督信号只是 denoising loss，不是 execution-aware objective。一个 frame 在 MSE noise prediction 上好，不必然等于闭环执行成功率高。文中未充分说明 routing weights 与实际控制性能之间的一致性，尤其在 OOD 初始状态或接触扰动下可能失配。

第四，长期 reasoning 能力有限。MoF 没有显式 memory、planner 或 task-state model；所谓阶段切换来自 observation-conditioned routing 和 action denoising，不应解读为规划。它解决的是局部 action distribution 的表征对齐，不是 long-horizon decision making。

第五，增益归因仍不完全干净。MoF 同时引入多专家、更大模型、多 frame augmentation、auxiliary supervision、test-time averaging。虽然 baseline 设计已经排除了一些简单解释，但“多 frame inductive bias”与“更多训练信号 / 容量 / ensemble smoothing”的比例仍不清晰。

第六，真实世界泛化可能主要来自数据覆盖加上合适 frame 先验。两个真机任务的失败模式分析有价值，但规模不足以证明该方法在开放家庭场景中的 robust generalization。

Takeaway

• 1. Action frame 应该被视为 diffusion policy 的核心建模选择，而不是低层坐标约定。
• 对 manipulation 来说，坐标系选择能直接改变 score estimation 的难度。
• 2. 多 frame 方法最有价值的地方不是最终策略 ensemble，而是在 denoising trajectory 内对齐并融合多个 frame-local noise estimates。
• 这一思想可以迁移到 object-centric frame、contact frame、tool frame、human demonstration frame 等更丰富的 action charts。

一句话总结

MoF 是把 task-parameterized 多参考系思想推进到 diffusion policy denoising 内部的一类 representation-aligned MoE 方法，真正贡献在于用同步 multi-frame noise fusion 降低 action distribution 的坐标复杂度，而不是提出新的高层机器人推理机制。