精读笔记
Problem Setting
【Shift & Drift: A Zero-Shot Benchmark for Generalizable and Robust Autonomous Driving Motion Planning】（arXiv preprint / 2026）
这篇论文不是在解决“如何设计更好的 planner”，而是在解决一个更基础的评测问题：当前闭环 planning benchmark 对真实部署风险的可见性不足。nuPlan 类 ID evaluation 能说明 planner 在熟悉地图、熟悉交通密度、熟悉执行模型下是否会开，但不能说明它在新城市拓扑、高密度 VRU 交互、低层执行误差累积后是否仍能恢复。
真正困难点在于 planner 的失败往往不是单步预测误差，而是闭环分布迁移后的连锁反应。IL planner 在专家轨迹附近看起来合理，一旦 ego 因控制误差、交互让行或路径选择偏离 log distribution，就会遇到训练中几乎没有覆盖的状态。rule-based planner 虽然有可解释安全边界，但在高密度社会交互中往往以保守停滞换安全。关键矛盾是：高 imitation fidelity 不等于闭环 resilience，而传统 benchmark 往往把两者混在一起。
Motivation
作者的核心观察是：现有闭环 benchmark 仍然太“同分布”。即使采用 closed-loop simulation，地图、agent density、驾驶规范、低层动力学误差都与训练/调参环境高度一致，因此很多 planner 的高分可能来自 geography-specific priors、metric-specific tuning 或简单交通场景覆盖，而不是可迁移的 planning capability。
另一个缺口是 execution perturbation 没有被系统性纳入 object-level planning evaluation。现实中感知延迟、控制误差、模型 mismatch 会持续把 ego 推离 planner 预期状态；如果评测只在理想执行器上跑，那么 planner 缺少 recovery behavior 的问题会被掩盖。Shift & Drift 的动机就是把“跨语义外推”和“off-policy recovery”设计成两个独立压力轴，而不是继续在 nominal ID score 上比较架构优劣。
Core Idea
核心思想可以概括为：不改 planner，改评测分布。论文把 aerial, occlusion-free 的 DSC3D 转换成 nuPlan-compatible DeepPlan，让在 nuPlan 上训练/调参的 planner 被直接放到德国城市、San Francisco 以及高密度 pedestrian-cyclist 场景中 zero-shot evaluation；同时在闭环仿真中对 ego actuation command 注入随机扰动，让 ego 必然进入偏离专家轨迹的状态分布。
这个设计的本质区别在于，它不再把 closed-loop success 视为单一指标，而是把 planner 的两类能力拆开：semantic generalization 和 dynamic recovery。前者检验 policy 是否学到跨区域驾驶 priors，而不是记住 nuPlan 城市拓扑；后者检验 policy 是否有反馈稳定性，而不是只会在专家 manifold 上输出好看的轨迹。这里引入的 inductive bias 不是模型侧的，而是 benchmark 侧的：好的 planner 必须在语义分布和状态分布同时偏移时仍保持安全和进展。
Method
方法上值得保留的机制只有几个。
第一，DeepPlan conversion 解决的是跨数据集评测不可比的问题。DSC3D 原本是 aerial forecasting-style 数据，没有 nuPlan simulation interface；转换到 nuPlan schema 后，现有 planners 可以在同一 simulator、同一 object-level representation、同一 metric stack 下被测试。核心变化是把 occlusion-free、多 agent、高密度真实轨迹接入标准 planning benchmark，而不是重新发明评测协议。
第二，ego selection 和 scenario filtering 解决的是 aerial dataset 没有 ego 的问题。作者从每个窗口中选取可作为 ego 的车辆，并过滤掉 log playback 下已经碰撞、越界或无进展的异常场景。这一步的意义不是技术新颖，而是防止 benchmark 被无效转换样本污染。它保证测试失败更可能来自 planner，而不是数据生成错误。
第三，actuation noise track 解决的是 closed-loop evaluation 过于理想化的问题。AWGN 主要测试 planner 对高频扰动的局部平滑性；OU noise 更关键，因为时间相关误差会形成持续 lateral/longitudinal drift，逼迫 planner 通过 receding-horizon feedback 回到合理状态。相比只看 open-loop displacement，这更接近“有没有恢复机制”的检验。
第四，作者保留 nuPlan scoring 但调整部分阈值，以适配欧洲高密度共享空间和更紧凑交互。这是必要但有风险的工程选择：不调阈值会误罚真实人类行为，调阈值则可能改变不同 planner 的相对优势。
Key Insight / Why It Works
这篇论文最有价值的 insight 是：planner 的 nominal closed-loop score 很可能是一个脆弱的上界，而不是部署能力估计。只要把场景语义和状态分布稍微推出训练环境，不同范式的真实差异就会放大。IL 方法的核心弱点不是轨迹生成质量差，而是它的训练目标通常只约束 expert manifold 附近的 action matching；当 ego 被扰动到 off-manifold state，模型既没有被奖励过恢复，也没有明确学习稳定控制。
CaRL 表现更强的原因，最可能不是“RL 天然更聪明”，而是 closed-loop optimization 带来了更直接的 metric alignment 和 off-policy state exposure。RL 在训练中通过探索访问非专家状态，reward 又直接绑定 progress/safety/comfort，因此它学到的更像一个闭环 feedback policy，而不是单纯 trajectory imitator。这是本文结果中最可信的机制解释。
但归因必须谨慎。CaRL 的优势可能同时来自 reward engineering、训练模拟器覆盖、reactive/non-reactive exposure、以及与 nuPlan metric 的强对齐。文中未充分说明哪些因素是必要条件，哪些只是实现细节。说“RL 比 IL 更鲁棒”太粗；更准确的判断是：被闭环扰动训练并按评测目标优化的 planner，在这个 benchmark 上比纯 expert matching 更稳。
DeepPlan 的有效性主要来自 data coverage 和 representation alignment，而不是新的算法。它把更难、更密、更少遮挡的真实轨迹放进 nuPlan 接口中，因而能揭示 ID benchmark 看不到的失败。这里的贡献很大程度是 benchmark construction / data engineering，但这是有价值的 engineering：它改变了可观测 failure modes。相比之下，AWGN/OU noise 本身不是新思想，更像把鲁棒控制中的经典扰动模型标准化到 AD planning evaluation。
Relation To Prior Work
这项工作属于 closed-loop planning benchmark 与 robustness stress test 的谱系，而不是 planner architecture 谱系。它最接近 nuPlan、interPlan、ScenarioNet、nuPlan-R/SMART-agent 一类工作，但切入点不同：nuPlan 提供标准闭环平台，interPlan 用少量 handcrafted rare cases 质疑 nuPlan 上界，nuPlan-R/SMART-agent 主要增强 background agents 的交互真实性；Shift & Drift 则强调大规模跨数据集语义 shift 和 ego 执行扰动。
看似新的部分，有不少是已有思想的重组：跨域评测、aerial occlusion-free trajectory、DAgger 式 off-policy concern、Gaussian/OU noise robustness，这些单独都不新。实质创新在于把 DSC3D 系统转换到 nuPlan，使现有 object-level planners 能在同一接口下 zero-shot 测试；以及把 semantic shift 与 state drift 并列为 benchmark tracks，让 planner 的泛化和恢复能力可以被拆开观察。
与 prior 的本质差异不是“更多场景”，而是 evaluation distribution 的组织方式：训练仍在 North America/Singapore nuPlan 生态，测试被推到德国城市/高密度 VRU/不同执行误差。它新增的信息是 planner 在 benchmark 外推条件下的 failure taxonomy，而不是一个新的 planning algorithm。
Dataset / Evaluation
DeepPlan 覆盖 1182 个 converted scenarios，包含多个德国城市和 San Francisco，且来自 aerial tracking，因此相比 ego-centric logs 更少受原车遮挡限制。这一点对 closed-loop evaluation 很关键：planner 偏离原轨迹后，周围 agent context 不会因为原 ego 的 blind spot 而变成“虚假的空场景”。任务覆盖上，它显著加强了 pedestrian/cyclist density、novel urban topology 和 regional style shift。
评测基本支持作者的核心 claim：ID Val14 上差距不大的 planner，在 DeepPlan 和 actuation noise 下出现明显分化；IL 更容易出现安全或进展崩溃，rule-based 更保守，CaRL 更稳。这说明 benchmark 确实能暴露传统 ID evaluation 看不到的脆弱性。
但 evaluation 仍有明显限制。首先，没有真实车辆或硬件闭环验证，noise model 只是 proxy。其次，DeepPlan 是转换数据，map layer、route assignment、agent class、插值和过滤策略都可能引入 artifacts。第三，阈值调整虽然有合理性，但会影响 planner ranking，尤其是对 drivable-area、TTC、comfort 边界敏感的方法。第四，background agent 的 reactive realism 仍有限，真实交互中其他交通参与者会对 ego 的异常行为做复杂响应，而不仅是 log replay 或 IDM。
Limitation
这篇论文最大的上限在于它是 benchmark paper，不是机制因果研究。它能说明某些 planner 在压力测试下失败，但不能精确解释失败来自模型架构、训练目标、数据覆盖、reward alignment、调参，还是 simulator 假设。CaRL 的增益来源不清，不能直接归因于 RL paradigm 本身。
DeepPlan 的泛化 claim 也要谨慎。跨城市不等于跨所有驾驶文化；高密度 pedestrian-cyclist 场景也不等于完整 long-tail driving。它可能主要测试了“nuPlan planners 对欧洲/共享空间/高 VRU density 的不适应”，而不是普遍意义上的 semantic reasoning。核心能力可能主要来自数据覆盖和评测分布改变，而非证明某类 planner 学到了抽象驾驶规则。
State-distribution drift track 的前提是 command-level AWGN/OU 能代表现实执行误差。这个假设只部分成立。真实 sim-to-real gap 还包含控制器延迟、轮胎/路面、定位误差、感知误差、预测误差和多 agent feedback coupling。论文把这些压缩成 actuation perturbation，优点是可控，缺点是可能把问题过度简化。
另一个潜在问题是 evaluation bias。DeepPlan 为适配场景放宽了一些 nuPlan 阈值，但不同 planner 可能以不同方式接近这些阈值。若没有 threshold sensitivity analysis，很难判断排序是否稳定。文中未充分说明这一点。
Takeaway
- 1. 对 AD planning 来说，ID closed-loop score 已经不够有信息量；未来 benchmark 必须显式包含 semantic shift、state drift 和交互密度维度。
- 2. IL planner 的主要短板不是生成轨迹不够拟人，而是缺少 off-manifold recovery。
- 要提高部署鲁棒性，单纯扩大 expert data 或换更强生成模型可能不够，必须引入闭环训练、扰动训练、DAgger-like correction 或 explicit stability objective。
- 3. Rule-based safety prior 仍有价值，但在高密度社会交互中容易变成保守停滞。
一句话总结
Shift & Drift 是一篇以 benchmark engineering 暴露 planner 泛化与恢复能力缺口的工作，真正贡献在于把 object-level AD planning 从同分布闭环打分推进到跨语义场景和执行漂移下的鲁棒性压力测试。