精读笔记
Problem Setting
这篇论文实际处理的是 embodied agent 在 360° observation 下持续估计目标相对方向的问题。重点不是识别目标在哪里，而是目标方向如何在机器人转动、移动、跨越 ERP seam、目标暂时不可见时仍保持 egocentric 一致。
以前方法卡在两个层面：一是把球面数据投影成 ERP 后，让 VLM 在平面坐标里做空间判断；二是把每帧输出当作确定性答案，而不是作为带不确定性的观测。前者导致几何畸变和 seam discontinuity，后者导致单帧误检会直接污染动作。
这个任务的关键矛盾是：VLM 的强项是 image-space semantic evidence，机器人需要的是 sphere-space action direction。EAGOR 的问题设定本质上是在弥合 semantic perception 和 geometric state estimation 之间的表示错配。
Motivation
作者的核心观察是：全景图中的每个像素首先是一个 viewing direction，而不是普通 2D 图像平面上的位置。ERP 只是传输和显示格式，不应该成为 embodied reasoning 的状态空间。
已有路线不够，不是因为没有 panorama-aware backbone，而是因为很多方法仍然把方向推理做成 per-frame recognition 或 pixel regression。即便模型能找到目标，也不代表它能在相机旋转后给出一致的 egocentric target vector。
关键缺口是缺少一个显式维护方向 belief 的几何状态层。VLM 输出应该被看成 noisy evidence，而不是最终答案；方向关系应该被递归更新，而不是每帧重新猜。
Core Idea
EAGOR 的核心思想是把 embodied omni-directional reasoning 从“在 ERP 图像上预测目标坐标”改写为“在球面上维护目标方向的后验 belief”。VLM 只提供当前观测下目标可能出现的空间证据，系统把该证据 lift 到 S2，随后通过递归贝叶斯更新形成跨时刻 belief。
这个建模引入的 inductive bias 很明确：方向状态属于球面，机器人旋转对应球面 belief 的等变变换；因此几何一致性由表示保证，而不是靠 VLM 从数据中学会。和 prior 的本质区别在于，EAGOR 不试图训练一个更懂全景图的模型，而是在 frozen VLM 外面加了一个几何正确的 inference layer。
这也解释了为什么它可能更 scalable：语义能力可以随 backbone 增强，而几何一致性由外部 filter 保证；换 backbone 不需要重新学习 spherical motion consistency。
Method
第一，VLM evidence 被重新解释为 directional likelihood。它解决的是单点预测过于脆弱的问题：response map 中多个候选区域可以同时保留为多峰 belief，而不是被 centroid 或 argmax 过早压缩。
第二，ERP 坐标被映射到球面方向，并在积分时使用球面面积元素修正纬度采样偏差。它解决的是 ERP 几何不均匀的问题，使高纬区域不会因为图像采样密度被错误加权。
第三，belief 用 SH-BF 表示。它的必要性不在于“球谐更高级”，而在于它给球面函数提供了全局连续、可旋转的系数表示；旋转传播可以在 coefficient space 中完成，避免在 ERP 上反复 warp/interpolate。
第四，更新在 log-space 中做 additive fusion。它把当前帧 evidence 和历史 belief 组织成贝叶斯滤波，而不是 temporal smoothing。这个区别重要：belief 可以携带不确定性和多候选，而不是简单平均方向。
第五，最终 direction decoding 使用球面均值或近似 MAP。这里相对次要；真正贡献不在 decoder，而在前面的 belief representation 和 motion-consistent propagation。
Key Insight / Why It Works
这篇论文最有效的部分大概率是 representation alignment：把 VLM 的 image-space semantic evidence 对齐到机器人真正需要的 sphere-space directional state。它不是让 VLM 变得更会推理，而是减少 VLM 被迫承担的几何负担。
核心贡献是把全景方向估计看成 recursive Bayesian filtering on S2。这个 formulation 直接解决三类错误：seam crossing 下的 wrap-around 错误、ERP 纬度畸变导致的方向偏差、相机旋转后逐帧估计不一致。相比之下，SH 的具体 bandlimit、decoder 形式、runtime 优化更像辅助工程选择。
这不是 scaling paper。结果中“小模型 + EAGOR 超过大模型”的现象说明，至少在这些任务上，bigger VLM 不能自动补齐几何 inductive bias。增益更像来自 better inductive bias + memory reuse + test-time evidence accumulation，而不是模型容量。
但 active visual search 部分的增益归因不完全干净。EAGOR 引入了跨 view accumulation，相当于增加 test-time compute 和 memory；如果 baseline 只是单帧或较弱 aggregation，那么提升不全是 spherical representation 的功劳。文中未充分说明不同 baseline 是否拥有同等强度的 temporal belief 或 uncertainty modeling。
所谓 reasoning 在这里更接近几何状态估计，不是高层规划推理。这个判断并不贬低工作，反而是它成立的原因：它把一个被 VLM 叙事包装成 reasoning 的问题，拆回到更可控的 probabilistic filtering。
Relation To Prior Work
最接近的路线有三类：panorama-aware perception、zero-shot embodied navigation / object search、probabilistic spatial grounding。EAGOR 的差异不是又提出一个全景 backbone，而是把 frozen VLM 的输出接到一个球面 belief filter 上。
和 panorama-specific models 相比，它不学习 distortion-aware features，而是直接改变状态空间；和 map-based navigation 相比，它不构建全局地图，只维护 egocentric target direction；和普通 VLM prompting / repeated querying 相比，它不把每次回答当成独立判断，而是把回答作为 likelihood 融合。
看似新的部分中，递归贝叶斯滤波、球谐表示、球面信号旋转都不是新思想；真正新增的信息是把这些几何工具接到 open-vocabulary VLM evidence 上，用于 embodied 360° target direction reasoning。这属于“foundation model + classical geometric state estimation”的技术谱系，而不是端到端 embodied policy learning。
Dataset / Evaluation
评测覆盖面相对合理：有 simulation 中的 waypoint following 和 map-free navigation，有 HOS / OSR-Bench 风格的 active visual search，也有 Unitree Go2 + Insta360 的真机验证。它们共同验证了一个主张：几何一致的方向 belief 对 embodied 360° action 有帮助。
最支持核心 claim 的是 waypoint following、seam crossing、temporal inconsistency 和 closed-loop navigation，因为这些直接测试 belief 在 egocentric motion 下是否稳定。active visual search 说明该机制能迁移到不同 VLM backbone 和 benchmark，但它更容易混入 response extraction、view accumulation、query format 等因素。
真实世界实验是有价值的 sanity check，但规模有限，更像证明方法没有只在 simulator 中成立，而不是证明复杂部署可用。文中对动态目标、平移视差、多实例长期 disambiguation、复杂遮挡下的失败边界验证不足。
Limitation
EAGOR 的核心前提是 VLM evidence 至少“有用但噪声大”。如果 evidence 系统性错误，贝叶斯累积会把错误稳定化；filter 不能凭空产生语义能力。
它主要处理旋转一致性，对平移导致的 parallax 和三维空间结构没有充分建模。文中提到固定小步长使 parallax 落在单帧噪声内，这本身就是一个强假设；在大位移、近距离目标、多房间遮挡中，这个假设会破。
SH-BF 的连续球面 belief 有表达上限。低 bandlimit 带来平滑和角分辨率限制，高 bandlimit 会有 ringing；这意味着它适合方向级控制，不一定适合精细定位或多目标密集场景。
增益来源不清的地方主要在 benchmark 适配：EAGOR 同时引入 spherical geometry、temporal memory、uncertainty accumulation 和可能更多 views。若没有强 ablation，很难判断提升中有多少来自球谐表示本身，有多少来自 test-time accumulation。
泛化也需要谨慎看待。它的 geometry generalizes，但 semantic evidence 仍然依赖 backbone 数据覆盖；rare target、OCR、细粒度文本和多实例混淆已经暴露这个上限。所谓 training-free 不代表 data-free，只是把监督转移到了预训练 VLM。
Takeaway
- 第一，360° embodied reasoning 里，最该显式建模的不是 panorama image，而是 egocentric directional belief；把状态空间选对，比继续放大 VLM 更有效。
- 第二，VLM 在机器人系统中更适合作为 noisy semantic sensor，而不是直接 action oracle。
- 后续很多 embodied VLM 系统都应该采用类似的“语义感知 + 几何滤波/状态估计”解耦。
- 第三，EAGOR 真正推动的是把 open-vocabulary perception 接入经典几何估计框架，而不是提出一个新的全景视觉模型。
一句话总结
EAGOR 是一篇把 embodied 360° 方向推理从 VLM 平面坐标预测拉回到球面贝叶斯状态估计的工作，其主要贡献是用几何 inductive bias 和 test-time belief accumulation 修正 frozen VLM 的方向不一致性。