Jiaming Wang 的研究与论文

研究主线

我近期的工作沿着两条主线展开:一是能够跨环境、跨条件、跨传感模态工作的开放、鲁棒的环境表示;二是在开放世界中保持鲁棒、可泛化的机器人策略。

主线 01 · 环境表示

开放、鲁棒的环境表示

能够跨环境、跨条件、跨传感模态工作的表示:在剧烈变化后仍能重定位的拓扑地图,支撑物体搜索,借助 GPS 扩展到大尺度场景,甚至可以在水下运行。

  • CROSSNeurIPS'26
    开放世界的拓扑表示与定位。
  • ECROM审稿中
    将 CROSS 扩展到长期、开放词汇的物体搜索。
  • CROSS v2进行中
    支持双目与单目-惯性模式,基于局部因子图的前端平滑,云端支持,以及结合 GPS 的大尺度运行。
  • CROSS-UW进行中
    将 CROSS 扩展到水下环境——在那里,多次会话间的重定位尤为困难。
  • 语义 CROSS探索中
    在 CROSS 拓扑框架中引入更丰富的语义表示。
主线 02 · 机器人策略

开放世界中的鲁棒机器人策略

能够泛化到实验室之外的策略:已在七个国家部署的无地图导航,夺冠的 VLA 后训练,从视频中学到的社交导航,以及能够推理、行动并自我改进的基础模型智能体。

  • GeNIE Earth Rover · ICRA'25RA-L
    面向真实开放环境的可泛化导航系统;ICRA 2025 Earth Rover Challenge 冠军。
  • VLA 后训练 REAL-I · ICRA'26
    赢得 ICRA 2026 REAL-I 挑战赛,实验室也因此获得一台价值 7 万美元的人形机器人。
  • 从视频学习社交导航审稿中
    从大规模视频数据中学习符合社交规范的导航行为。
  • 智能体机器人综述
    基于基础模型的智能体如何在机器人系统中推理、行动并自我改进。
  • 智能体世界模型探索中
    由 VLM 构建世界模型并在其上推理,而不是直接预测动作。初步实验结果非常可观,且同时适用于操作与导航。
TOG · IROS'25 WS GBPP · IROS'25 WS SCOPE · CoRL'26 Arena-Bench 2.0

在研项目

以下是我目前正在积极推进的研究项目,涵盖机器人、人工智能与计算机视觉方向的持续探索。

位姿感知拓扑建图

2025 – 至今

一种位姿感知的在线拓扑建图系统,直接在连续 SE(3) 空间中进行序贯假设检验,从而在感知混淆与环境变化下实现类人的鲁棒重定位。

已作为 CROSS 发表于 NeurIPS 2026 arXiv

Data-Driven RL for Social Navigation

面向社交导航的数据驱动强化学习

2025 – 至今

一种数据驱动的社交导航强化学习框架:把真实世界的人机导航日志转化为可回放的“想象环境”,机器人在其中根据由 RGB-D 数据重建的 BEV 地图和回放的人类轨迹学习策略,无需依赖传统模拟器。

Vision-Language Navigation

视觉-语言导航

2025 – 至今

用视觉-语言模型把自然语言导航指令转换为 BEV 场景上的可微代价函数,再优化或挑选使该代价最小的轨迹——无需策略训练即可实现零样本视觉-语言导航。

Offline RL for VLA Models

面向视觉-语言-动作模型的离线强化学习

2025 – 至今

利用离线强化学习,基于实验室环境中采集的真实机器人交互数据集来微调视觉-语言-动作(VLA)模型。

论文

完整论文列表。获奖工作以奖杯标注。

2026
Survey 2026
A Survey of Agentic Robotics: Toward Continual Self-Improvement
Jiaming Wang, Yuhua Jiang, Zhengcheng Shen, Harold Soh
Preprint, 2026
论文
Under review
Retrospective Open-Vocabulary Memory for Long-Term Object Search
Jiaming Wang, Zhiwei Xue, Jizhuo Chen, Shiqi Peng, Harold Soh
arXiv preprint (under review), 2026
Under review
Learning Social Navigation from Internet Videos in the Policy State Space
Jiaming Wang, Duc Thang Nguyen, Jizhuo Chen, Volodymyr Shcherbyna, Diwen Liu, Zhengcheng Shen, Harold Soh
arXiv preprint (under review), 2026
arXiv 2026
How to Better Train VLAs: Lessons Learned From the REAL-I Challenge at ICRA 2026
Jiaming Wang, Jizhuo Chen, Diwen Liu, Wang Song, Qiang Wang, Jie Ren, Chao Fu, Dingkun Zhu, Minchi Ruan, Hongtong Li, Yuhua Jiang, Zhiwei Xue, Yongping Pan, Harold Soh
arXiv preprint, 2026
ICRA 2026 REAL-I 挑战赛冠军
NeurIPS 2026
CROSS: Change-Robust Online Spatial-Semantic Topological Mapping
Jiaming Wang, Jizhuo Chen, Diwen Liu, Atharva Ghotavadekar, Jiaxuan Da, Linh Kästner, Harold Soh
Advances in Neural Information Processing Systems (NeurIPS), 2026
CoRL 2026
SCOPE: Control-Ready Uncertainty for Trajectory Diffusion
Zhiwei Xue, Kam Jia Yue, Jinhang Qiu, Yifeng Cheng, Ege Gursoy, Jiaming Wang, Vincent Bonnet, Harold Soh
Conference on Robot Learning (CoRL), 2026
arXiv 2026
SCOPE: Score-Isolated Agentic Optimization for Video World Models
Yuhua Jiang, Jiaming Wang, Qingbin Liu, Feifei Gao
arXiv preprint, 2026
arXiv
ICRA 2026
TOPO-Bench: An Open-Source Topological Mapping Evaluation Framework with Quantifiable Perceptual Aliasing
Jiaming Wang, Jizhuo Chen, Diwen Liu, Jiaxuan Da, Jiamo Hu, Zhiwei Xue, Linh Kästner, Harold Soh
IEEE International Conference on Robotics and Automation (ICRA), 2026
arXiv
2025
RA-L 2025
GeNIE: A Generalizable Navigation System for In-the-Wild Environments
Jiaming Wang, Diwen Liu, Jizhuo Chen, Jiaxuan Da, Nuowen Qian, Tram Minh Man, Harold Soh
IEEE Robotics and Automation Letters (RA-L), 2025
ICRA 2025 Earth Rover Challenge 冠军
IROS 2025 WIR-M Workshop
Training-Free Task-Oriented Grasp Generation
Jiaming Wang, Diwen Liu, Jizhuo Chen, Harold Soh
WIR-M Workshop, IEEE/RSJ International Conference on Intelligent Robots and Systems (IROS), 2025
Workshop 最佳论文奖
arXiv
IROS 2025 RoDGE Workshop
GBPP: Grasp-Aware Base Placement Prediction for Robots via Two-Stage Learning
Jizhuo Chen, Diwen Liu, Jiaming Wang, Harold Soh
RoDGE Workshop, IEEE/RSJ International Conference on Intelligent Robots and Systems (IROS), 2025
最佳论文奖
arXiv
IROS 2025
Arena-Bench 2.0: A Comprehensive Benchmark of Social Navigation Approaches in Collaborative Environments
Volodymyr Shcherbyna, Linh Kästner, Duc Anh Do, Jiaming Wang, Huu Giang Nguyen, Tim Seeger, Ahmed Martban, Zhengcheng Shen, Huajian Zeng, Nhan Trinh, Eva Wiese
IEEE/RSJ International Conference on Intelligent Robots and Systems (IROS), 2025
论文
2024
ICRA 2024
Probable Object Location (POLo) Score Estimation for Efficient Object Goal Navigation
Jiaming Wang, Harold Soh
IEEE International Conference on Robotics and Automation (ICRA), 2024
arXiv
2023
AAAI Symposium 2023
Small Object Navigation with Context Information
Jiaming Wang, Harold Soh
Proceedings of the AAAI Symposium Series, 2023
KDD DLG Workshop 2023
Pre-training with Graph Transformers
Jiaming Wang, Thomas Laurent, Xavier Bresson
KDD Workshop on Deep Learning on Graphs, 2023
arXiv