自动驾驶最难收集的数据,往往也是最关键的数据。暴雨夜间突然横穿的行人、施工区临时改道、前车异常轨迹都很少发生,却决定系统在极端情况下是否可靠。
10月13日,哈啰Robotaxi发布生成式驾驶世界模型HelloWorld。它不是单纯生成一段道路视频,而是把场景控制、连续生成、多传感器观测与高效推理放进一套工具链,目标是按需构造驾驶数据,并让自动驾驶策略在可控环境中接受测试。
研发人员可以用自然语言描述场景,也可以直接编辑车辆、行人和运动轨迹。系统随后生成对应的多视角视频与激光雷达观测。比如插入一名横穿行人、改变前车路线,或把晴天白昼切换为雨雪夜间,均可围绕同一条道路连续生成,而不是重新组织一次真实路采。
“世界模型”在这里指的是对环境变化规律的可生成模拟。它不仅要画出一帧看起来合理的图,还要让前后帧、不同摄像头视角和激光雷达数据彼此一致;车辆采取制动、变道等动作后,周边交通参与者也要产生合理反馈。只有满足这些条件,生成内容才能用于策略评估,而不只是视觉展示。
这套方法主要补三类缺口。第一是稀有场景,真实道路上难以高频采集;第二是危险场景,不能为了获取数据主动制造风险;第三是可重复测试,同一变量可以被反复修改,让研发团队比较不同策略的差异。相比随机堆积路采里程,按问题造数据更接近软件工程中的定向测试。
多传感器输出尤其重要。量产自动驾驶系统通常同时依赖摄像头与激光雷达,如果世界模型只生成视频,就无法完整验证融合算法。HelloWorld同时生成多视角画面与点云观测,意味着它试图覆盖从感知输入到决策输出的更长链路。
产业价值取决于生成数据能否缩小“仿真到现实”的差距。画面逼真不代表物理规律准确,车辆动力学、遮挡关系、传感器噪声和道路参与者行为都可能产生偏差。若模型生成的分布与真实道路不同,策略在仿真里得分更高,也不一定在真车上更安全。
目前公开信息尚未给出HelloWorld的训练数据规模、生成速度、物理一致性指标和真车闭环提升幅度。它明确了哈啰Robotaxi用世界模型补长尾数据的路径,但下一步仍要看:生成场景能否被稳定复现,能否发现真实缺陷,以及修复后的策略是否通过封闭场与公开道路验证。