时间:2026-03-16 10:23
人气:
作者:admin
自动驾驶 World Model(世界模型) 相关的开源项目其实已经不少,但大部分还在 研究级别(paper + code)。本文整理真正能跑 / 有代码 / 研究价值高的开源项目列表,并按技术路线分类。
这一类是现在自动驾驶研究最主流路线。
3D occupancy world model
同时预测
future scene
ego trajectory
支持自监督训练
past occupancy → future occupancy
车辆运动
行人运动
可行驶区域变化
4D occupancy 预测
可结合规划
支持 action-conditioned generation
camera → BEV → world model → future occupancy
lane change
pedestrian crossing
vehicle following
可直接接 planner。
这一类更像 Wayve / OpenAI 的 generative world model。
Video GPT world model
输入image sequence \+ ego state
输出future driving video
生成 40秒未来驾驶视频
根据车辆动作生成不同场景
video → token → transformer → future video
自动驾驶版Sora / world simulation
适合想要自己训练世界模型的场景。
专门做 world model 自动驾驶训练的平台。
world model backbone
driving RL tasks
Gym 接口
可视化服务器
sensor
↓
world model
↓
RL policy
↓
vehicle control
研究 Dreamer / MuZero 类自动驾驶
世界模型常用来生成训练世界。
大规模交通场景生成
从真实数据集生成 digital twin
Waymo
nuScenes
Lyft
nuPlan
world model training
scenario simulation
RL training
来自 Awesome World Model 列表:
DriveDreamer
MagicDrive
ViDAR
Drive-WM
Think2Drive
diffusion world model
neural driving simulator
latent world model
推荐三条技术路线:
encoder
latent world state
predict future latent
decode
OccWorld
Drive-OccWorld
DrivingWorld
CarDreamer
MagicDrive
occupancy
video
diffusion
RL world model
自动驾驶世界模型目前最大的问题不是算法,而是数据规模。
以 Wayve GAIA-1 为例:
4700小时真实驾驶数据
9B参数
未来趋势:
Driving Foundation Model
即 GPT for driving。
如需,可继续提供:自动驾驶世界模型 GitHub Top20 项目清单(含 star 数 + 技术路线),覆盖全球自动驾驶 world model 核心代码库。
(注:文档部分内容可能由 AI 生成)