news 2026/4/3 3:15:38

理想下一步的重点:从数据闭环到训练闭环

作者头像

张小明

前端开发工程师

1.2k 24
文章封面图
理想下一步的重点:从数据闭环到训练闭环

点击下方卡片,关注“自动驾驶之心”公众号

戳我->领取自动驾驶近30个方向学习路线

>>自动驾驶前沿信息获取自动驾驶之心知识星球

理想汽在ICCV'25期间也分享了些新东西!目前还没有视频对外。

VLA团队负责人詹锟老师做了一场世界模型的presentation,名为World Model: Evolving from Data Closed-loop to Training Closed-loop。自动驾驶之心第一时间做了解读分享给大家~

首先是介绍下理想VLA司机大模型:

回顾了理想汽车智能驾驶的发展路线,从规则时代的轻图和无图,再到基于AI的E2E+VLM快慢双系统和VLA,这四个方案中Nav(导航)是重点突出的模块。

下面介绍的是数据闭环的价值。左上角这张图是一个完整的数据闭环流程:影子模式验证→经由数据触发回传到云端进行数据挖掘→有效样本进行自动标注→生成训练集训练模型→模型下发验证性能。

这个过程已经可以做到一分钟的数据回传。

目前已经有15亿公里的驾驶数据,200+的Trigger来生产15-45s的Clip数据。

目前理想的端到端量产版本MPI已经到了220+,相比于24年7月底的版本,MPI翻了19倍左右。

数据闭环虽然有效,但仅靠数据闭环解决不了所有问题。主要还是长尾场景的收敛问题,交通管制、烟花燃放、突然的变道等等。

所以抛出来一个观点:自动驾驶进入下半场

自动驾驶的下半场换个新玩法:从数据闭环到训练闭环。

L4的训练循环的核心是:VLA+RL+WM。

  • 轨迹由VLA的Diffusion和基于世界模型的强化学习共同优化;

  • 强化学习不仅仅是RLHF,还有RLVR和RLAIF

  • 右侧的世界模型主要指场景重建和新视角复原;

闭环自动驾驶训练关键技术栈:区域级别的仿真、合成数据和强化学习。

  • 仿真靠场景重建:视觉/Lidar重建、区域重建、多趟重建、场景编辑和风格迁移;

  • 合成数据靠多模态生成:视频/点云生成、神经渲染;

  • 强化学习靠Agent、3D资产和评测&奖励

詹锟老师本人出镜的重建和生成效果图。

理想汽车近期从重建到生成的方案发展,确实Feedforward 3DGS今年提的很多,无需点云初始化,直接由视觉输入得到最终结果。

理想这两年重建方面的工作,两篇顶会。

联合重建&生成方面的工作,一篇顶会。

生成方面的工作,三篇顶会。

生成的应用:从场景编辑,到场景迁移再到场景生成。

新的数据配比,看起来数据上下了不少功夫。

系统能力是增强引擎的关键,世界模型提供的仿真环境、3D资产构建多样化的场景、SimAgents做交互式行为建模、奖励模型准确的反馈泛化能力、GPU工程加速推理。

重点强调了可交互的Agent是训练闭环的关键挑战。

总结一下取得的成果和奖励。

自动驾驶之心

版权声明: 本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若内容造成侵权/违法违规/事实不符,请联系邮箱:809451989@qq.com进行投诉反馈,一经查实,立即删除!
网站建设 2026/3/26 14:05:52

21、在 Linux 上运行 Windows 应用程序:全面指南

在 Linux 上运行 Windows 应用程序:全面指南 在考虑将桌面迁移到 Linux 时,应用程序的可用性往往是最大的阻碍。不过,我们可以借助一些软件,在 Linux 桌面上运行 Windows 应用程序或操作系统,从而解决这一问题。下面将详细介绍相关内容。 迁移到 Linux 的好处 将 Windo…

作者头像 李华
网站建设 2026/3/31 13:08:32

激活函数:从数学原理到高效实现——超越ReLU的深度探索

激活函数:从数学原理到高效实现——超越ReLU的深度探索 引言:激活函数的本质与演进 在深度学习的发展历程中,激活函数扮演着神经网络"灵魂"的角色。从早期的Sigmoid、Tanh,到统治深度学习近十年的ReLU,再到…

作者头像 李华
网站建设 2026/3/31 17:34:14

CasperJS实战:构建高效API与界面联动测试方案

CasperJS实战:构建高效API与界面联动测试方案 【免费下载链接】casperjs CasperJS is no longer actively maintained. Navigation scripting and testing utility for PhantomJS and SlimerJS 项目地址: https://gitcode.com/gh_mirrors/ca/casperjs 在现代…

作者头像 李华
网站建设 2026/3/28 21:38:51

uniapp+springboot微信小程序 生猪养殖 养猪信息化管理系统_50z6uv9o_论文

文章目录具体实现截图主要技术与实现手段关于我本系统开发思路java类核心代码部分展示结论源码lw获取/同行可拿货,招校园代理 :文章底部获取博主联系方式!具体实现截图 同行可拿货,招校园代理 u你APPSpring波哦天生猪养殖 养猪信息化管理系统_50z6uv9…

作者头像 李华
网站建设 2026/4/1 2:35:15

32、Linux在不同场景下的高效应用案例剖析

Linux在不同场景下的高效应用案例剖析 1. 以少胜多:Kenosha的Linux奇迹 在一些政府组织中,常常需要大量的IT人员和资金来满足用户的需求。然而,Kenosha的情况却截然不同。Schall惊讶于他们能用如此少的人员和资金完成如此多的工作。与其他拥有相同用户数量的政府组织相比,…

作者头像 李华
网站建设 2026/3/13 0:41:33

投稿的由帝国cms二开的证书查询系统

源码介绍:别人投稿由帝国cms二开的二维码职称证件防伪查询识别系统网站。后台用不到的功能删除很多。前端就有三个页面,一个是输入证书相关参数页面,一个查询页面,一个是别人扫码网站生成的证书二维码页面看着还行,看了…

作者头像 李华