众力资讯网

大模型上车到底有没有用?英伟达甩出2.5万个场景的实测

有语言预训练的模型每一步误差都更低,车还会自己解释为什么减速——可解释性才是信任的分水岭
大模型上车,到底是真有用,还是发布会话术?
这次英伟达没吹牛,直接甩数据。
我把实验部分反复看了三遍,这次是真舍得下本。
先交代评估方法。英伟达用的是闭环评估:把模型放进仿真环境里真开,开得好不好用分数说话。不是拿离线数据集算个准确率就完事,两种评估的含金量差着量级。
顺带解释一下什么叫闭环:模型在仿真里实时开车,每个决策都影响下一步路况,跟真开车一个逻辑。离线评估那种开卷考试,没法比。
实验设置:25600个场景,覆盖美国和欧洲,闭环跑分。
25600个场景什么概念?日常路况、雨雪天气、施工区、密集人流,全是真实道路上最难啃的部分。在这个池子里跑出来的成绩,才有点说服力。
而且对比实验做得很干净,唯一变量就是语言预训练,其他全锁死,结论归因清清楚楚。
对比两组模型:一组用了互联网语言预训练,一组没有,其他条件全一样。
结果:从训练第一步到最后,有语言预训练的那组,误差全程更低。8万步训练后,1.0对1.05。
有人说才差0.05,毛毛雨。
我提醒一句,这是平均误差。训练起点就差0.1,收敛更快、终点更稳,全程没有被反超。语言预训练不是锦上添花,是一开始就改了起跑线。
放到真实路面,差距不在平均值里,在长尾场景里——暴雨天、施工区、鬼探头,就差这口气。
为什么语言预训练有用?我的理解:语言是人类常识的最大压缩包。
互联网文本里写着:公交车会靠站,小孩可能突然窜出来,施工区要提前减速。模型读完这些再学开车,等于带着常识上路,而不是从零开始撞。
用行话说,这叫常识迁移。模型不是背下某条路怎么开,而是理解了路上的行为逻辑,换个城市也能开。
车端算力有限,就把最重的思考放云上;车端要实时,就跑蒸馏后的小模型。大小模型协同,各干各的活。
架构上叫VLA,三个字母我说人话:V是看得见,多相机多帧图像编码;L是想得明,互联网预训练的大模型蒸馏到车端跑得动的尺寸;A是开得动,轨迹解码直接输出方向和加减速。
最打动我的是可解释性。
英伟达放了一段车端实测对话。人问:你在干嘛?车答:我在停车标志前停车。
推理示例更生活化:因为前方有车所以减速;直行红灯所以停在停止线;保持车速,和前方闪着灯的救护车留出安全距离。
这些标注叫因果链推理,100%人工验证。
展开说一句:不是简单标这里有人、那里有车,而是标完整的因果——因为行人优先,所以减速,所以停车让行。模型学的不是动作,是行为背后的道理。
学会了道理就能举一反三。今天见过让行行人,明天遇到让行自行车,不用重新学,推理就能推出来。
我坐过带智驾的车,最难受的不是它开得慢,是不知道它下一秒想干嘛。人类司机互相理解,靠的就是预判意图:前车打了转向灯,你就知道要让。会解释自己的自动驾驶,才能真正融进人类的交通流。
英伟达把安全也单独拎出来讲,Halos安全体系管着从开发到部署的全流程。量产这件事,光聪明不够,还得让监管和保险都放心。
当然要泼盆冷水。仿真闭环不等于量产,实验室模型上车还要过功能安全这道大关,中间的距离以年计。
但至少这次,行业拿出了可复现的闭环证据,证明语言预训练对开车有实打实的增益。这一条,就够写进教科书了。
方向我认了:从拟合行为,到理解原因,这一步跨过去,自动驾驶的底层逻辑就变了。
你的车有智驾吗?高速敢放开手吗?城区呢?评论区说说你的胆量。
下一篇看终局:自动驾驶的下半场,拼的不是激光雷达,是推理。
#头号创作者激励计划##我要上头条##作者加速成长计划##汽车市场销量#