理想正式启动端到端+VLM的早鸟计划:让自动驾驶成为老司机
7月5日消息,理想在今晚的智能驾驶夏季发布会上宣布,正式启动端到端+VLM的早鸟计划。
据介绍,端到端大的特点就是取掉了NPN,不依赖于先验信息,可以真正实现全国都能开,有导航就能开。

端到端模型则更进一步,通过传感器将数据输入模型,就能直接输出行驶轨迹。
通过车内的端到端和大模型部署,可以让自动驾驶快速处理,延迟更低、上限更高,用户所能感受到整套系统的动作、决策更加拟人。

VLM则是视觉语言模型,整体算法架构是由一个统一的Transformer模型组成,将Prompt(提示词)文本进行Tokenizer(分词器)编码,然后将前视120度和30度相机的图像以及导航地图信息进行视觉信息编码,通过图文对齐模块进行模态对齐,统一交给VLM模型进行自回归推理。
VLM输出的信息包括对环境的理解、驾驶决策和驾驶轨迹,并传递给系统1控制车辆。

VLM会时时刻刻思考当前的驾驶环境,给系统1合理的驾驶建议,同时系统1也可以在不同场景下调用不同的Prompt问题,主动向系统2进行求助,帮助系统1解决部分场景。
简单来说,VLM可以让车辆具有思考能力,让自动驾驶的操作更像人类老司机的处理方式。
本文链接:http://www.vogav.com/v3562.html理想正式启动端到端+VLM的早鸟计划:让自动驾驶成为老司机
-
比亚迪秦L不同工况百公里亏电油耗相差近1升:一文读懂NEDC和WLTC
5月29日消息,昨日比亚迪发布了第五代DM混动技术,首款搭载该技术的车型为秦L,在NEDC工况下,该车百公里亏电油耗仅2.9升,不过在工信部申报名录中,该车WLTC工况
-
不会和蔚来分家!李斌:乐道没有单独上市的计划
5月16日消息,日前,蔚来创始人李斌在接受采访时表示,我们并没有准备把乐道变成一个独立的品牌。此外,李斌还表示,对于乐道品牌,蔚来并没内有让其单独上市的计
-
欧洲大!阿姆斯特丹蔚来中心正式开业:李斌亲自剪彩
5月24日消息,蔚来汽车在荷兰阿姆斯特丹的蔚来中心正式开业,该门店也是当前欧洲大的一家蔚来中心。蔚来创始人李斌在开业活动中宣布,当蔚来在欧洲市场的年
-
李想:第三季度理想推无图NOA、晚明年初推L3级自动驾驶
6月8日消息,理想汽车CEO李想今日出席了2024中国汽车重庆论坛并发表演讲。李想表示,去年9月份理想专门建立了一个自动驾驶研究团队,而在过去半年多的时间
-
能否取代埃尔法!腾势D9登陆香港:意向售价66.8万港币起
6月11日消息,我们从腾势汽车官方获悉,腾势汽车近日正式宣布进军香港市场,其旗舰车型腾势D9的意向售价定为66.8万港币起,首家旗舰店在九龙湾汽车商圈盛大开
-
大型纯电SUV中保值的国产品牌!蔚来三年保值率均在60%以上
6月5日消息,日前,中国汽车流通协会和精真估联合发布了《2024年5月中国汽车保值率研究报告》。报告显示,与4月相比,5月各级别车型的保值率都有不同程度下滑