理想正式启动端到端+VLM的早鸟计划：让自动驾驶成为老司机
7月5日消息，理想在今晚的智能驾驶夏季发布会上宣布，正式启动端到端+VLM的早鸟计划。
据介绍，端到端大的特点就是取掉了NPN，不依赖于先验信息，可以真正实现全国都能开，有导航就能开。
端到端模型则更进一步，通过传感器将数据输入模型，就能直接输出行驶轨迹。
通过车内的端到端和大模型部署，可以让自动驾驶快速处理，延迟更低、上限更高，用户所能感受到整套系统的动作、决策更加拟人。
VLM则是视觉语言模型，整体算法架构是由一个统一的Transformer模型组成，将Prompt（提示词）文本进行Tokenizer（分词器）编码，然后将前视120度和30度相机的图像以及导航地图信息进行视觉信息编码，通过图文对齐模块进行模态对齐，统一交给VLM模型进行自回归推理。
VLM输出的信息包括对环境的理解、驾驶决策和驾驶轨迹，并传递给系统1控制车辆。
VLM会时时刻刻思考当前的驾驶环境，给系统1合理的驾驶建议，同时系统1也可以在不同场景下调用不同的Prompt问题，主动向系统2进行求助，帮助系统1解决部分场景。
简单来说，VLM可以让车辆具有思考能力，让自动驾驶的操作更像人类老司机的处理方式。
本文链接：http://www.vogav.com/v3562.html理想正式启动端到端+VLM的早鸟计划：让自动驾驶成为老司机
-
乐道艾铁成：首车L60将于9月上市交付 第二款车型将提供6/7座布局
5月28日消息，乐道汽车的CEO艾铁成在NIO Radio直播间分享了公司的新动态，包括即将上市的乐道L60 SUV。他透露，L60计划在9月上市并交付给消费者。此外，艾铁
-
电动车补能体验秒杀超充！一汽集团正式加入蔚来换电联盟
5月22日消息，5月21日，蔚来与中国一汽在长春签署战略合作框架协议。根据协议，双方将在新能源汽车产业生态上下游开展全方位、多层次的深度战略合作。包括
-
雷军建言李斌：做个后排屏贵得一塌糊涂、建议大家把标准统一起来
5月20日消息，小米雷军今日带队访问了蔚来汽车，并和蔚来李斌等进行了面谈。在会议室里，雷军再次提到了统一车内生态标准的话题，其表示：做个后排屏这样的车内
-
全国换电站、充电桩多的品牌！蔚来第800座高速换电站上线
5月20日消息，我们从蔚来汽车官方获悉，其第800座高速换电站已于5月20日在G3京台高速开化服务区正式投入运营。目前，蔚来在全国累计布局了2,420座换电站和2
-
超越鸿蒙智行 理想5月销量公布：交付3.5万辆坐稳新势力第一
6月1日消息，又到了月初各家公布上月销量成绩的时候，理想汽车率先交卷，上月交付35020辆，同比增长23.8%，超越鸿蒙智行，坐稳新势力第一名。不止如此，截至目前理
-
累计销量超33万台！比亚迪4月销量公布：同比增长38.2%
6月2日消息，比亚迪今日发布了5月的销量报告。据悉，比亚迪在5月的销量表现亮眼，共售出331,817辆汽车，其中乘用车销量达到330,488辆，同比增长38.2%。2024年1
