理想正式启动端到端+VLM的早鸟计划：让自动驾驶成为老司机
7月5日消息，理想在今晚的智能驾驶夏季发布会上宣布，正式启动端到端+VLM的早鸟计划。
据介绍，端到端大的特点就是取掉了NPN，不依赖于先验信息，可以真正实现全国都能开，有导航就能开。
端到端模型则更进一步，通过传感器将数据输入模型，就能直接输出行驶轨迹。
通过车内的端到端和大模型部署，可以让自动驾驶快速处理，延迟更低、上限更高，用户所能感受到整套系统的动作、决策更加拟人。
VLM则是视觉语言模型，整体算法架构是由一个统一的Transformer模型组成，将Prompt（提示词）文本进行Tokenizer（分词器）编码，然后将前视120度和30度相机的图像以及导航地图信息进行视觉信息编码，通过图文对齐模块进行模态对齐，统一交给VLM模型进行自回归推理。
VLM输出的信息包括对环境的理解、驾驶决策和驾驶轨迹，并传递给系统1控制车辆。
VLM会时时刻刻思考当前的驾驶环境，给系统1合理的驾驶建议，同时系统1也可以在不同场景下调用不同的Prompt问题，主动向系统2进行求助，帮助系统1解决部分场景。
简单来说，VLM可以让车辆具有思考能力，让自动驾驶的操作更像人类老司机的处理方式。
本文链接：http://www.vogav.com/v3562.html理想正式启动端到端+VLM的早鸟计划：让自动驾驶成为老司机
-
研发大涨64.6% 现金储备989亿行业领先
5月20日，理想汽车发布第一季度财报，季度总收入达到256亿元，同比增长36.4%，在“比特理”三家中增速第一。季度末现金储备989亿元，在手现金在中国
-
油耗2.9续航2100！比亚迪发布全球先进插混：9.98万工业奇迹开回家
比亚迪刚刚抛出新一代混动系统，真黑科技，真颠覆燃油车：百公里油耗2.9升，综合续航2100公里，王传福公开说：“世界上先进的插混技术在中国”。用户福
-
李斌介绍蔚来汽车技术：丧心病狂、全球天花板
6月2日消息，在2024年6月1日至2日举办的第二届未来汽车先行者大会上，蔚来汽车的创始人、董事长兼CEO李斌用“丧心病狂”和“全球天花板&r
-
欧洲大！阿姆斯特丹蔚来中心正式开业：李斌亲自剪彩
5月24日消息，蔚来汽车在荷兰阿姆斯特丹的蔚来中心正式开业，该门店也是当前欧洲大的一家蔚来中心。蔚来创始人李斌在开业活动中宣布，当蔚来在欧洲市场的年
-
全球首座蔚来第四代换电站上线：第一次给了乐道L60
6月13日消息，就在今日，全球首座蔚来第四代换电站正式上线，这座换电站的第一次换电任务给了蔚来子品牌首车乐道L60。不止如此，第四代站支持多品牌、多车型
-
2000万辆新能源车质保将到期：蔚来李斌再呼吁关注电池寿命
6月8日消息，2024中国汽车重庆论坛闭幕全体会议今日举行，蔚来创始人、董事长李斌参会，并分享了蔚来的发展成果和对行业的思考。李斌称，在刚刚过去不久的5月
