上海车展近30款车型的智能驾驶和车舱竟都出自商汤
作者/IT时报记者孙妍
编辑/ 孙妍
智能汽车被认为是实现AI大模型闭环的理想场景,但GPT大模型“上车”后能不能让智能汽车脱胎换骨?
在2023上海车展上,《IT时报》记者看到,商汤已经将刚在4月10日推出的“日日新SenseNova”集成到车上,最先“上车”的是自然语言大模型商量和文生图大模型秒画。
当然,除了GPT大模型的装备竞赛,自动驾驶的硬实力还是量产落地的速度,本届车展上,便有近30款搭载商汤自动驾驶和智能车舱产品的车型展出。
去年27款车型量产交付
2022年,商汤绝影智能驾驶和智能车舱产品完成了27款车型的适配和量产交付,新增汽车定点数估计超过800万台,覆盖30多家车企的80多款车型。
商汤智能驾驶产品在广汽埃安AION LX Plus、哪吒S等多款车型上完成落地,这也让商汤成为国内率先服务车企量产L2+自动驾驶的Tier-1技术供应商。《IT时报》记者从上海车展获知,目前商汤智能驾驶落地进度最快的是广汽埃安AION LX Plus,其已实现高速NDA辅助驾驶功能,未来将进一步拓展城市场景。
在高工智能汽车研究院公布的“中国市场乘用车前装座舱AI软件供应商标配搭载量”相关排行榜单中,商汤以9.47万辆搭载上险量、15.79%的市场份额高居第一。
本次商汤展出的蔚来ES7就支持驾驶员疲劳状态实时提醒、人脸识别、儿童遗忘检测系统等。值得一提的是,商汤在视觉AI上的技术突破,可以应对驾驶员身高不同、坐姿不同、环境光照变化等干扰,长尾场景下播报准确率提升53%,小眼睛车主、睁闭眼和逆光等复杂场景下播报准确率提升47%,而且实时感知能力不受方向盘转动、位置变化影响。这些功能也同样应用于基于蔚来NT2.0平台的ET7、ET5等车型,未来还将延伸至蔚来更多核心车型中。
在上海车展展出的30多款商汤合作车型中,有搭载行业首个智能B柱交互系统的极氪X,用户可以无感进入、解锁和落锁车辆;有搭载驾驶员和乘客感知等功能的东风猛士917、广汽传祺E9、影酷以及M8宗师等车型;有搭载半分钟检出乘客多项健康指标的长安逸达亦;还有搭载智能车舱多项功能的高合HiPhi。
AI大模型“上车”
车子能不能成为“第三生活空间”,主要决定因素在于车子有多智能。在AI大模型出现之前,车内最吸引人的智能产品是会放影视剧的大屏、会导航的机器人以及会按摩的座椅等,或者是上述为了安全而定制的功能。
但没想到,以后车子可以像人一样与你对话,当儿童进入车内后,语音对话还会自动切换成儿童模式。当你把商汤“商量”大模型切换成邮件模式后,车子还会自动提炼邮件关键信息读给你听,并帮你恢复邮件。除此之外,在车上也能创作文档,生成旅游攻略等。
比起这些实用性功能,文生图大模型“秒画”更多的是提供行车趣味,在长途行车中避免小朋友因无聊而吵闹,语音输入你的描述,它就能自动生成各种风格的照片。
过去6年,商汤绝影已经累计发布超30款功能,其中10个功能为行业首发。本次车展上,商汤发布的6个功能是唇语唇动识别、哨兵模式、智能救援、隔空手势(Air Touch)、AR K歌、智能屏保等。
其中,商汤首创的纯视觉的“唇语唇动”识别功能,通过唇语即可发出超过40个命令词和唤醒词进行多种车内交互,避免人声干扰、播放音乐、高速风噪、高速胎噪等场景下的误触发。“隔空手势”顾名思义是让用户通过各种手势,隔空完成点击确认、拖曳等各类屏幕操作,且能做到鼠标级别的精准操控和实时响应。
当然,车辆的主要功能是安全地将乘客从A送到B,所以哨兵模式这类功能才更有可能成为标配。相较只能通过感知光线变化进行检测、误报率较高的传统模式,商汤将AI与环视相机结合在一起,可甄别车辆四周存在的威胁,可根据设置的敏感度进行不同级别警告,同时在夜间等低照度场景下也能有效减少误报发生。
记忆泊车才是大模型的范式突破
比起多出来的功能,大模型最先能引爆的功能还是聚焦于辅助驾驶这个核心功能上,而吸引车企的是实实在在的降本。
传统的行泊一体方案成本较高,往往要把各个停车场的立体地图数据提前录入并训练,形成高精度地图。但商汤一是让行车、泊车共用鱼眼相机,二是将数据录入的工作交给每辆车,车辆第一次进入一个没去过的停车场时就会录入数据,当车第二次进入该停车场时,它就能支持跨层停车场的路径记忆、路径循迹、智能避让以及目标车位泊入功能。
这就是简单理解下的记忆泊车,这才是“大算力+大模型”的范式突破,大模型不仅让商汤率先实现BEV感知在国内首批量产落地,还首创自动驾驶GOP感知体系。BEV感知比基线方法提升超60%的性能,3D感知能力更强,而自动驾驶GOP感知体系则将目标数据获取的人力成本降低94%,目前已投入量产。商汤跑出了全球最大的通用视觉大模型,可以高精度识别3000多种物体目标,降低智能驾驶对激光雷达和高精度地图的依赖。
日日新大模型还能进行自动化数据标注和产品检测,不仅降低了人工标注的成本,将模型迭代效率提升数百倍,更完成了数据闭环体系,目前已获得知名车企的定点。
截至目前,商汤绝影已与全球范围内超过30家车企合作,拥有超50个生态合作伙伴,累计前装定点数量超3100万台。
通用人工智能掀起了研究新范式,也将重塑智能汽车研发体系,而商汤的野望是做智能汽车时代的通用人工智能核心供应商。商汤科技联合创始人、首席科学家、绝影智能汽车事业群总裁王晓刚在2023上海车展上提到,智能汽车是AGI实现闭环的理想场景,车和AI模型之间产生更多有效互动,完成从人到车到AI模型的互动闭环。
排版/ 季嘉颖
图片/ IT时报 商汤
来源/《IT时报》公众号vittimes
E N D