专注于分享
分享好资源

商汤绝影三度亮相上海车展 AI大模型打造智能汽车量产落地新范式

4月19日——上海,2023上海国际汽车工业展览会隆重举办,本届车展主题为“拥抱汽车行业新时代”,聚焦科技浪潮下汽车产业的创新变革。商汤绝影携驾、舱、云三位一体的产品体系第三次亮相上海车展,不仅展现了全栈智能驾驶解决方案,更于行业首发6大智能车舱新品,以极“智”感知能力,智绘未来汽车全新体验。同时,本届车展上还有近30款商汤绝影的合作车型亮相,实力彰显绝影作为业内少有,同时拥有智能驾驶和智能车舱能力的供应商的行业领导力。

当前,通用人工智能掀起了研究新范式,也将重塑智能汽车研发体系,创造全新可能性。作为AI领域的创新代表,商汤科技联合创始人、首席科学家、绝影智能汽车事业群总裁王晓刚受邀出席国际汽车关键技术论坛并发表主题演讲。他提到,智能汽车是AGI实现闭环的理想场景,希望车和AI模型之间产生更多有效互动,完成从人到车到AI模型的互动闭环,让通用人工智能带来更好的驾乘体验,解锁无限想象空间。商汤绝影致力于成为智能汽车时代的通用人工智能核心供应商。

从智驾到智舱,绝影扎实助力车企智能化落地

2022年,绝影智能驾驶和智能车舱产品完成了27款车型的适配和量产交付,新增汽车定点数估计超过800万台,覆盖30多家车企的80多款车型。本届车展上便有近30款搭载绝影产品的合作车型展出。通过与合作伙伴共同深挖车载感知数据的价值,绝影致力于将商汤智慧产业生态向智能汽车服务输出,实现与汽车产业和生态共生共赢。

在智能驾驶领域,绝影领航驾驶产品在广汽埃安AION LX Plus、哪吒S等多款车型上完成落地,递交量产答卷。商汤绝影也是国内率先服务车企量产L2+功能的Tier-1技术供应商。车展现场,商汤绝影展台展示了搭载绝影量产智能驾驶的广汽埃安AION LX Plus。通过稳定的环视BEV感知能力和强大的通用目标感知能力,绝影助力该车型实现了高速NDA辅助驾驶功能,可完成众多高难度的感知任务。未来,城市场景也将进一步实现拓展与覆盖。此外,合作车型哪吒S也在车展期间亮相,商汤绝影全栈智能驾驶解决方案将为消费者带来安全可靠、高效舒适的高速领航辅助驾驶体验。

在智能车舱板块,商汤绝影以极“智”感知能力,带来高安全、智交互、个性化的驾乘体验。绝影此次展出的蔚来ES7支持出行场景下对驾驶员的疲劳状态进行实时提醒,同时助力提供Face ID、儿童遗忘检测系统等乘员感知技术。尤其值得一提的是,通过领先的视觉AI技术,绝影对驾驶员注意力检测升级为3D空间建模方案,应对不同驾驶员身高、坐姿习惯及环境光照等干扰,长尾场景下播报准确率提升53%;同时针对特定模型持续优化,针对小眼睛用户、睁闭眼及逆光等复杂场景下播报准确率提升47%。绝影还助力实现了基于方向盘管柱位置的感知能力,实时感知效果不受方向盘转动、位置变化影响。这些功能也同样应用于基于蔚来NT2.0平台的ET7、ET5等车型,未来还将延伸至蔚来更多核心车型中。

商汤绝影还为本次车展的重磅新车极氪X行业首个智能B柱交互系统提供软件的解决方案,让用户可以无感进入,轻松解锁和落锁车辆。在本届车展亮相的东风猛士917,广汽传祺E9、影酷以及M8宗师等车型也会搭载商汤绝影驾驶员感知和乘员感知的多项功能。高合HiPhi也与绝影智能车舱的多项先进功能进行了合作,将智能温馨的驾乘体验带给驾驶员和乘客。上市即热销的长安逸达亦搭载了绝影健康检测产品,可在不到半分钟内检测出车舱乘员的多种健康指标,带来车载健康管理新体验。

车展期间,商汤绝影还与中国汽车电子行业龙头企业航盛电子签订战略合作协议,双方将充分发挥各自在智能驾驶、智能座舱等领域的技术和优势,共同研发出更加智能化和高效的解决方案,推进技术的应用和商业价值的提升。

商量、秒画“上车”,AI大模型智绘“第三生活空间”

融合视觉、语音和自然语言理解的多模态交互,正在引领智能车舱的创新。商汤全新推出的“日日新SenseNova”大模型体系拥有语言大模型以及数字人等多种生成式AI能力,可为车舱提供更智能和人性化的多模态人车交互体验。在绝影展台,与商汤大模型体系深度融合的绝影未来展示舱升级亮相,重构未来车舱体验,打造真正的智能化“第三生活空间”。

当体验嘉宾来到绝影未来展示舱前,商汤AI数字人会主动问候并引导嘉宾落座。在展示舱内,商汤语言大模型“商量SenseChat”会与嘉宾交流互动,并推荐个性化体验内容,例如儿童上车后会自动推荐进入儿童模式。商量SenseChat还支持邮件模式,会自动提炼邮件关键信息,帮助用户节省阅读时间。“秒画SenseMirage”文生图创作平台亦首次与展示舱结合,借助商汤AIGC模型能力自动为嘉宾生成各种风格的照片,让出行充满乐趣。

基于大模型的强大能力,绝影致力于通过持续创新、量产实践,以及全生命周期体验迭代,不断打造满足客户需求、超出用户预期的量产功能。在过去6年时间里,商汤绝影已累计发布超过30款功能,其中超过10个功能为行业首发。在本次车展上,商汤绝影又带来唇语唇动识别、哨兵模式、智能救援、隔空手势、AR K歌、智能屏保等6款创新产品首发,再次突破智能车舱创新边界。

其中,商汤绝影首创的基于纯视觉的“唇语唇动”识别功能,利用多模融合算法,让用户通过唇语即可发出超过40个命令词和唤醒词进行多种车内交互,避免人声干扰、播放音乐、高速风噪、高速胎噪等场景下语音交互的误触发。“隔空手势”则可让用户通过各种手势,隔空完成点击确认、拖曳等各类屏幕操作,且能做到鼠标级别的精准操控和实时响应,为人机交互带来更多便捷。

哨兵模式正成为越来越多车型的安全功能标配。相较只能通过感知光线变化进行检测,误报率较高的传统模式,商汤绝影创新地将AI与环视相机结合在一起,可智能甄别车辆四周存在的威胁,有效减少误报发生。哨兵模式还可根据设置的敏感度进行不同级别警告,同时在夜间等低照度场景下也能提供更好的性能表现。

引领感知技术突破,AI大模型打造量产智能驾驶落地新范式

凭借多年自动驾驶技术积淀,商汤绝影已构建了全栈的智能驾驶能力,并打造了行泊一体解决方案,赋能车企客户推进智能驾驶全场景打通和落地应用。商汤绝影SenseAuto Pilot Entry通过行车功能复用泊车鱼眼相机,为客户提供极具性价比的解决方案。绝影的记忆泊车产品则支持跨层停车场的路径记忆、路径循迹、智能避让以及目标车位泊入功能,实现大型多层停车场的跨层路线记忆。

产品方案的持续创新离不开“日日新SenseNova”大模型体系的支持,不仅使商汤绝影率先实现BEV感知在国内首批量产落地,还首创自动驾驶GOP感知体系,充分提升数据利用效率,引领感知技术突破。其中,商汤环视感知算法BEVFormer++获得2022年Waymo挑战赛冠军,相比基线方法有着超60%的性能提升,3D感知能力领跑行业。商汤绝影的自动驾驶GOP感知体系可将目标数据获取的人力成本降低94%,目前已投入量产。凭借通用视觉模型,绝影有效实现了对超过3000种物体目标的高精度识别,降低智能驾驶系统对激光雷达和高精度地图的依赖。

商汤绝影亦积极推进自动驾驶技术研发体系的创新,加速构建感知决策一体化的自动驾驶多模态模型,带来更强的环境、行为、动机解码能力。自主研发的UniAD更成为业界首个感知决策一体化的端到端自动驾驶解决方案。此外,商汤绝影还利用大模型进行自动化数据标注和产品检测,搭建的完整数据闭环体系,将模型迭代效率提升数百倍,目前已获得知名车企的定点。

截至目前,商汤绝影已与全球范围内超过30家车企合作,拥有超50个生态合作伙伴,累计前装定点数量超3100万台。随着商汤大模型体系的持续建设,绝影也将伴随通用人工智能技术的浪潮,实现技术研发效率和产品化能力的不断提高,不断拓展智能车舱的交互边界以及智能驾驶的适用场景,共同奔赴人车共驾、人车共智新时代。