9月5日——德国慕尼黑,“IAA MOBILITY 2023”——德国国际汽车及智慧出行博览会在慕尼黑盛大开幕。“智能汽车时代的通用人工智能核心供应商”商汤绝影上演欧洲首秀,开启国际化新征程。基于以座舱大脑为核心的全新智能座舱架构,商汤绝影在本次博览会上首次全方位展示了智能座舱大模型产品体系,以大模型技术直击多种出行痛点,将安全舒适、极简交互以及个性懂你的智能座舱体验带到全球消费者面前,彰显了AGI时代商汤绝影领先的大模型技术创新、精准的用户洞察和量产落地实力。
IAA MOBILITY是世界五大车展之一, 也是欧洲规模最大的国际性车展之一。随着中国汽车行业企业积极参与全球化,IAA MOBILITY也成为中国企业快速走向欧洲市场,进军全球市场的新平台。启程自2016年与本田的合作,7年来商汤绝影与超过30家国内外新势力车企、传统车企和合资车企强强联合,累计前装定点数量已超3600万台。此次借IAA MOBILITY舞台进一步拓展国际化布局,不仅是商汤绝影在核心技术领域扎实前行、持续开拓行业创新与量产落地的最新成果,也是中国汽车工业全球化发展的重要体现。
商汤科技联合创始人、首席科学家、绝影智能汽车事业群总裁王晓刚作为中国汽车供应链杰出代表,受邀参加IAA首次举办的中国媒体沟通会,同时还在车展期间带来题为《通用人工智能时代下的智能汽车》的主题演讲。王晓刚表示:“商汤绝影自诞生起就蕴含着国际化的基因,在多年的创新与实践中逐步发展成为驾、舱、云三位一体的架构体系,如今走向全球恰逢其时。此次车展可以说是AGI时代一个令人兴奋的新起点,我们期待将长期沉淀的大模型技术能力和量产经验带给全球客户,让智能座舱变成暖心懂你的好管家,让智能驾驶变成安全可靠的老司机,共同开启人机共驾的新体验。”
智能座舱大模型产品体系首次亮相,打造“真正懂你”的管家式体验
座舱是汽车智能化的重要组成部分,然而当前大部分智能座舱只能提供单点功能,且基于固有规则触发,体验较为繁琐。而大模型强大的环境理解、逻辑思维和内容生成能力,可以将离散的单点功能串联在一起,将“真正懂你”的管家式体验带进现实。在今年4月上海车展期间,商汤绝影就将商汤商量大语言模型和商汤秒画文生图模型与座舱场景结合,首次展示了“大模型上车”的魅力。不到半年时间,商汤绝影便以高效的创新速度进一步完成了以座舱大脑为核心的架构升级,并将完整的智能座舱大模型产品体系带到博览会现场。
商汤绝影智能座舱大模型产品体系以商汤“日日新SenseNova”大模型体系为底座,结合先进的多传感器融合感知能力,通过智能决策系统车载大脑,从安全、娱乐、教育、效率四大场景出发,构建了包括旅游攻略、儿童模式、AI说明书、驾乘守护、健康问诊、多元SenseChat、隔空作画等一系列用户可感知可体验的产品,并通过数字人作为用户感知的窗口,真正打造“更懂你、有思想、有逻辑”的车载管家。
例如,在用户驾驶途中,“旅游攻略”不仅可通过主动、多轮对话了解用户诉求,还能利用地图App为用户输出个性化的旅游计划,同时还能根据用户反馈逐步细化住宿、交通等攻略细节,让旅游更省心;在全家出游时,“儿童模式”可以为不同年龄段的孩子们提供有趣的故事伴读和互动问答,还能和孩子们共读古诗词、共创故事,引导和开发儿童想象力,让旅途充满温馨氛围;当用户遇到车辆问题时,可以查询“AI说明书”。与传统呆板的单一问答式查询不同,“AI说明书”可借助大模型的长文本理解等能力,让用户只需通过自然语言与系统交流,就能随时获取各类车辆信息,轻松解决各种问题。
除了智能化场景的持续拓展,商汤绝影也在大模型的加持下不断推进前沿技术的更新迭代,成功突破多种长尾场景和工程化难题。例如,商汤绝影与国内车企紧密合作,将各种遮挡、眼睛反光、头姿视线不一致、不同坐姿、小眼睛、大角度等长尾问题的误报率大幅降低,客诉率降至万分之一,达到行业领先水平。商汤绝影还通过了欧盟DDAW(驾驶员嗜睡和注意力警告)认证,且测试结果远高于DDAW的法规要求,并达到Euro NCAP(欧洲新车安全评鉴协会)高分评价标准,为合作车型在欧洲上市保驾护航。
得益于领先的多模态高精度融合感知技术和多年积累的智能座舱工程化实践经验,商汤绝影智能座舱大模型产品体系致力于通过座舱大脑实现对用户需求的全方位理解,以驾乘安全为红线,打造极简的人机交互体验及个性化的成员关怀服务,持续拓展车载AI应用生态,并针对各类刚需场景做到日日更新,最终带来安全性、便利性和娱乐性兼具的第三生活空间。
全球之旅率先启程,商汤绝影助力蔚来、高合进军国际市场
作为具有国际化基因的智能汽车通用人工智能核心供应商,商汤绝影的欧洲之旅已先于本次博览会启程。目前,商汤绝影的定点车型中有近20款海外车型,已助力蔚来、高合等国内一流汽车品牌进军国际市场,共同将极“智”懂你的智能座舱体验带给海外用户。
目前,蔚来在欧洲售卖的全系5款车型已全部搭载商汤绝影的多项AI技术,带来人性化、智能化、场景化的智能车舱体验。比如,商汤绝影Face ID技术可以在用户落座后,一步到位将各项个性化设置调整为用户的个人偏好。当感知到舱内乘员时,系统还会自动调节空调风向,营造更智能舒适的舱内环境。儿童关怀&儿童遗忘检测系统还可在感知到儿童意外留置车内时,及时反馈给NOMI语音助手,暖心守护家人安全。
商汤绝影与高合汽车的深度合作,同样将智能温馨的体验带给广大欧洲用户。例如,高合HiPhi X豪华超跑SUV可通过B柱验证驾驶员身份,让用户无感上车,解放双手。高合HiPhi Z豪华纯电超跑GT则同时搭载了DMS驾驶员感知系统与OMS乘员感知系统,不仅可及时预警驾驶员疲劳分心状态,还可智能感知乘员手势进行美颜拍照,一路守护驾乘安全的同时丰富车载娱乐体验。
除了智能座舱,商汤绝影作为国内第一批率先激活L2++级别自动驾驶量产的服务商,也在大模型的加持下,实现了核心技术的再度突破。商汤联合团队提出的UniAD(Unified Autonomous Driving)感知决策一体化自动驾驶通用大模型框架获得2023年度CVPR最佳论文,首次将检测、跟踪、建图、预测及规划整合到一个基于 Transformer 的端到端网络框架下,实现多目标追踪准确率提升20%、车道线预测准确率提升30%、目标轨迹预测误差下降38%、规划误差下降28%。新算法的量产预计将于2023年四季度准备就绪,进一步提高绝影自动驾驶产品的行业竞争力。
随着汽车智能化需求日渐高涨,渗透率不断提升,绝影也在以高质量的交付,扎实推进智能座舱和智能驾驶的规模化落地,为国际化拓展打下坚实基础。今年上半年,商汤绝影量产业务实现5.7倍同比增长,量产交付数量达到39万台车,新增定点数量达500多万台,累计定点车型160多款。根据国内知名调研机构最新发布的2023年第一季度中国市场乘用车智能座舱软件供应商前装市场份额榜单,绝影排名第一。
德国作为现代汽车产业的发祥地,为全球汽车工业的发展产生了长达一个多世纪的影响。在百年不遇的智能化变革的交叉口,AI大模型成为产业升级的核心驱动力。在以“大模型+大算力”推动AGI发展的战略布局下,商汤绝影希望以IAA MOBILITY为舞台,推动大模型“脱虚向实”,与全球车企一同突破创新边界,打开智能汽车的无尽想象空间,推动驾乘体验跃迁升级。