大模型融入智能汽车,商汤“车舱大脑”打造拟人化交互体验
北京青年报客户端 2023-08-27 11:45

“智能汽车是AGI(通用人工智能)实现闭环的理想场景,希望车和AI模型之间产生更多有效互动,完成从人到车到AI模型的互动闭环,让通用人工智能带来更好的驾乘体验,解锁无限想象空间。”2023上海车展期间,商汤科技联合创始人、首席科学家、绝影智能汽车事业群总裁王晓刚说。

随着AI大模型时代的到来,智能汽车行业将迎来新一轮的变革。大模型的自学习算法能力在汽车自动驾驶过程中发挥的关键作用,主要体现在感知和决策层面,能够在处理路面复杂情况时具有推理能力,以及像人一样思考的能力。大模型可以处理海量数据,同时具备多维度分析能力,可以提供更精准、更全面的数据分析和预测能力。保持对大模型的优化升级,可以提高智能驾驶的准确性和可靠性。

“商汤日日新SenseNova”大模型体系的发布帮助商汤绝影在智能汽车领域占得先机。商汤绝影智能座舱、智能驾驶、车路协同等行业应用已在大模型的加持下突破创新边界。融合视觉、语音和自然语言理解的多模态交互,正在引领智能车舱的创新。“日日新SenseNova”大模型体系拥有语言大模型以及数字人等多种生成式AI能力,可为车舱提供更智能和人性化的多模态人车交互体验。

未来的智能座舱将成为有温度,能够更加懂你出行的管家,能够全方位的感知和理解乘客的需求。为此,商汤绝影提出了在大模型时代的解决方案,打造了全新智能座舱架构:车端和云端为底层支撑,智能车舱大脑为核心,不同风格的定制化数字人交互呈现各类智能应用,实现座舱如人一般的智能。

通过视觉、听觉等多模态融合,全方位感知用户需求,并通过标签化数据记录用户习惯和偏好,提供专属个性服务。同时可支持形象、语音快速定制的数字人进行拟人化交互。目前车舱已具备健康问诊、旅游规划、儿童伴读和AR说明书等智能座舱应用。

绝影智能座舱产品量产落地经验极其丰富,目前行业客户40+,定点车型60+,定点车辆数量近2500万。比如东风本田e:NS1与广汽本田e:NP1,就是全系搭载由商汤提供的DMC驾驶员状态感知系统。可对驾驶员的表情、视线、姿态动作进行实时感知,准确判定疲劳、分心、危险动作等危险驾驶行为,并将结果快速反馈给DMC驾驶员状态感知系统,及时预警。

“日日新SenseNova”大模型体系也已经为商汤的自身业务带来了许多突破,商汤科技整体业绩也步入了良性增长的新阶段。财报显示,2022年商汤集团营业收入38亿元人民币,毛利率达67%。公司两大核心业务收入实现了持续快速增长,其中,智慧生活板块同比增长130%;智能汽车板块同比增长59%,两大板块收入贡献占比也大幅提高,公司整体收入结构更稳定多元。

随着商汤大模型体系的持续完善,商汤绝影也将伴随通用人工智能技术的浪潮,持续提升技术研发效率与产品化能力,并在此基础上不断拓展智能车舱的交互边界以及智能驾驶的适用场景,共同奔赴人车共驾、人车共智新时代。

相关阅读
J.D. Power 发布最新研究成果:AI技术应用突破智能座舱同质化困局
北京青年报客户端 2024-12-12
“端到端”智驾迅速蹿红:2025年成“上车”大年、数据或为核心资产
财联社 2024-11-30
“无网区”变“交互区” 端侧大模型赋能汽车行业
证券日报 2024-10-25
大模型“上车”的冷与热
21世纪经济报道 2024-08-29
商汤科技日日新大模型亮相巴黎,将用于赛事转播、竞技分析等领域
北京青年报客户端 2024-07-25
世界人工智能大会2024|绝影L4级自动驾驶小巴已经面向公众进行日常运营
北京青年报客户端 2024-07-06
商汤科技发布“日日新5o” 实时多模态流式交互对标GPT-4o
北京青年报客户端 2024-07-05
国产大模型,烧出个未来?
中国基金报 2024-06-30
最新评论