牛建伟-蔚来座舱多模态大模型的应用实践.docxVIP

蔚来座舱多模态大模型的应用实践演讲人：牛建伟

蔚来座舱多模态大模型的

应用实践

演讲人：牛建伟

蔚来

蔚来多模态大模型的价值定位01多模态大模型整体方案目录02视觉模态模型技术实践03听觉模态模型的技术实践04

蔚来多模态大模型的价值定位

01

多模态大模型整体方案

目录

02

视觉模态模型技术实践

03

听觉模态模型的技术实践

04

端侧部署方案

05

MLLM在蔚来座舱中的定位?多模态大模型是智能座舱3.0的底层核心技术之一，也是蔚来智能座舱塑造差异化的重要方向2025V3.0智能化V2.

MLLM在蔚来座舱中的定位

?

多模态大模型是智能座舱3.0的底层核心技术之一，也是蔚来智能座舱塑造差异化的重要方向

2025

V3.0

智能化

V2.0

科技化

2020

V1.0

网联化

2015

①AR-HUD+后排屏成标配

②基于MLLM的自然人机交互

③联通车内外的多模态感知能力

①小屏-GUI交互

②多媒体内容触达

③基础语音交互上车

①大屏多屏交互

②完善的语音交互系统

③基础舱内视觉感知能力上车

OMS/DMS/手势/守卫模式

MLLM在蔚来座舱中的定位?多模态大模型是支撑主动安全、主动个性化交互以及智能数字空间等体系功能的核心 NoMi 自然主动交互深度整合语音、视觉、车身信息，为用户提供更主动和个性化的交互方式，实现贴心自然的交互体验多模态大模型