2026年6月26日,联友智连科技有限公司舱驾开发服务部总监杨威在第八届AI智能座舱大会暨2026第四届车载显示与感知技术革新峰会上,介绍公司推出的AI原生多模态推理平台MSP(Multimodal Reasoning Service Platform)。
杨威指出,智能座舱交互已历经物理按键、屏幕触控、语音指令三个阶段,正进入以AI大模型驱动的多模态自然交互第四阶段。传统三段式语音架构存在句式固定、理解能力弱、模块割裂、OTA升级缓慢等问题,难以融合摄像头、车控信号及环境数据。MSP平台采用ReAct引擎形式,将语音、图像、GUI、舱内外摄像头、底盘CAN信号等多源输入统一接入多模态大模型,取消前端格式化区分,实现原生多模态信号处理。
该平台以单一多模态大模型作为统一“AI大脑”,位于核心推理层,负责意图深度理解与技能调度;执行层则以原子化技能形式暴露全部车载能力,实现推理层与输入源、技能模块的完全解耦。为支撑个性化服务,平台内置双通道记忆引擎:长期记忆偏好记录用户明确表达的温度设定、常去地点、音乐风格等;情景记忆引擎支持上下文关联,如响应“还想去昨天的地方”或“上次看的电影继续播放”,所有记忆数据本地存储于车端磁盘,随使用频次自动筛选更新。
针对大模型幻觉风险,平台引入安全门机制。注册新技能时需明确定义其安全边界与权限约束,系统在调用时自动裁决是否执行、降级或拒识。例如夜间行驶中收到“关闭大灯”指令,系统依据预设规则拒绝执行;高速公路行驶时对“开窗”请求自动拦截,雨雪天气亦纳入约束条件,所有安全规则以自然语言描述完成配置。
目前MSP已在多个场景落地验证:可连续解析模糊口语指令“最近听到一首歌,歌词叫什么暗恋的烟火,是什么歌来的”,并自动完成识别、播放与收藏;支持误退出导航后的“再给我导航去刚刚的地方”恢复操作;支持“想抽烟”触发车窗、天窗、空调联动,“车里好热”触发温度与风量组合调节;舱内手势、DMS、OMS等视觉信号可直输大模型,用于危险行为识别与AI哨兵增强应用。
当前平台在响应性能与交互质量方面已达较好水平。未来挑战集中于三方面:一是隐私合规压力下端侧大模型部署需求迫切,但主流座舱芯片8155、8295难以高效运行7B及以上参数模型,需推进算力平台升级与模型轻量化;二是伴随电子电气架构演进,更多ECU与域控制器需打通数据,接入原子化技能以扩展服务边界;三是端侧“大脑”的推理准确性、鲁棒性及实时性仍需持续优化。
联友智连科技有限公司成立于2021年3月,注册资本2亿元人民币,为深圳联友科技有限公司全资子公司,聚焦智能网联、智能域控、AI大模型及智能舱驾产品研发与开发服务。
免责声明:本文内容由开放的智能模型自动生成,仅供参考。



