突破！面壁联合梧桐科技，高效端侧模型落地芯算一体AI座舱 | 速途网

2023 年开始，大模型上车，几乎成为了所有车企紧迫的必修课。

当下智能汽车主要的卖点，已经转移到自动驾驶和智能座舱上。由智驾芯片和座舱芯片支撑的智驾系统和智能座舱，成为中国车企塑造用户体验的王牌。而比起自动驾驶，智能座舱的升级竞赛更紧迫，更具可行性，落地效果立竿见影。

2024 年 9 月，面壁智能成为 TINNOVE 梧桐科技芯算一体 AI 座舱方案中端侧大模型重要合作伙伴，以 MiniCPM 车载多模态大模型实现舱驾协控相关的功能控制。这也是面壁 MiniCPM 端侧多模态模型首次支撑汽车智能座舱的系统底座。

此次面壁智能的合作方梧桐科技，是国内最早布局智能空间领域的科技公司，为中国汽车行业提供标杆性的整合产品和解决方案，目前已与 10 余家主机厂伙伴，合作超过 100 余款各类车型，如奥迪 A3、奥迪 A7、奇瑞捷途 X70、长安 CS75 PLUS、长安启源 A07 等，覆盖自主品牌、合资品牌、豪华品牌，产品装机量已超过三百万辆，市场辽阔！

MiniCPM端侧多模态模型首“上车”

如果将智能汽车视为新一代“智能终端”，智能座舱是汽车终端全新的“交互界面”，大模型在智能座舱中起到的关键作用，不仅仅是服务感官极致舒适的智能化驾乘空间，也正在创造我们与汽车的一种全新关系。

1.从传统固定用词的指令交互、语音助手的被动唤醒，向更加主动、贴近自然语言“口语会话”，MiniCPM 显著提升了座舱和乘客之间的交互能力。

MiniCPM 端侧模型发挥复杂意图理解、模糊语义理解、上下文记忆的强大能力，在“人车交互”的多轮对话、识别准确率、复杂语音命令、自动语音纠错上，达到了相当高的可靠性和交互流畅度。

MiniCPM 支持更复杂、更自然的多轮对话，比如“我想去离这里最近的星巴克，但是路上要经过一个加油站，可以顺便加油吗？”，理解用户表达中的歧义和不确定性。当用户说“有点饿了”，大模型可以根据上下文推断用户可能想吃的是什么，并提供相应的建议。同时，对话过程保持连贯性，避免重复提问。

2.学习车内车外多模态数据，MiniCPM 以数据驱动场景，基于用户习惯自动响应，乃至提供主动服务。

加入 MiniCPM 的 AI 座舱方案包括「知识查询」和「人-车-环境感知融合」的多模态增强理解模块。比如车载屏幕理解与控制、自动提醒用户，MiniCPM 结合指令控制屏幕进行操作，无需第三方应用的数据集成。

车内，全场景识别能力大幅提升，包括精准的危险驾驶、疲劳驾驶识别，座舱内场景识别，音乐、氛围灯、乘客情绪、人员关系、儿童遗留识别，MiniCPM 根据场景和人物识别触发操作建议。

车外，全场景识别能力也大幅提升，包括提升哨兵模式识别、判断和交互能力，街景、建筑（停车场、超市、加油站等）识别能力，从而自动提醒，辅助导航。

智能座舱端侧大模型时代到来

IHS Markit 数据统计，2023 年中国市场座舱智能配置水平的新车渗透率超 48%，到 2025 年渗透率预计能够超过 75%。智能座舱的大范围普及和高速增长，已经是大模型必然参与的落地场景和巨大商业化市场。

早有行业人士统计，相比智能手机配备的 10 多个传感器，一辆真正的智能汽车，各类传感器数量高达数百个，可以控制的权限和实现的复杂功能，也远非智能手机可比。智能汽车交互方式多样，时间固定，粘性强，多模态数据规模大，融入了人际互动的移动空间。大模型在这种复杂传感器、多种交互和功能、具备社会属性的移动空间里，天然能够重新组织、协调、梳理、关联，将其整合成为一个高度智能的服务整体。

通过语音和汽车交流，智能座舱基于大模型可以自动制作、控制、定向生成符合用户情绪偏好的音乐、氛围灯、影视内容，创造“随心百变”的智能空间。基于第三方服务接入、场景定制、多模态数据学习、行为预测等核心能力，实现个性化体验，让“用户自主定义汽车”，“一辆汽车有什么样的功能和体验，用户来提要求，大模型来控制和生成”。

情感座舱、开放而丰富的服务生态、智能生成内容的全新体验，凡此种种，大模型将为新汽车带来交互智能与服务智能的深刻变革。

而端侧多模态模型，参数尺寸足够小巧，能有效运行在有限芯片算力和内存上，覆盖高中低各种档次座舱算力芯片，尽量做到向前和向后兼容，大大加速智能座舱的市场渗透。

端侧模型不存在指令的网络延迟，断网和弱网环境也完全不影响使用，隧道、密集建筑、偏远户外等场景也能全时域和全地域适应。再加上端侧模型数据完全存储设备本地车内环境，满足个人用户最关心的隐私保护和数据安全需求。

高效端侧模型，与智能座舱，其实绝配！

今年以来，面壁智能推出的 MiniCPM 系列端侧模型，因极致高效而蜚声全球，一次次刷新端侧模型的性能极限。伴随着对大模型知识密度的极致追求，面壁智能推出了多个不同参数尺寸的高效端侧模型，包括基座模型和多模态模型，不断优化模型在不同算力芯片、内存硬件上的流畅运行、部署，目前已在PC、手机、平板、VR/AR可穿戴设备、机器人等多个终端实际运行。面壁智能成为 TINNOVE 梧桐科技端侧大模型合作方，也意味着面壁 MiniCPM 端侧模型进入了全新的应用领域！