cpmGO – 面壁智能打造的全球首款纯端侧汽车智能助手
cpmGO 是什么
cpmGO 是面壁智能推出的全球首款专为汽车智能座舱设计的纯端侧智能助手,基于面壁小钢炮 MiniCPM 端侧模型开发,具备视觉、语音、多模态交互以及图形 UI 交互等强大功能,能够实现从舱外到舱内的全链条感知、决策与执行。它提供了与云端大模型相匹配的 “原生端侧体验”,可支持在弱网络或无网络环境下稳定运行,确保用户隐私得到保护,同时实现快速响应。
核心功能
- 多模态交互 :支持语音、手势、图形 UI 等多种交互方式,实现 “可见即可说”,用户无需触控点击,通过语音指令即可操作屏幕内容,极大提升了人车交互的便捷性和效率。
- 智能决策与执行 :能够深度理解用户的复杂指令和模糊意图,自动完成如导航、空调调节、车窗控制等任务,甚至可以主动规划行程、调节舱内环境等长期任务,极大提升驾驶便利性和安全性。
- 隐私保护 :所有数据处理均在本地完成,无需依赖云端计算,从根本上确保了用户的隐私安全,车内产生的大量声音、图片、视频流数据等都不会外传。
- 弱网环境适用 :即使在网络信号极差或完全断网的情况下,仍能保证流畅运行,同时保持低功耗和高性能表现,适用于在隧道、山区或偏远地区驾驶的用户。
技术原理
- 端侧模型架构 :基于面壁智能的 MiniCPM 端侧模型进行优化,针对汽车座舱的需求进行了精准裁剪,使其能够在本地设备上高效运行,保持强大的性能,同时满足主机厂对功能和尺寸的要求。
- 深度适配与推理优化 :与高通、英伟达、芯驰等十余家主流车机芯片厂商展开深度合作,进行联合调校和推理加速,有效解决了车机芯片在功耗和算力上的挑战,通过优化算法和硬件加速技术,实现了毫秒级的快速响应。
- 多模态感知与交互 :整合了视觉、语音和图形 UI 等多模态数据,利用深度学习算法,能够精准理解用户的意图和需求,提供更自然、更高效的交互体验,例如通过语音直接操作屏幕内容,或者根据舱内摄像头识别用户手势和表情来执行相应操作。
- 端云协同 :采用了独特的端云协同架构设计,在保证本地高性能的同时,能够实现功能扩展和数据更新能力,为未来的智能化发展提供了坚实基础,当车辆处于联网状态时,cpmGO 可以与云端进行数据同步和交互,获取最新的信息和服务,进一步提升用户体验。
支持平台
cpmGO 已适配高通、MediaTek、Intel、英伟达、芯驰科技、芯擎科技等国内外主流车机芯片平台。
团队介绍
面壁智能团队成员大多来自清华大学,曾共同参与国旗工程等国家级重点 AI 项目,在大模型研发调优方面拥有丰富经验,且已实现多项关键突破。公司创始人兼首席执行官梅杰,是清华大学计算机系博士,曾获 “CCF - IEEE CS”青年科学家奖;联合创始人兼首席科学家林宙辰,为清华大学教授,国际知名人工智能专家;首席技术官赵*X,是清华大学计算机系博士,原 DeepMotion 中国区 CTO,语义地图全球专利第一发明人;首席运营官王瑾,清华大学经管学院硕士,曾担任云从科技副总裁;首席商务官张康,清华大学计算机系硕士,原腾讯优图核心成员。
项目资源
官网:https://www.facebias.com/;面壁智能官网:https://openi.cn/304541.html
业务场景
- 智能汽车用户 :为追求高科技驾驶体验的用户,带来更便捷、更智能、更个性化的车机系统操控方式,提升驾驶过程中的操作便捷性和安全性,让用户在驾驶过程中能够更加轻松地享受智能科技带来的乐趣。
- 注重隐私的用户 :满足对个人数据隐私有较高要求的用户,确保车内数据不外传,保护用户的个人信息安全,让用户在使用车机系统时无需担心隐私泄露问题。
- 经常在弱网环境驾驶的人群 :如经常行驶在隧道、山区或偏远地区的人,可以在弱网或断网环境下正常使用车机功能,如导航、多媒体播放等,保证行车的便利性和安全性。
- 家庭用户 :能够辅助照顾车内儿童或宠物,识别提醒儿童安全带未系或宠物状态异常等情况,为家庭出行提供更多安全保障和便利,例如自动调节空调温度、播放儿童喜爱的音乐等,提升家庭出行的舒适度。
- 追求高效驾驶体验的用户 :帮助用户更高效地完成驾驶过程中的各种操作,如快速设置导航目的地、调节车辆设置等,减少驾驶过程中的分心操作,提高驾驶效率和安全性。