在近日于上海举办的2024年“绝影实力AI DAY”活动中,商汤绝影CEO、商汤科技联合创始人及首席科学家王晓刚发表了一项引人深思的声明:“在AGI(通用人工智能)时代,智能座舱的进化必须带有‘叛逆’色彩。真正的智能汽车,唯有具备记忆能力,才能与用户心灵相通。”
活动现场充满了浓厚的赛博科幻氛围,商汤绝影全面展示了其“驾-舱-云”三位一体的AGI产品体系与战略布局。王晓刚所描绘的未来汽车,不仅仅是交通工具,更是充满人文关怀的伙伴,如同英国科幻剧《黑镜》中的场景提前成真:当你接上孩子上车,汽车会识别到孩子胸前的奖牌,并热情地祝贺她获得表演奖;当你试图在驾驶中查看手机,车机会温柔地提醒你专注驾驶;发现后座的家人入睡,它无需指令便会自动调节空调、音响及驾驶模式;若检测到心率异常或体温升高,车机会提醒检查家人健康状况,甚至为你导航至最合适的医院并提前预约挂号。
这一愿景通过商汤绝影发布的智能座舱大模型创新产品“A New Member For U”(你的家庭新成员)得以体现,旨在赋予汽车“有趣的灵魂”。王晓刚指出,当前虽已有具备逻辑思考和通用任务处理能力的AI Agent上车,但它们大多仍处于“被动智能”阶段,即仅根据用户指令行动。商汤绝影旨在重新定义智能座舱,让其成为察言观色、时刻相伴且与用户心灵相通的“家庭新成员”。
实现这一转变的关键在于多模态大模型,它使“New Member新成员”能够深度融合语音、文字、图像及视频等多种模态信息,提供自然流畅的人机交互体验,主动关怀用户,精准识别并满足其需求,记录用户的喜好与习惯。商汤绝影还打造了中国首个“车载类人记忆框架”,赋予系统类人的记忆能力,包括临时记忆和长期记忆,能够自我迭代,通过持续推理的Always-on运行框架,主动为用户提供贴心服务。
关于数据隐私,商汤绝影CTO肖枫表示,公司已为车端和云上数据提供了强大的加密技术方案。涉及用户隐私的数据将保存在车端,而需要更多资源和算力的任务则在云端处理。对用户而言,他们感受到的是强大的端云结合大模型服务,无需区分数据处理的位置。
在“城区无图NOA”和“端到端智驾”等热门领域,商汤绝影同样展现了其实力。本次活动上,商汤绝影展示了基于不同算力平台的全场景高阶智驾和端到端智驾产品体系,并宣布基于J6平台的智驾方案预计将于2025年第二季度量产交付,而量产端到端智驾方案则预计于明年年底落地。商汤通过实车采集和仿真生成的“双轮驱动”数据闭环,构建了与世界模型深度融合的“车云一体”智驾新范式。
商汤绝影发布的世界模型“开悟”成为活动亮点之一。该模型能生成高质量、逼真的视频数据,用于训练智驾系统。基于多模态大模型打造的“开悟”,能够理解物理和交通规则,支持多样化自动驾驶场景及Corner case的可控生成。目前,商汤绝影已能基于1024类场景泛化出更多平行世界,打造千万级生成场景库,预计2025年对行业开放。
在各大企业竞相投入“百模大战”、进行大模型军备竞赛的背景下,手握数据和算力优势的商汤显得尤为冷静。作为计算机视觉领域的佼佼者,商汤在视觉数据积累上拥有显著优势。商汤绝影与车企建立了数据闭环合作机制,利用量产车辆的真实数据驱动基础模型的训练和迭代,不断提升模型性能。这种深度合作不仅提升了模型的精准度和可靠性,也促进了双方技术的共同进步。
商汤绝影的智能汽车业务已覆盖超过30家车企,合作车型超过100款,包括广汽、合众、一汽、本田、比亚迪、长城、红旗、极氪、奇瑞、蔚来等知名品牌。预计到2024年底,量产交付累计将超过350万辆。这些智能汽车搭载了商汤绝影的智能驾驶辅助系统和智能座舱技术,为用户提供全方位的智能出行体验。
在AI技术发展和大模型风潮的推动下,众多企业迎来了新的发展机遇。商汤绝影正致力于把握好自己的生态位,与车企、智舱和智驾供应商、手机厂商及互联网巨头等合作伙伴共同构建新体验。