汽势 Auto-First|张嘉文 发自上海
在智能驾驶浪潮席卷全球的当下,中国汽车行业的 AI 技术公司正以独特路径构建核心竞争力。
4 月 23 日,商汤绝影在本次 2025 上海国际车展上,首度公开展示其生成式智驾 R-UniAD 技术体系,更推出具备近实时交互能力的 4D 世界模型 " 开悟 2.0",通过构建动态数字孪生空间为自动驾驶决策系统注入新动能,树立智能驾驶技术演进的新标杆。在量产化进程方面,企业正加速推进辅助驾驶方案的规模化落地应用。
针对智能座舱领域,绝影创新推出业内首个车载 AIOS 专用内核 " 千机 ",该架构通过模块化设计赋能车企打造具备持续进化能力的智能操作系统。其标志性产品 " 家庭新成员 "New Member 在本届车展实现全面升级,参展观众可现场体验基于多模态感知技术实现的精准身份识别、拟人化思维链推理及自然语言交互等突破性功能。
同时亮相的智能健康监测系统、主动安全防护体系及三维空间交互界面等创新应用,构建起覆盖驾乘全场景的数字化服务生态。
算法、算力和数据三者共同推动着人工智能技术的螺旋式上升和进步,随着强化学习等算法引入到大模型训练的思路得到验证,新的尺度定律正在开启,数据价值被进一步深入挖掘,模型能力天花板被打开。与此同时,智能驾驶范式也正在加速演进。
2025 年 2 月,商汤绝影发布行业首个与世界模型协同交互的端到端技术路线 R-UniAD,通过世界模型生成在线交互的仿真环境,以此进行端到端模型的强化学习训练,以打破数据瓶颈,提升系统性能上限。本届上海车展上,商汤绝影全面展示了 R-UniAD 技术方案,基于世界模型和强化学习两大核心技术,构建集 " 视觉 - 语言 - 行动 - 强化学习 " 于一体的 VLAR 技术架构,实现生成式智驾的核心突破。
施工占道场景是辅助驾驶领域的棘手难题,也是交通事故频发的重要场景。商汤绝影现场演示了针对 " 施工占道刹停 " 场景,R-UniAD 如何依托 "VLAR" 增强模型能力。
首先,以 " 施工占道刹停 " 路测视频作为输入,R-UniAD 基于 " 绝影开悟 " 世界进行模型 4D 仿真复现,然后端到端模型生成该场景下各种可能驾驶策略,并与世界模型生成的环境交互,反复强化学习中找到最优路径,能预判施工占道,丝滑变道绕行。经过泛化训练后,遇到类似场景,端到端模型也能及时变道,并显著提升对此类施工场景的泛化交互能力。
生成式 R-UniAD 突破了现阶段端到端范式下数据、安全和性能的三大瓶颈,将实采场景数据的需求降低两个数量级;同时,基于强化学习算法,模型充分探索多元场景的安全边界;最终,R-UniAD 将能够实现远超人类的驾驶能力,打造智能驾驶的新路标。
世界模型是生成式智驾的基石所在。2024 年,在 2024 年 11 月 " 绝影实力 AI DAY" 上,商汤绝影发布了行业标杆级别的 " 绝影开悟 " 世界模型,并已经应用于真值数据的生产。
去年 " 绝影开悟 " 世界模型主要聚焦 2D 视频生成技术的打磨,今年上海车展," 绝影开悟 " 升级为 2.0 版本,进化为近实时在线交互的 4D 世界模型,能够实现 "4D 空间自由交互 ",成为商汤绝影决胜智驾战场的重磅武器。
" 绝影开悟 2.0" 具备三大能力,首先是 " 面向量产的数据生成 ",它具有多样性场景的可控生成的能力,能一键生成极端高风险场景,为模型训练提供了海量且丰富的训练数据。
其次它能够实现 " 复杂场景自由复现 ",可以根据不同的需求,随心所欲地修改和调整场景中的各种要素,改变道路的布局、车辆的速度和类型,助力重构仿真测试场景。
最后," 绝影开悟 2.0" 具备近实时交互能力,比行业 SOTA 提升 5 倍之多,让仿真训练过程更加高效和逼真,车辆的决策和反馈能够几乎在瞬间得到响应;同时感知结果接近真实精标数据 98%,能避免因数据风格差异带来的 Sim-to-Real 迁移时能力退化问题,为端到端模型打造 " 云端虚拟训练场 "。
生成式 AI 不仅带来了智驾新范式,同时也在深度融入智能座舱。商汤绝影重磅发布行业首个专为车载 AIOS 打造的 AI 内核 " 绝影千机 ",助力车企打造下一代 AIOS。最核心的三大技术包括 MOE 多模态大模型、类人记忆框架以及原生智能体框架。同时,AI 基础系统模块、AIOS 工具链和生成式 UI 等外围技术,为三大核心模块提供支持与交互。
依托于 " 日日新 SenseNova V6" 基模型,商汤绝影构建了覆盖 0.1B 至 70B 汽车垂类模型矩阵,模型首字延迟小于 300ms,吐字速度高达 47 Tokens/s,性能超越 DeepSeek,还能在快慢思考之间自如切换,契合每一种场景需求。
同时,具备类人情感的座舱系统,离不开记忆。商汤绝影构建了业内首个端侧类人记忆框架,赋予 AIOS 真正的认知力与成长性,每一次交互都让它更懂用户。
为了便于打造智能体生态,绝影构建了业内首个支持 MCP 协议的端侧原生智能体框架。它具备强大的自主规划能力,可进行多步的精准规划和执行。它支持 MCP 规范,能快速接入各类生态服务和工具能力,目前已集成 100+ 智能体与 1000+ API。这个框架还支持多智能体协调机制,能够实现并发、串行及混合模式下的高效协同,整体性能提升超过 30%。
商汤绝影去年发布了 "A New Member For U" ( 你的家庭新成员 ) ,让每一辆车拥有 " 有趣的灵魂 "。今年上海车展,New Member 全新升级,还能在车展现场上车进行沉浸式体验。
首先 New Member 拥有了多模态识人能力,不需要用户专门进行注册,它在座舱多人交互的过程推测出每个人的名字,与相貌的结合,人物之间的关系。New member 不仅 " 认识你 ",还能 " 理解你 ",在和用户长期的互动过程当中,它不但能够记住兴趣爱好,还能记住生活的点滴,产生共情,从而更贴心地进行互动。
同时,它还具备深度思考的能力,表达会更加生动有趣。同时,当用户提出需求时,小影不是被动响应,而是会结合记忆与场景,主动分析疲惫情绪、家庭需求甚至天气变化进行综合性的深度思考,然后给出最合适的方案,成为懂你、会揣摩的 " 聪明搭子 "。
最后,New Member 在业内首次实现免唤醒的多人多轮对话能力。之前行业做到的是大模型一对一的交流,如今 New Member 未被唤醒也能关注并理解座舱内成员间的对话,并能随时参与到对话当中,做到 " 不过度打扰,但时刻陪伴 ",展现 " 有趣灵魂 " 该有的模样。
在现场的演示视频中,车内四人正在讨论去雨崩徒步需要的装备,New Member 会主动搭话,称赞那位提示大家注意低温要带羽绒服的朋友;在查漏补缺携带物品的同时,它记得车主喜欢摄影,主动提醒携带单反和三脚架,可以拍摄山顶星空。
另一个场景中,四个同事下班后临时决定一起聚餐,但四个人住的地方分散在上海各区,彼此距离较远,同时饮食偏好也有差异,New Member 能够听懂每个人的潜台词,综合回家的距离、口味诉求,就像一个 " 规划大师 ",给出了大家都能接受的推荐餐厅。
New Member 还能提供有温度的情感互动和陪伴。一对情侣想去南京旅游,但因为是开车还是乘坐高铁出行产生了分歧和争论,后来女生质问 " 男生是不是不爱她了 ",New Member 能理解语言背后的情绪,对女生进行安抚,并提供建议和帮助,给予情感支持。
基于语言大模型、多模态大模型、文生图大模型和 " 大医 " 医疗大模型等组成的 AI 大模型体系,商汤绝影构建了健康管家、安全卫士、3D 交互等 AI 座舱创新产品矩阵。
商汤绝影已量产上车行业首个医疗 AI 大模型产品 " 旅医 "。依托行业领先的医疗检测模型和「大医」大模型,绝影对用户进行对标医疗级的健康监测,打造用户专属健康档案,针对性推送健康科普内容,打造全出行周期的健康管家,同时,还将通过整合第三方线上医疗服务的能力,贯通车舱医疗生态圈,助力 " 旅医 " 成长为用户的全场景私人医生。
安全始终是智能汽车的基石。商汤绝影将展示行业领先的 DMS/OMS、多模态哨兵等多项安全产品,守护全场景的生命与财产安全。本届上海车展,绝影发布 " 驾驶失能 " 产品,通过传感器检测驾驶员面部、肢体姿态,结合车辆操控行为和呼气酒精含量,实时判断其状态并及时提醒,一旦驾驶员失去驾驶能力,自动安全停车并拨打求救电话,保障出行安全。
得益于绝影车舱量产数据积累与人眼 3D 重建算法突破,商汤绝影 3D 视线交互算法技术达到新高度。舱内 3D 视线结合车外前视相机,能够辨识人眼所关注的人、车、建筑、二维码、花草树木等目标,真正实现 " 视线所及,所见即所得 "。
3D 视线与辅助驾驶深度融合,带来更安全的驾乘体验。结合对舱外的人、车及其他障碍物的检测,3D 视线可实时识别潜在风险。如当前方有行人突然奔跑欲横穿马路,而驾驶员视线未关注该方向,系统便会主动预警,提醒注意行人穿越风险。同时,AEB 等安全功能的触发灵敏度可根据 3D 视线智能调整,若驾驶员持续注视接近的障碍物,系统会降低预警频率,甚至无需提醒;反之,若驾驶员视线偏离,系统则保持正常灵敏度,及时响应。
打通舱内外的 3D 视线还能让用车体验更流畅。以离开停车场为例,现在用户要拿出手机扫码,流程长、体验差。通过 3D 视线结合车外摄像头,用户只需注视出口处二维码的同时说 " 我要缴费 ",系统即可自动完成扫码支付,实现更便捷的无感通行。
商汤绝影的生成式 AI 技术和产品持续创新,商业化落地也全面开花,量产交付正在加速推进。
在 " 绝影 2025 上海车展发布会 " 上,东风汽车集团研发总院智能化技术首席总工程师张振林透露,他们和绝影团队正在携手推动 UniAD 一段式端到端方案的量产落地," 除了端到端的合作,未来东风汽车也将持续加大在智能化领域的研发投入,与绝影在开悟世界模型、DriveAGI 等方面展开深度合作。"
在辅助驾驶领域,商汤绝影的量产方案目前已合作 4 家车企,上车 7 款车型,2025 年更将厚积薄发,全力推进辅助驾驶方案的量产交付。今年 3 月底,绝影和广汽联合打造的行业首批基于地平线征程 ® 6M 的辅助驾驶方案正式量产上市。今年还有更多基于地平线征程 ® 6 打造的辅助驾驶方案量产落地奇瑞等众多车企伙伴,在英伟达 DIRVE AGX Thor 平台部署的绝影 UniAD 一段式端到端量产方案也将于 2025 年第四季度量产交付东风汽车。
不止如此,绝影基于地平线征程 ® 6 打造的量产方案得到中汽研的认证,是首个获得中汽研《CATARC 标志认证实施规则– " 征程之星 " 领航辅助驾驶认证》的辅助驾驶产品。
此外,本次上海车展期间,无论是基于地平线征程 ® 6 打造的高速辅助驾驶、城区辅助驾驶,还是一段式端到端量产方案的城区泛化,商汤绝影都在展馆外开放了实车体验。
作为中国智能座舱 AI 软件的领头羊,商汤绝影的座舱 AI 软件市场份额已连续 5 年位列行业第一,并打造了超过 20 个行业首发的智能座舱产品与功能。2025 年初,商汤绝影联手知名车企伙伴,实现行业首个原生流式多模态座舱产品量产上车。行业首个医疗 AI 大模型产品 " 旅医 " 于 2025 年 3 月正式量产上车星途揽月,为用户打造全场景的健康管家。
截至 2024 年底,商汤绝影已与超 30 家国内外车企达成合作,覆盖 130 余款车型,量产交付累计突破 360 万辆。
随着生成式 AI 深度融入并重构智能汽车产业,作为加速智能汽车驶入 AGI 时代的战略合作伙伴,商汤绝影致力于打造 " 共生共创共享 " 合作新模式,在基础设施、大模型能力和数据闭环等领域开展深度合作的基础上,双方进一步挖掘生成式 AI 在智能驾驶和智能座舱领域的潜力,共创 AI 新进程。
登录后才可以发布评论哦
打开小程序可以发布评论哦