商汤绝影生成式智驾R-UniAD等新品亮相上海车展

寒昀说汽车啊 2025-04-26 03:58:32

4月23日,商汤绝影携系列生成式AI汽车创新产品亮相2025上海车展。

当天,商汤绝影展示了生成式智驾R-UniAD技术方案,并发布近实时在线交互的4D世界模型“绝影开悟2.0”,打造智能驾驶的新路标。

商汤绝影CEO、商汤科技联合创始人、首席科学家王晓刚表示:“真正的AI汽车是将生成式AI深度融入智驾和座舱,既让辅助驾驶安全变得更有确定性,也要让每一辆车拥有‘有趣的灵魂’,成为真正懂你、爱你、守护你的家庭新成员。”

商汤绝影CEO、商汤科技联合创始人、首席科学家王晓刚

以VLAR为核心的生成式智驾R-UniAD

今年2月,商汤绝影发布与世界模型协同交互的端到端技术路线R-UniAD,通过世界模型生成在线交互的仿真环境,以此进行端到端模型的强化学习训练。

车展上,商汤绝影全面展示了R-UniAD技术方案,基于世界模型和强化学习两大核心技术,构建集“视觉-语言-行动-强化学习”于一体的VLAR技术架构,实现生成式智驾的核心突破。

商汤绝影构建集“视觉-语言-行动-强化学习”于一体的VLAR技术架构

施工占道场景是辅助驾驶领域的棘手难题,也是交通事故频发的重要场景。商汤绝影现场演示了针对“施工占道刹停”场景,R-UniAD如何依托“VLAR”增强模型能力。

商汤绝影表示,生成式R-UniAD突破了现阶段端到端范式下数据、安全和性能的三大瓶颈,将实采场景数据的需求降低两个数量级。

名为“绝影开悟”的世界模型也有了新进展。

相比去年主要聚焦2D视频生成技术的打磨,今年上海车展,“绝影开悟”升级为2.0版本,进化为近实时在线交互的4D世界模型,能够实现“4D空间自由交互”。

商汤绝影开悟世界模2.0

“绝影开悟2.0”具备三大能力,首先是“面向量产的数据生成”,它具有多样性场景的可控生成的能力,能一键生成极端高风险场景,为模型训练提供了海量且丰富的训练数据。

其次它能够实现“复杂场景自由复现”,可以根据不同的需求,随心所欲地修改和调整场景中的各种要素,改变道路的布局、车辆的速度和类型,助力重构仿真测试场景。

最后,“绝影开悟2.0”具备近实时交互能力,可以让仿真训练过程更加高效和逼真,车辆的决策和反馈能够几乎在瞬间得到响应;同时感知结果接近真实精标数据98%,能避免因数据风格差异带来的 Sim-to-Real 迁移时能力退化问题,为端到端模型打造“云端虚拟训练场”。

活动中,东风汽车集团研发总院智能化技术首席总工程师张振林透露,正与绝影团队携手推动UniAD一段式端到端方案的量产落地,“除了端到端的合作,未来东风汽车也将持续加大在智能化领域的研发投入,与绝影在开悟世界模型、DriveAGI等方面展开深度合作。”

在辅助驾驶领域,商汤绝影的量产方案目前已合作4家车企,上车7款车型,今年将全力推进辅助驾驶方案的量产交付。

本次上海车展期间,无论是基于地平线征程®6打造的高速辅助驾驶、城区辅助驾驶,还是一段式端到端量产方案的城区泛化,商汤绝影都在展馆外开放了实车体验。

发布“绝影千机”,座舱交互升级

除智驾产品外,商汤绝影还发布了专为车载AIOS打造的AI内核“绝影千机”。核心技术包括MOE多模态大模型、类人记忆框架以及原生智能体框架。此外,AI 基础系统模块、AIOS 工具链和生成式 UI等外围技术,为三大核心模块提供支持与交互。

商汤绝影发布AI内核“绝影千机”

官方表示,依托于“日日新SenseNova V6”基模型,商汤绝影构建了覆盖 0.1B 至 70B汽车垂类模型矩阵,模型首字延迟小于 300ms,吐字速度高达 47 Tokens/s,还能在快慢思考之间自如切换,契合多种场景需求。

商汤绝影还构建了端侧类人记忆框架,赋予AIOS真正的认知力与成长性。

据悉,商汤绝影还构建了支持 MCP 协议的端侧原生智能体框架,能快速接入各类生态服务和工具能力,目前已集成 100+ 智能体与 1000+ API。这一框架还支持多智能体协调机制,能够实现并发、串行及混合模式下的高效协同。

座舱交互方面,商汤绝影去年发布了“A New Member For U”(你的家庭新成员),让每一辆车拥有“有趣的灵魂”。今年上海车展,New Member全新升级,还能在车展现场上车进行沉浸式体验。

据悉,New Member除了拥有了多模态识人能力,还具备深度思考的能力,表达会更加生动有趣,并可以实现免唤醒的多人多轮对话能力。

New Member结合记忆进行深度思考后的接话

车展上,商汤绝影还将展示基于语言大模型、多模态大模型、文生图大模型和“大医”医疗大模型等组成的 AI 大模型体系,覆盖健康管家、安全卫士、3D交互等AI座舱创新产品矩阵。

0 阅读:0

寒昀说汽车啊

简介:感谢大家的关注