商汤科技在WAIC2025上发布日日新6.5版本,持续提升多模态融合能力。核心观点包括:
-
多模态数据融合是关键:随着具身智能互联网数据逐渐耗尽,多模态数据融合成为突破方向,通过图片、视频与文本结合可带来新数据和知识,符合人类天然的多模态学习特性。
-
多模态思维链能力提升:通过图文对构建思维链,模型推理、对现实世界的理解和感知能力显著增强,部分子问题准确率接近99%,80%的思维链自动生成。
-
技术架构优化:改进架构实现多种模态早期融合,提升多模态处理效率,具体表现为预训练吞吐量增加20%,强化学习效率提升40%,图片推理提升35%,性价比提升三倍。
-
具身智能平台“开悟智能”:推出该平台赋能机器人行业,涵盖视觉感知、视觉导航、交互等能力,解决自动驾驶、机器人领域的数据瓶颈,通过生成时空一致的模拟数据助力模型训练和迭代。
-
研究结论:商汤科技聚焦多模态赋能具身智能,探索机器人感知、决策与行动的闭环,解决大模型与机器人响应速度融合等问题,推动具身智能技术突破。