信达证券报告指出,随着视觉生成模型和多模态大模型的进展,世界模型在自动驾驶领域受到广泛关注。使用基于扩散的视频生成模型作为世界模型可以部分解决传统自动驾驶模拟中信息丢失和建模效率低下的问题。在机器人领域,世界模型让机器人在现实中处理通用任务展示出巨大前景——DayDreamer从离线数据推广世界模型使机器人数小时内学会行走。世界模型对物理世界的理解和预测能力是机器人智能化的关键利器。
自动驾驶的世界模型应用,从感知到预测的范式转变
现代自动驾驶通常可以分为感知、预测、规划和控制四个模块。在汽车行驶场景中,汽车通过相机、雷达、高精度地图等方式获取数据来感知世界。
在多模态大模型和视觉生成模型出现之前,交通场景的模拟通常以汽车的感知模块收集或手动构建,并进行进一步的建模和渲染以产生适合车辆的输出。多个模块的级联容易导致信息丢失、建模复杂等问题。此外,逼真的场景渲染需要耗费巨量的计算资源,限制了自动驾驶的效率。
使用基于扩散的视频生成模型作为世界模型可以部分解决上述问题。近年来已有相关的研究在不断进行。世界模型能够从输入数据中学习和预测交通场景的动态变化,为自动驾驶系统提供更丰富、更准确的环境理解。
在多模态大模型和视觉生成模型出现之前,交通场景的模拟通常以汽车的感知模块收集或手动构建,并进行进一步的建模和渲染以产生适合车辆的输出。多个模块的级联容易导致信息丢失、建模复杂等问题。此外,逼真的场景渲染需要耗费巨量的计算资源,限制了自动驾驶的效率。
使用基于扩散的视频生成模型作为世界模型可以部分解决上述问题。近年来已有相关的研究在不断进行。世界模型能够从输入数据中学习和预测交通场景的动态变化,为自动驾驶系统提供更丰富、更准确的环境理解。
机器人世界模型研究进展,从专用到通用的跨越
机器人领域的应用也是世界模型的主要方向之一。传统的机器人关键组件会被建模,机器人在执行任务时无需理解世界。但当机器人被部署在新的场景中时,可能会手足无措。
近年来相关研究有很多进展。BC-Z利用语言表示作为任务表示,增强了机器人的多任务性能。DayDreamer从离线数据中推广了一个世界模型,使机器人能够在数小时内直接在现实世界中学会行走。SWIM可以从人类视频中学习,并在没有任何任务监督的情况下对机器人设置进行微调。VIPER在专家视频上利用预训练自回归transformer,指导机器人正确执行。GR-2对机器人任务进行了微调,实现了对机器人未来图像的准确预测和动作轨迹的生成。
近年来相关研究有很多进展。BC-Z利用语言表示作为任务表示,增强了机器人的多任务性能。DayDreamer从离线数据中推广了一个世界模型,使机器人能够在数小时内直接在现实世界中学会行走。SWIM可以从人类视频中学习,并在没有任何任务监督的情况下对机器人设置进行微调。VIPER在专家视频上利用预训练自回归transformer,指导机器人正确执行。GR-2对机器人任务进行了微调,实现了对机器人未来图像的准确预测和动作轨迹的生成。
世界模型对物理世界的理解,AGI的关键路径
世界模型对物理世界的理解和预测能力是机器人智能化的关键利器。LLMs和世界模型被认为是实现通用人工智能(AGI)的可能途径之一,它们可以成为机器理解世界基本规律的起点。
目前AI发展迅速,大模型正快速学习如何理解物理世界。在近期发布的大模型中,o3-mini可以模拟生成一个小球在四维超立方体内弹射的Python代码。而Grok3则可以模拟航天器任务,生成的3D动画准确描述了飞船、地球、太阳、火星的位置关系。这些成果有可能从底层催动世界模型的进展,让AI的智能化进入更高的水平。
目前AI发展迅速,大模型正快速学习如何理解物理世界。在近期发布的大模型中,o3-mini可以模拟生成一个小球在四维超立方体内弹射的Python代码。而Grok3则可以模拟航天器任务,生成的3D动画准确描述了飞船、地球、太阳、火星的位置关系。这些成果有可能从底层催动世界模型的进展,让AI的智能化进入更高的水平。
推理成本下降为世界模型落地创造条件
无论是北美还是国内,推理成本的降低及推理性能的迅速提升趋势非常显著。微软董事长Satya Nadella曾在法说会表示,每代硬件的性价比提高2倍以上,而由于软件优化,每代模型的性能提升10倍以上。
DeepSeek卓越的性价比让人印象深刻。据Semianalysis观察,在GPT-4上同样有类似的趋势,即每过一年算法改进和优化使得推理成本降低10倍,同时性能提升10倍。
伴随推理性能的提升和推理成本的降低,许多算力密集型的场景有了落地的可能,世界模型便是其中一个例子。世界模型可以帮助端侧理解并预测世界,从而产生正确的决策。从云来看,由于多模态数据的训练与推理,算力需求总体仍然呈现迅速增长的趋势;而从端来看,人形机器人、自动驾驶等重要赛道有望迅速前进,以突破目前的智能化瓶颈。
DeepSeek卓越的性价比让人印象深刻。据Semianalysis观察,在GPT-4上同样有类似的趋势,即每过一年算法改进和优化使得推理成本降低10倍,同时性能提升10倍。
伴随推理性能的提升和推理成本的降低,许多算力密集型的场景有了落地的可能,世界模型便是其中一个例子。世界模型可以帮助端侧理解并预测世界,从而产生正确的决策。从云来看,由于多模态数据的训练与推理,算力需求总体仍然呈现迅速增长的趋势;而从端来看,人形机器人、自动驾驶等重要赛道有望迅速前进,以突破目前的智能化瓶颈。
| 应用领域 | 传统方法痛点 | 世界模型解决方案 | 代表研究/产品 |
|---|---|---|---|
| 自动驾驶 | 信息丢失、建模复杂、渲染计算量大 | 扩散模型生成场景、端到端预测 | 英伟达Cosmos |
| 机器人 | 新场景适应性差、缺乏通用性 | 从人类视频学习、离线数据推广 | DayDreamer、SWIM、VIPER、GR-2 |
点击阅读报告原文:
最新报告
中英对照
全文搜索
报告精选
PDF上传翻译
多格式文档互转
入驻&报告售卖
会员权益
机构报告
券商研报
财报库
专题合集
英文报告
数据图表
会议报告
其他资源
新质生产力
DeepSeek
低空经济
大模型
AI Agent
AI Infra
具身智能
自动驾驶
宠物
银发经济
人形机器人
企业出海
算力
微短剧
薪酬
白皮书
创新药
行业分析
个股研究
年报财报
IPO招股书
会议纪要
宏观策略
政策法规
其他
人工智能
信息科技
互联网
消费经济
汽车交通
电商零售
传媒娱乐
医疗健康
投资金融
能源环境
地产建筑
传统产业
英文报告
其它
行业聚焦
芯片产业
热点概念
全球咨询智库
人工智能
500强
新质生产力
会议峰会
新能源汽车
企业年报
互联网
公司研究
行业综观
消费教育
科技通信
医药健康
人力资源
投资金融
汽车产业
物流地产
电子商务
传统产业
传媒营销
其它
十五五规划系列报告合集(共50套打包)
2026年宠物经济/它经济报告合集(共46套打包)
AI、科技与通信
广告、传媒与营销
消费、零售与支付
HR、文化与旅游
金融、保险与投资
能源、环境与工业
医疗制药与大健康
物流、地产与建筑
其他行业
AI ▪ 科技 ▪ 通信
数字化
金融财经
智能制造
电商传媒
地产建筑
医疗医学
能源化工
其他行业

收藏
下载
2026-07-20

AI查数
行业数据
政策法规
商业模式
产业链
竞争格局
市场规模
产业概述
自研数据
其它
2026年
AI读财报
年报
一季报
半年报
三季报
IPO招股书
社会责任报告
A股
IPO申报
港股
美股&全球
新三板
2026-07-30
电子行业
16页
2张图表
0731-84720580
商务合作:really158d
友链申请 (QQ):1737380874
微信扫码登录
手机快捷登录
账号登录