信达证券报告指出,英伟达在CES 2025上正式发布Cosmos世界基础模型,这是一套用于物理感知视频生成的开放式扩散和自回归Transformer模型。Cosmos基于2000万小时的真实世界人类互动、环境、工业、机器人和驾驶数据,训练了9000万亿个token。配合NVIDIA Omniverse,Cosmos可生成高质量合成视频数据用于启动机器人和自动驾驶汽车感知模型训练。首批试用者包括Uber、小鹏、比亚迪等。
Cosmos的技术架构与三类模型定位
Cosmos世界基础模型是一套用于物理感知视频生成的开放式扩散和自回归Transformer模型。它使用包括文本、图像、视频和运动在内的输入数据来生成和仿真虚拟世界,准确模拟场景中物体的空间关系及其物理交互。
Cosmos模型分为三个类别以满足不同场景需求。Nano是针对实时、低延迟推理和边缘部署进行优化的模型,适用于计算资源受限的场景。Super是高性能基线模型,适用于开箱即用的微调和部署。Ultra具有最高质量和保真度,适合用于蒸馏自定义模型,能够生成最逼真的物理感知视频。Cosmos模型参数范围约40亿至140亿。
开发者既可以用Cosmos模型生成物理合成数据,也可以用英伟达NeMo框架配合私有视频数据进行微调。英伟达允许无论公司规模如何,研究人员和开发者都可以根据开放模型许可协议自由使用Cosmos模型,且许可协议允许商业用途。
Cosmos模型分为三个类别以满足不同场景需求。Nano是针对实时、低延迟推理和边缘部署进行优化的模型,适用于计算资源受限的场景。Super是高性能基线模型,适用于开箱即用的微调和部署。Ultra具有最高质量和保真度,适合用于蒸馏自定义模型,能够生成最逼真的物理感知视频。Cosmos模型参数范围约40亿至140亿。
开发者既可以用Cosmos模型生成物理合成数据,也可以用英伟达NeMo框架配合私有视频数据进行微调。英伟达允许无论公司规模如何,研究人员和开发者都可以根据开放模型许可协议自由使用Cosmos模型,且许可协议允许商业用途。
2000万小时真实世界数据,9000万亿token训练
Cosmos的训练数据规模令人瞩目。模型基于2000万小时的真实世界人类互动、环境、工业、机器人和驾驶数据训练而成。这一数据规模意味着模型接触了海量的真实世界场景,包括不同天气条件、不同路况、不同人机交互情境。
9000万亿个token的训练量使得Cosmos能够学习到丰富的物理规律和空间关系。如同大语言模型一样,世界基础模型属于基础类模型,通过大规模预训练获得对世界的普遍理解能力,再针对特定应用进行微调。Cosmos模型可以生成照片般逼真的视频,用于训练机器人和自动驾驶汽车,而且成本比使用传统数据低得多。
9000万亿个token的训练量使得Cosmos能够学习到丰富的物理规律和空间关系。如同大语言模型一样,世界基础模型属于基础类模型,通过大规模预训练获得对世界的普遍理解能力,再针对特定应用进行微调。Cosmos模型可以生成照片般逼真的视频,用于训练机器人和自动驾驶汽车,而且成本比使用传统数据低得多。
自动驾驶与机器人领域的应用落地
在英伟达展示的案例中,Cosmos已经被应用于模拟真实环境,如工厂车间或驾驶场景。或者与Sora类似,使用多模态内容(如文本、图像、视频以及机器人传感器数据)的输入生成基于物理定律的视频,主要用于机器人、自动驾驶汽车等领域的模型训练和开发。
Cosmos模型也为Omniverse(英伟达工业数字化和物理AI仿真平台)赋能。开发者可在Omniverse中构建3D场景,渲染输出后用于Cosmos模型生成合成虚拟环境,最终用于物理人工智能训练。Cosmos模型加持下的Omniverse平台可在数字孪生环境中大规模开发、测试和优化物理AI和机器人队列,然后再部署到现实设施中。
目前已公布的第一批试用者包括机器人公司1X、Agility Robotics,以及自动驾驶领域的Uber、小鹏、比亚迪等。人形机器人硬件已有一定技术成熟度,但具身智能水平仍需持续迭代,Cosmos的推出有望缓解智能驾驶与机器人训练数据不足的问题。
Cosmos模型也为Omniverse(英伟达工业数字化和物理AI仿真平台)赋能。开发者可在Omniverse中构建3D场景,渲染输出后用于Cosmos模型生成合成虚拟环境,最终用于物理人工智能训练。Cosmos模型加持下的Omniverse平台可在数字孪生环境中大规模开发、测试和优化物理AI和机器人队列,然后再部署到现实设施中。
目前已公布的第一批试用者包括机器人公司1X、Agility Robotics,以及自动驾驶领域的Uber、小鹏、比亚迪等。人形机器人硬件已有一定技术成熟度,但具身智能水平仍需持续迭代,Cosmos的推出有望缓解智能驾驶与机器人训练数据不足的问题。
Cosmos对物理AI产业的推动作用
Cosmos世界模型的开源有望加速智能驾驶、机器人相关产业技术落地。世界模型可以帮助端侧理解并预测世界,从而产生正确的决策。从云来看,由于多模态数据的训练与推理,算力需求总体仍然呈现迅速增长的趋势;而从端来看,人形机器人、自动驾驶等重要赛道有望迅速前进,以突破目前的智能化瓶颈。
在机器人模型层面,当前人形机器人缺乏足够的运动对齐多模态数据来完成模型训练。Cosmos通过生成高质量合成数据,为机器人训练提供了可扩展的数据来源。Cosmos模型加持下的Omniverse平台开源在数字孪生环境中大规模开发、测试和优化物理AI和机器人队列,然后再部署到现实设施中。
在机器人模型层面,当前人形机器人缺乏足够的运动对齐多模态数据来完成模型训练。Cosmos通过生成高质量合成数据,为机器人训练提供了可扩展的数据来源。Cosmos模型加持下的Omniverse平台开源在数字孪生环境中大规模开发、测试和优化物理AI和机器人队列,然后再部署到现实设施中。
| 参数项 | 数值/说明 |
|---|---|
| 训练数据时长 | 2000万小时真实世界数据 |
| 训练Token数 | 9000万亿 |
| 模型类型 | Nano(边缘)/Super(基线)/Ultra(最高质量) |
| 参数范围 | 约40亿-140亿 |
| 首批试用者 | Uber、小鹏、比亚迪、1X、Agility Robotics |
| 许可协议 | 开放模型许可,允许商业用途 |
点击阅读报告原文:
最新报告
中英对照
全文搜索
报告精选
PDF上传翻译
多格式文档互转
入驻&报告售卖
会员权益
机构报告
券商研报
财报库
专题合集
英文报告
数据图表
会议报告
其他资源
新质生产力
DeepSeek
低空经济
大模型
AI Agent
AI Infra
具身智能
自动驾驶
宠物
银发经济
人形机器人
企业出海
算力
微短剧
薪酬
白皮书
创新药
行业分析
个股研究
年报财报
IPO招股书
会议纪要
宏观策略
政策法规
其他
人工智能
信息科技
互联网
消费经济
汽车交通
电商零售
传媒娱乐
医疗健康
投资金融
能源环境
地产建筑
传统产业
英文报告
其它
行业聚焦
芯片产业
热点概念
全球咨询智库
人工智能
500强
新质生产力
会议峰会
新能源汽车
企业年报
互联网
公司研究
行业综观
消费教育
科技通信
医药健康
人力资源
投资金融
汽车产业
物流地产
电子商务
传统产业
传媒营销
其它
十五五规划系列报告合集(共50套打包)
2026年宠物经济/它经济报告合集(共46套打包)
AI、科技与通信
广告、传媒与营销
消费、零售与支付
HR、文化与旅游
金融、保险与投资
能源、环境与工业
医疗制药与大健康
物流、地产与建筑
其他行业
AI ▪ 科技 ▪ 通信
数字化
金融财经
智能制造
电商传媒
地产建筑
医疗医学
能源化工
其他行业

收藏
下载
2026-07-20

AI查数
行业数据
政策法规
商业模式
产业链
竞争格局
市场规模
产业概述
自研数据
其它
2026年
AI读财报
年报
一季报
半年报
三季报
IPO招股书
社会责任报告
A股
IPO申报
港股
美股&全球
新三板
2026-07-30
电子行业
16页
2张图表
0731-84720580
商务合作:really158d
友链申请 (QQ):1737380874
微信扫码登录
手机快捷登录
账号登录