NVIDIA 发布推出 Cosmos 世界根底模子跟物理 AI 数据
美国加利福尼亚州圣何塞—— GTC ——平静洋时光2025年3月18日——NVIDIA本日发布推出全新NVIDIA Cosmos™天下基本模子(WFM)的严重更新,该模子引入了开放式、可完整定制的物理AI开辟推理模子,闪开发者从前所未有的方法把持天下天生。NVIDIA还推出了两款由NVIDIA Omniverse™跟Cosmos平台供给支撑的新蓝图,为开辟者供给用于呆板人跟主动驾驶汽车后练习的年夜范围可控分解数据天生引擎。1X、Agility Robotics、Figure AI、Foretellix、Skild AI跟Uber是首批采取Cosmos的企业,可更快、更年夜范围地为物理AI天生更丰盛的练习数据。“正如年夜言语模子转变了天生式跟代办式AI,Cosmos天下基本模子是物理AI的一项严重冲破,”NVIDIA开创人兼CEO黄仁勋表现。“Cosmo沙巴体育唯一官方网站s为物理AI带来了一个开放式、可完整定制的推理模子,为呆板人跟物理产业范畴的冲破性开展带来了机会。”用于分解数据天生的Cosmos® TransferCosmos Transfer WFM可能接收构造化视频输入,如宰割图、深度图、激光雷达扫描、姿势估量图跟轨迹图等,以天生可控、真切的视频输出。Cosmos Transfer可简化感知AI练习,将Omn沙巴体育app下载iverse中创立的3D仿真或真值转换为真切视频,用于年夜范围可控分解数据天生。Agility Robotics将是最早采取Cosmos Transfer跟Omniverse停止年夜范围分解数据天生,用以练习其呆板人模子的公司之一。Agility Robotics首席技巧官Pras Velagapudi表现:“Cosmos为咱们供给了一个在实在天下可收罗的数据之外,扩大真切练习数据的机遇。咱们很等待看到应用新平台解锁的新机能,同时充足应用咱们已有的基于物理学的仿真数据。”用于主动驾驶汽车仿真的NVIDIA® Omniverse Blueprint借助Cosmos Transfer缩小基于物理传感器数据的变更。借助该蓝图,Foretellix能够经由过程为差别驾驶数据集转变气象跟光照等前提来丰盛行动场景。Parallel Domain也正在应用该蓝图将相似的变革利用于他们的传感器仿真。用于分解操纵活动天生的NVIDIA GR00T Blueprint联合了Omniverse跟Cosmos Transfer,可年夜范围天生多样化数据集,应用OpenUSD驱动的仿真,将数据收罗跟加强时光从数天收缩到数小时。Cosmos Predict用于智能天下天生一月在CES上发布的Cosmos Predict WFM可能经由过程文本、图像跟视频等多模态输入天生虚构天下状况。新的Cosmos Predict模子将支撑多帧天生,在给定开端跟停止输入图像的情形下,猜测旁边行动或活动轨迹。这些模子专为后练习而打造,可应用NVIDIA开放的物理AI数据集停止定制。借助NVIDIA Grace Blackwell® NVL72体系及其宏大的NVIDIA NVLink™域的推理盘算才能,开辟者能够实事实时天下天生。1X正在应用Cosmos Predict跟Cosmos Transfer来练习其新型人形呆板人NEO Gamma。呆板人年夜脑开辟商Skild AI正在应用Cosmos Transfer加强其呆板人的分解数据集。别的,Nexar跟Oxa正在应用Cosmos Predict来进级其主动驾驶体系。用于物理AI的多模态推理Cosmos Reason是一个开放式、可完整定制的WFM,存在时空感知才能,它应用头脑链推理来懂得视频数据,并可能猜测交互成果,如一团体走进人行道或一个盒子从架子上失落上去。开辟者能够应用Cosmos Reason来晋升物理AI数据标注跟治理,加强现有天下基本模子或创立新的视觉言语举措模子。他们还能够对其停止后练习,构建高等计划器,以领导物理AI怎样实现所需操纵。减速物理AI的数据治理跟后练习基于其卑鄙义务,开辟者能够在NVIDIA DGX™ Cloud上应用原生PyTorch剧本或NVIDIA NeMo™框架对Cosmos WFM停止后练习。Cosmos开辟者还能够应用DGX Cloud上的NVIDIA NeMo Curator来减速数据处置跟治理。Linker Vision跟Milestone Systems正将其用于治理海量视频数据,练习用于视觉智能体的年夜视觉言语模子,这些智能体基于NVIDIA AI Blueprint停止视频搜寻跟总结。Virtual Incision正在摸索将其安排在将来的手术呆板人中,而Uber跟Waabi正在推进主动驾驶汽车的开辟。推进担任任的AI跟内容通明度依据NVIDIA一向的可托AI准则,NVIDIA在全部Cosmos WFM中都采取开放式护栏。best365官方网站别的,NVIDIA正在与Google DeepMind配合,将SynthID集成到水印中,辅助辨认Cosmos WFM NVIDIA NIM™微效劳的AI天生成果。