0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

NVIDIA发布人形机器人重磅更新!Isaac GR00T Blueprint厉害在哪?

Felix分析 ? 来源:电子发烧友网 ? 作者:吴子鹏 ? 2025-01-08 18:14 ? 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

电子发烧友网报道(文/吴子鹏)在备受瞩目的CES 2025上,NVIDIA在机器人领域宣布了重磅更新——Isaac GR00T Blueprint,帮助开发者更高效、高质量地打造人形机器人。同时,NVIDIA创始人兼CEO黄仁勋在CES 2025上还宣布了NVIDIA“人形机器人朋友圈”——NVIDIA将会在人形机器人领域和包括中国公司小鹏、宇树在内的科技公司开展合作,共同推动人形机器人产业发展。

Isaac GR00T Blueprint让模仿学习更高效

人形机器人是一个全球关注的科技热点,在中国市场,人形机器人是新质生产力的代表之一。统计数据显示,?2023年全球人形机器人市场规模约为21.6亿美元,预计到2029年将达到324亿美元??。到2035年,全球人形机器人的出货量可能超过100万台,达到140万台。

在人形机器人开发领域,NVIDIA Isaac机器人开发平台得到了很多开发者的认可,成为这些开发者开发人形机器人的得力帮手。NVIDIA Isaac是一个由NVIDIA加速库、应用框架和AI模型组成的AI机器人开发平台,可加速自主移动机器人 (AMR)、机械手和机械臂以及人形机器人等AI机器人的开发。

NVIDIA Isaac包含了一系列的AI机器人开发工具和开发示例,其中参考应用NVIDIA Isaac Sim允许开发者在基于物理的虚拟环境中设计、模拟、测试和训练基于AI的机器人和自主机器。NVIDIA Isaac Sim基于NVIDIA Omniverse 构建,支持开发者构建自己的自定义模拟器或将核心Isaac Sim技术集成到现有测试和验证管线中。

随着Isaac GR00T Blueprint发布,NVIDIA Isaac平台的性能得到了进一步强化,Blueprint可帮助开发者生成海量的合成运动数据,以便通过模仿学习来训练人形机器人。如下图所示,Isaac GR00T Blueprint通过GR00T-Teleop、GR00T-Mimic和GR00T-Gen工具流能够帮助开发者高效完成人形机器人的模仿学习,可以更好地融入人类世界。
Isaac GR00T Blueprint应用框图

模仿学习也被称为基于演示的学习(Learning By Demonstration),主要强调的是通过大量的参考数据,让人形机器人等机器可以与环境进行交互。一般而言,模仿学习主要包括行为克隆(Behavior Cloning)和逆向强化学习(Inverse Reinforcement Learning),无论是哪种技术路径,都需要大量的数据作为参考,然而在真实世界中收集这些广泛、高质量的数据集既繁琐又耗时,而且成本往往高得令人却步。

Isaac GR00T Blueprint解决了这一痛点,开发者只需少量人类示范,就能轻松生成海量的合成数据集。在这个应用框架下,GR00T-Teleop用于借助虚拟现实设备捕捉人类演示动作,并生成金标准;GR00T-Mimic用于将捕捉到的示范生成更大的合成运动数据集;GR00T-Gen用于通过域随机化和3D提升技术,指数级扩增这个数据集。

Isaac GR00T Blueprint融合了NVIDIA Cosmos

在Isaac GR00T Blueprint的GR00T-Gen工具流中,NVIDIA Omniverse和NVIDIA Cosmos是指数级扩增数据集的关键。NVIDIA Cosmos是NVIDIA在CES 2025上最新发布的“世界基础模型”,拥有一系列开放的预训练世界基础模型,专为生成具有物理感知的视频和物理AI开发所需的世界状态而设计。
NVIDIA Cosmos应用演示

黄仁勋表示:“与大型语言模型一样,世界基础模型是推进机器人和自动驾驶汽车(AV)开发的基础,但并非所有开发人员都有专业知识和资源来训练自己开发的方案。”“我们创建了Cosmos,以使物理AI更加普惠,并让每个开发人员都能接触到通用机器人技术。”

NVIDIA Cosmos是专为物理AI而构建的,据悉开发者可以基于NVIDIA Cosmos完成以下操作:
·视频搜索与理解:使开发者能够轻松从视频数据中找到特定的训练场景。例如,他们可以搜索描绘雪地道路状况或仓库拥堵情况的视频。
·基于物理仿真合成逼真数据:使用Cosmos模型在NVIDIA Omniverse平台上开发的3D场景中生成逼真的视频。
·物理AI模型的开发和评估:无论是在基础模型上构建自定义模型,还是测试其在特定模拟场景下的表现,都可以使用Cosmos进行强化学习以改进模型。
·预见和“多元宇宙”模拟:使用Cosmos和Omniverse生成AI模型可能出现的每一种可能结果,帮助其选择最佳和最准确的路径。

NVIDIA Cosmos的模型基于1800万亿个数据单元进行训练,其中包括200万小时的自动驾驶、机器人、无人机拍摄的视频以及合成数据。在人形机器人开发方面,NVIDIA Cosmos让数据稀缺性不再是人形机器人开发的关键挑战,开发者通过Cosmos上的文本、图像和视频到世界模型功能,就可以模拟各种逼真的任务场景,并完成人形机器人在这一场景下的训练学习。显然,NVIDIA Cosmos将显著缩短通用人形机器人的开发周期,让通用人形机器人早日普及。

NVIDIA已经宣布第一批采用NVIDIA Cosmos的生态伙伴,包括1X、Agile Robots、Agility、Figure AI、Foretellix、Fourier、Galbot、Hillbot、IntBot、Neura Robotics、Skild AI、Virtual Incision、Waabi和XPENG等人形机器人公司。

结语

Isaac GR00T Blueprint的推出解决了当前困扰人形机器人开发者的关键难题——如何获取海量数据完成人形机器人的模仿学习。通过整合GR00T-Teleop、GR00T-Mimic和GR00T-Gen工作流,Isaac GR00T Blueprint让开发者只需少量人类示范,就能轻松生成海量的合成数据集。在Isaac GR00T Blueprint应用框架下,最新发布的NVIDIA Cosmos则是数据指数级扩增的关键。
声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    NVIDIA Isaac Sim与NVIDIA Isaac Lab的更新

    在 COMPUTEX 2025 上,NVIDIA 宣布了机器人仿真参考应用 NVIDIA Isaac Sim 和机器人学习框架
    的头像 发表于 05-28 10:06 ?656次阅读

    NVIDIA 通过云端至机器人计算平台驱动人形机器人技术,赋能物理 AI

    机器人推理与技能基础模型的首次更新;用于合成运动生成的 NVIDIA Isaac GR00T-Dreams
    发表于 05-19 17:53 ?1073次阅读
    <b class='flag-5'>NVIDIA</b> 通过云端至<b class='flag-5'>机器人</b>计算平台驱动<b class='flag-5'>人形</b><b class='flag-5'>机器人</b>技术,赋能物理 AI

    NVIDIA与光轮智能合作实现GR00T N1落地汽车工厂

    光轮智能成功将 NVIDIA GR00T N1 人形机器人基础模型部署至汽车制造生产线,这一成果标志着具身智能在工业自动化领域的重大突破以及应用潜力。
    的头像 发表于 05-15 10:45 ?576次阅读

    借助OpenUSD与合成数据推动人形机器人发展

    适用于合成运动数据的 NVIDIA Isaac GR00T Blueprint 大幅加快人形机器人
    的头像 发表于 04-25 10:04 ?417次阅读

    NVIDIA Isaac GR00T 详细解析

    NVIDIA Isaac GR00T 详细解析NVIDIA Isaac GR00T 是英伟达面向
    的头像 发表于 04-07 11:25 ?987次阅读

    NVIDIA发布GR00T N1基础模型等方案,人形机器人开发效率显著提升

    电子发烧友网报道(文 / 吴子鹏) 日前,在 NVIDIA 的 GTC 大会上,该公司发布了一系列助力人形机器人开发的重要方案,其中包括首个开源人形
    的头像 发表于 03-21 00:02 ?2190次阅读

    NVIDIA Isaac GR00T N1开源人形机器人基础模型+开源物理引擎Newton加速机器人开发

    NVIDIA Isaac GR00T N1开源人形机器人基础模型+开源物理引擎Newton加速机器人
    的头像 发表于 03-20 16:56 ?869次阅读

    NVIDIA发布全球首个开源人形机器人基础模型Isaac GR00T N1

    NVIDIA 宣布推出一系列全新技术,助力人形机器人开发。其中包括全球首个开源且完全可定制的基础模型NVIDIA Isaac
    的头像 发表于 03-20 14:34 ?784次阅读

    机器人Blue亮相 搭载英伟达最新GR00T N1人形机器人通用基础模型

    GR00T N1以及新的数据生成和机器人学习框架,我们将共同开启AI时代的新边疆。” 黄仁勋还强调其泛化能力和多任务执行潜力?。 机器人Blue由英伟达公司、谷歌DeepMind、迪士尼联合开发,行走动作流畅自然,声音设计可爱
    的头像 发表于 03-20 10:50 ?1121次阅读
    <b class='flag-5'>机器人</b>Blue亮相 搭载英伟达最新<b class='flag-5'>GR00T</b> N1<b class='flag-5'>人形</b><b class='flag-5'>机器人</b>通用基础模型

    深度解读GR00T N1:英伟达开源人形机器人功能模型的技术革新与行业影响

    GR00T N1 由 NVIDIA 推出,是全球首个开源且完全可定制的通用人形机器人基础模型。其技术架构受人类认知原理启发,采用 双系统协同设计 在
    的头像 发表于 03-20 10:13 ?2030次阅读

    NVIDIA 发布全球首个开源人形机器人基础模型 Isaac GR00T N1——并推出加速机器人开发的仿真框架

    18 日 ——NVIDIA 今日宣布推出一系列全新技术,助力人形机器人开发。其中包括全球首个开源且完全可定制的基础模型 NVIDIA Isaac
    发表于 03-19 09:30 ?465次阅读
    <b class='flag-5'>NVIDIA</b> <b class='flag-5'>发布</b>全球首个开源<b class='flag-5'>人形</b><b class='flag-5'>机器人</b>基础模型 <b class='flag-5'>Isaac</b> <b class='flag-5'>GR00T</b> N1——并推出加速<b class='flag-5'>机器人</b>开发的仿真框架

    智元机器人基于NVIDIA Isaac GR00T打造高效仿真数据采集方案

    Isaac GR00TNVIDIA Isaac GR00T 加速仿真数采方案 模仿学习是机器人
    的头像 发表于 03-07 19:16 ?1189次阅读
    智元<b class='flag-5'>机器人</b>基于<b class='flag-5'>NVIDIA</b> <b class='flag-5'>Isaac</b> <b class='flag-5'>GR00T</b>打造高效仿真数据采集方案

    具身智能照进现实,物理 AI 解人形机器人量产困局

    。 ? 目前,已经有包括Walker S1在内的人形机器人入厂实习,也有非常多的陪伴型人形机器人进入场景调试的关键环节。在这个过程中,如何让人形
    发表于 02-20 01:11 ?701次阅读
    具身智能照进现实,物理 AI 解<b class='flag-5'>人形</b><b class='flag-5'>机器人</b>量产困局

    NVIDIA发布Isaac GR00T Blueprint,加速人形机器人开发

    NVIDIA创始兼首席执行官黄仁勋亲自揭晓了NVIDIA Isaac GR00T Blueprin
    的头像 发表于 01-13 11:01 ?879次阅读

    NVIDIA推出Isaac GR00T Blueprint

    用于合成数据的 Isaac GR00T 工作流以及 NVIDIA Cosmos 世界基础模型,为通用人形机器人的开发注入强大动力。
    的头像 发表于 01-09 11:13 ?859次阅读