发布时间:2025-09-13 17:38:13 作者:apuhl 点击:7198 【 字体:大中小 】
今早,加速机器在美国丹佛举行的人形人第51届SIGGRAPH图形大会上,NVIDIA宣布,展N展微将为全球领先的布扩机器人制造商、AI模型开发者和软件制造商提供一套服务、服务模型以及计算平台,加速机器长沙学院泄露全集以开发、人形人训练和构建下一代人形机器人。展N展微
NVIDIA带来了适用于OpenUSD语言、几何体、加速机器物理学和材质的人形人生成式AI模型与NIM微服务。这一新服务将加速基于通用场景描述的展N展微工作流以及工业数字孪生和机器人的开发。
NVIDIA 创始人兼 CEO 黄仁勋表示,布扩西安医科大学绯闻体验“AI 的服务下一波浪潮是机器人,其中最令人兴奋的发展之一是人形机器人。我们正在推进整个 NVIDIA 机器人堆栈的发展,面向全球人形机器人开发者和公司开放访问,让他们能够使用最符合其需求的平台、加速库和 AI 模型。”
值得一提的是,黄仁勋还同 Meta 创始人兼 CEO 马克·扎克伯格进行了炉边谈话。二人一同探讨了基础研究如何推动AI突破性进展,以及生成式AI和开源技术如何为开发者和创作者赋能。
将生成式AI引入OpenUSD
在本次大会上,NVIDIA发布了通用场景描述(OpenUSD)的重大成果。据介绍,NVIDIA将扩大这一通用3D数据交换框架在机器人、工业设计和工程领域的应用,提高开发者为AI新一轮发展构建高精度虚拟世界的能力。
本次新推出的内容包括,适用于AI模型的NVIDIA NIM™微服务。
这些微服务可生成回答用户查询的OpenUSD语言、生成OpenUSD Python代码、将材质应用于3D物体、理解3D空间和物理学以帮助加快数字孪生的开发等。
此外,还包括可用于机器人和工业仿真数据格式的全新USD连接器,以及各种开发者工具,用户可通过它们将海量NVIDIA RTX™全光线追踪数据集传输到Apple Vision Pro。
公开资料介绍,NIM 全称为 Nvidia Inference Microservice,即英伟达推理微服务,是 Nvidia AI Enterprise 的一部分,可以帮助客户快速部署产品级 AI 大模型应用。
全球首个用于OpenUSD开发的生成式AI模型也将以NVIDIA NIM微服务的形式提供。借助这些模型,开发者能够将生成式AI copilot和智能体整合到USD工作流中,拓宽3D世界的可能性,帮助加快USD在制造业、汽车行业和机器人等新工业领域的应用。
预览版中的微服务包括:
· USD Code NIM微服务:回答常识性OpenUSD问题,并基于文本提示自动生成 OpenUSD-Python代码,然后将其输入到OpenUSD查看应用程序(例如皮克斯的USDView)或基于NVIDIA Omniverse Kit的应用,以实现相应3D数据的可视化。
· USD Search NIM微服务:使开发者能够使用自然语言或图像输入,在海量OpenUSD、3D和图像数据库中进行搜索。
· USD Validate NIM微服务:检查上传文件与OpenUSD发布版本的兼容性,并生成完全由NVIDIA Omniverse Cloud API(应用编程接口)驱动的RTX渲染路径追踪图像。
即将提供的新微服务包括:
· USD Layout NIM微服务:使用户能够基于空间智能,根据一系列文本提示组装出基于 OpenUSD的场景。
· USD SmartMaterial NIM微服务:预测并将逼真的材料应用于计算机辅助设计对象。
· fVDB Mesh Generation NIM微服务:根据点云数据生成基于OpenUSD的网络,并通过 Omniverse Cloud API进行渲染。
· fVDB Physics Super-Res NIM微服务:对帧或帧序列执行AI超分辨率 ,生成基于OpenUSD的高分辨率物理仿真。
· fVDB NeRF-XL NIM微服务:使用 Omniverse Cloud API 在 OpenUSD中生成大规模神经辐射场。
加速人形机器人发展
开发者还可以通过访问新的 NVIDIA NIM 微服务,用于 Isaac Lab 和 Isaac Sim 中的机器人仿真、OSMO 机器人云计算编排服务和远程操作数据捕获工作流等。
NIM 微服务提供了由 NVIDIA 推理软件提供支持的预构建容器,使开发者能够将部署时间从数周缩短到几分钟。
机器人专家则将能够通过两项新的 AI 微服务,在 NVIDIA Isaac Sim™(基于 NVIDIA Omniverse™ 平台构建的机器人仿真参考应用)中增强生成式物理 AI 仿真工作流:
MimicGen NIM 微服务可根据 Apple Vision Pro 等空间计算设备记录的远程操作数据,生成合成运动数据。Robocasa NIM 微服务可在 OpenUSD(一个用于在 3D 世界中进行开发和协作的通用框架)中生成机器人任务和仿真就绪环境。
现已推出的 NVIDIA OSMO 是一项云原生托管服务,允许用户跨分布式计算资源来协调和扩展复杂的机器人开发工作流,无论是在本地还是在云端。
OSMO 大大简化了机器人训练和仿真工作流,将部署和开发周期从数月缩短到一周内。用户可以对各种任务进行可视化管理,包括合成数据生成、模型训练、强化学习以及大规模的人形机器人、自主移动机器人和工业机械臂软件在环测试。
同时,NVIDIA 还提供了三个计算平台来简化人形机器人的开发,分别是:用于训练模型的 NVIDIA AI 超级计算机;基于 Omniverse 构建的 NVIDIA Isaac Sim,使机器人可以在仿真世界中学习和完善技能;以及用于运行模型的 NVIDIA Jetson™ Thor 人形机器人计算机。开发者可以根据具体需求来访问和使用全部平台或其中的任何部分。雷峰网
USD连接器赋能千行百业
多款适用于机器人数据格式和Apple Vision Pro流式传输的全新USD连接器将为更多行业带来 OpenUSD 互操作性与高级创作能力。
据介绍,当前,为帮助更多使用 OpenUSD的工业工作负载,NVIDIA与西门子正在扩大合作,西门子将把OpenUSD 流水线与其Simcenter仿真技术组合集成,以支持基于证据的决策和关键利益相关方之间的协作。这一集成可以实现复杂仿真数据的高保真、实时、逼真可视化,让企业能够更加深入地了解产品在实际操作环境中的性能。为打好基础,西门子还将把Omniverse纳入到其Teamcenter 产品生命周期管理软件组合中。
NVIDIA还发布了一个从统一机器人描述格式(Unified Robotics Description Format)到OpenUSD的连接器,让机器人专家能够将他们的机器人数据无缝导入到用于设计、仿真和强化学习等用途的各种应用中。
除此之外,为了进一步推动OpenUSD生态系统的扩张,NVIDIA发布了OpenUSD Exchange软件开发套件,帮助开发者创建出自己的OpenUSD数据连接器。
新的开发者工具和API可通过NVIDIA Graphics Delivery Network(GDN),将大规模OpenUSD场景从基于Omniverse平台构建的应用流式传输到 Apple Vision Pro。目前,这些新工具和API提供抢先体验版本。
目前,NVIDIA API目录提供有USD Search、USD Code 和 USD Validate NIM微服务的预览版,OpenUSD - URDF连接器也已与 NVIDIA Isaac Sim™一起提供。雷峰网雷峰网(公众号:雷峰网)
雷峰网原创文章,未经授权禁止转载。详情见转载须知。
阿里云造「生态」,能让开发者实现「大模型创业自由」吗?
具身智能构型之争:人形、灵巧手、双足,谁是最终 C 位?
港大马毅:现在的大模型只有「知识」,没有「智能」
边缘人工智能提供商 Gcore 获 6000 万美元融资;马斯克开训最大 AI 集群,目标年底开发全球最强 AI丨AI情报局
上海交大新跑出一家具身智能公司「穹彻智能」
成立996天,MiniMax 每日与世界的30亿次交互
IJCAI 2024:论文提交量增加了23.8%,但录用率并无上升
硅基向左,潞晨向右
转发有奖|AFAC2024 金融智能创新大赛,持续火热招募中!
商汤大模型的「5o」交互,普通人如何和 AI 过一天?
我用AI帮义乌老板重新设计全红婵“丑鱼”拖鞋
WAIC 2024 已落幕:大模型再无新玩家,AGI 下半场是计算与应用
从「全球销冠」到「Google首选」,XREAL创新驱动引领新一代智能终端
AMD 6.65 亿美元收购 Silo AI;Genie 击败 Devin、GPT
英伟达全新视觉语音模型 NVEagle,可看图聊天;六个月亏了 5 个亿,寒武纪上半年营收仅 6476 万丨AI情报局
炒菜机器人公司橡鹿科技再获京东近 2 亿元投资;袁进辉公司硅基流动新增两位联创,获哈勃智谱 AI 等入股丨AI情报局
对话 IJCAI2024 大会主席张成奇:克服了幻觉,大模型就不够「靓丽」
Andrej Karpathy:自动驾驶已经实现AGI,汽车其实就是机器人
智谱获华策 1 亿元战略投资,打造影视 AI 研究平台;杨红霞入职香港理工大学;蔚来发布中国首个智能驾驶世界模型丨AI情报局
清华系人形机器人公司「加速进化」获亿元融资;AI 数字人赛道最大笔投资披露;GPT
WAIC最强亮点:非Transformer离线AI大模型已大规模量产,大模型商业比我们想得更快
阿里云CTO周靖人:阿里云百炼服务客户数从9万增长至23万,涨幅超150%
发布三个月,豆包大模型综合能力提升20.3%,应用落地再提速
黑神话手办炒到6000,AI自己做一个可行?
RL 是推理神器?清华上交大最新研究指出:RL 让大模型更会“套公式”、却不会真推理
AI 编程新星 Anysphere 获 A16z 估值 4 亿美元投资;微软为 Excel 等研发新 AI 模型丨AI情报局
揭秘全网刷屏的人形机器人NEO,背后是比特斯拉还猛的AI公司
Andrej Karpathy:自动驾驶已经实现AGI,汽车其实就是机器人
2024WAIC热议大模型助力产业新趋势,可信应用成焦点
当人形机器人开始走进车厂
Neuralink发布超能力V0.2版本:CAD设计、CS轻松拿捏
当人形机器人开始走进车厂
GPT新版本猜想:奥特曼草莓图引发推理热潮
门板上做研究的首席科学家:Jeff Dean解密谷歌和Gemini背后的故事
百川智能完成 50 亿元 A 轮融资,北上深国资入局;OpenAI 挑战谷歌,发布 AI 搜索 SearchGPT丨AI情报局
智元发布商用人形全家桶,双足10月开始量产,今年出货200台