AREXOpen in interactive Feed

AREX Feed Article

NVIDIA 在 Hugging Face 发布 USDCraft-10K:1 万个由 DeepSeek-V4.1-Flash 生成的 OpenUSD 仿真资产

November 16, 2026

NVIDIA 在 Hugging Face 上发布了 USDCraft-10K 数据集:10,000 个 OpenUSD(通用场景描述格式)仿真就绪 3D 资产,覆盖 1,000 个类别,其中 8,222 个是带可动关节的铰接对象,其余 1,778 个是不含关节的静态刚体。按数据卡的说明,每个对象都由一条文本提示经语言模型 DeepSeek-V4.1-Flash 逐个生成,编译成扁平化的 PhysX USD stage(单文件场景),可在 NVIDIA Isaac Sim 中直接打开,许可证为 Apache 2.0。仓库创建于 2026 年 10 月 28 日(UTC 13:26),卡片标注 11 月 15 日更新;Hugging Face 员工 Caleb(@calebfahlgren,X 简介标注 software + product @huggingface)在北京时间 11 月 16 日早上 7:41 发推宣布:「NVIDIA 刚刚在 Hugging Face 上放出了 10,000 个 OpenUSD 物体」。

他在推文里列了四个例子:带铰链门的微波炉、带滑动抽屉的五斗柜、带升降门架的叉车、车轮能转的轮椅——这四类在数据集中都有对应类别。数据集页面显示,该数据集近 30 天已获得 3,674 次下载、23 个赞;截至发稿核验,这条推文拿到 254 个赞、251 次收藏。

从微波炉到六轴工业机器人:每类至多 10 个变体

数据卡把全部对象分进六个领域:

领域类别数对象数
厨房与餐饮1651,650
客厅、卧室、电子与玩具1701,700
办公、商业与酒店1441,440
浴室、洗衣与五金1541,540
工业、仓储、建筑与能源1691,690
医疗、户外、园艺、交通与体育1981,980

每个类别至多 10 个变体,编号 01~10。以微波炉(R001)为例,10 个变体同时用到限位旋转(revolute)、连续旋转(continuous)、滑动(prismatic)三种关节;工业领域收录了六轴工业机器人、SCARA 机器人、协作机械臂和叉车,医疗领域有医院病床和轮椅。

卡片同时给出关节统计:8,222 件铰接对象中,含限位旋转关节的 4,776 件、含连续旋转关节的 2,551 件、含滑动关节的 2,639 件、含球关节(spherical)的 5 件,一件对象可以同时含多种关节。每件对象由 1~59 个刚体部件组成(中位数 3 个),关节最多 32 个(中位数 2 个)。

每个资产由一段语言模型程序编译而成

数据卡把生产流程归给 USDCraft 框架;对应的论文于 2026 年 10 月 8 日提交 arXiv,题为 Geometrically Grounded Programmatic Modeling of Articulated 3D Assets for Simulation,七位作者的署名单位均为 NVIDIA,并联合标注南洋理工大学与北京大学。按数据卡的描述,语言模型为每个对象写一段「资产程序」,程序被编译成带部件、关节与关节极限、碰撞几何、质量和物理材质的铰接 USD 资产。

论文摘要解释了机制:预训练 LLM(大语言模型)不做任务特定训练,直接编写并修改可执行程序;「源几何分析」把源网格转成度量化的文本描述,区分已观测表面与未知空间;「迭代几何复核」用同一表示重新编码候选结果,把差异指向具体的程序修改;最后由视觉反馈与物理编写指导收尾。摘要称产出的资产无需人工调整即可载入 Isaac Sim,框架在两个基准上取得领先的关节恢复成绩,并验证了 real-to-sim-to-real(真机—仿真—真机)机器人操作。

项目页另外展示了 text→asset、image→asset、text+image→asset 三种输入模式——分别从纯文本、单张图像、文本加图像生成资产——其中庭院秋千组合案例给出一张输入照片和编译后的 USD 资产渲染;框架代码公开在 GitHub。这批资产对应第一种模式:数据卡写明,它们全部生成自文本提示。

每件资产自带一份物理与交互标注

仓库按 rigid/<group>/<category_id>_<category>/<NN>_<title>/ 组织目录:每个对象一个 meta.json,外加一个 physx/model.usdc 入口 stage(仅当引用贴图时才有 textures/ 子目录)。

meta.json 保留了生成时的文本提示——R001 类别下 1 号变体的提示词是 "Compact countertop microwave oven, 45 x 33 x 26 cm, in a white-painted steel shell. ..."(紧凑台式微波炉,45×33×26 厘米,白色钢制外壳)——以及中英双语类别名(category_zh 字段写作「微波炉」)、物理类型、部件数、关节数(固定关节计入)、关节类型、自由浮动部件数、整体质心坐标、单位设定(Z 轴朝上、米、千克)和文件 SHA-256。这件样例微波炉的 tips_over 字段为 false:静置时自己站得住。

对象级交互标注放在 USD stage 的 customData["usdcraft"] 里:可抓取特征、手部如何操作对象、对称性和 base mode。部件在 /Asset/Links 下作刚体,关节在 /Asset/Joints 下带 PhysX 碰撞、质量与材质。manifest.csv 为每件对象保留一行,含提示词与校验和。

一条命令拉取一个类别,再到 Isaac Sim 里打开

数据卡的 Quick Start 给了三条路径。想先试一个类别,可用 hf download nvidia/USDCraft-10K --repo-type dataset --include "rigid/kitchen_dining/R001_microwave_oven/*" --local-dir usdcraft 拉下微波炉类别的 10 个变体;在 Isaac Sim 里 File > Open 打开 physx/model.usdc,或把它作为 reference 加进场景;也可以用 USD Python API 遍历 stage,列出所有 UsdPhysics.Joint。不必逐个下载资产也能读索引:load_dataset("nvidia/USDCraft-10K", split="train") 直接返回每件对象的 object_id、路径和提示词。卡片提醒,贴图使用相对路径,复制时要保留每个对象的 physx/ 目录。

「正逐步上传」的说明还在,独立评测缺席

数据卡至今保留一句「数据集将包含约 10,000 个对象、正逐步上传,卡片数字反映仓库当前内容」的说明;按卡片列出的明细,六大领域合计正好 1,000 类、10,000 件,可自行核对。

截至发稿,尚未见对这批资产生成质量的独立评测:USDCraft 论文报告的是框架在基准上的成绩,而这 10,000 件按提示词生成的对象——关节极限是否合理、抓取与手部交互标注是否足以支撑操作策略训练——还没有第三方在 Isaac Sim 里给出公开结果。按卡片铺好的路径,验证的第一步是下载、打开、遍历关节。

参考链接

  • nvidia/USDCraft-10K — Hugging Face 数据集页
  • Caleb (@calebfahlgren) 的发布推文
  • USDCraft: Geometrically Grounded Programmatic Modeling of Articulated 3D Assets for Simulation — arXiv:2610.11322
  • USDCraft 项目页
  • NVlabs/USDCraft — GitHub