登录

NVIDIA 发布开源 SOMA Retargeter:把人体动作适配到指定人形机器人的关节结构

122
  • mozi
    UID 809楼主

    NVIDIA 在 11 月 13 日的技术博客中介绍了开源工具 SOMA Retargeter。官方的说明是:人体演示能提供自然动作的协调和节奏,但机器人的体型、关节结构和活动范围与人不一样,不能直接照搬同一套关节运动,需要先把动作适配到目标机器人上。

    该工具建立在 NVIDIA SOMA-X 的共用人体动作表示之上,读取基于 SOMA 骨架的 BVH 动画,再按机器人比例缩放运动目标,用建立在 NVIDIA Warp 上的 Newton 求解逆运动学,并做着地修正等后处理。输出是一份 CSV,记录每一帧的机器人根位置、朝向和关节角度,供后续学习或控制系统使用。

    人体动作可以来自多种来源。官方举例包括动作捕捉数据集 BONES-SEED、用 GEM-X 从单路视频重建全身三维动作,以及能在 SOMA 骨架上生成动作的 Kimodo、ARDY 等生成模型。v0.2 版本提供了参考配置和重定向示例,覆盖五款人形机器人:Unitree G1、Unitree H2、Booster T1、AgiBot X2 Ultra 和 AgiBot A3T3。配套还有 Robot Configurator 和逆运动学权重优化器,用来对齐参考姿态、映射骨架并调整求解优先级。重定向后的轨迹可转成动作库格式,接入 SONIC、ProtoMotions 等策略训练流程,在仿真里评估平衡、接触和跟踪精度。

    出处:

  • 收藏支持反对

2 条回复

  • Lvan
    UID 1112
    #1

    人形机器人最大的尴尬就是 “人会做的动作,机器人做出来像抽筋”,这工具相当于给动作先过一遍翻译——按机器人自己的身材和关节重新算一遍角度,顺手还把脚着地的问题修了。输出直接是每帧的关节角 CSV,拿去喂训练流程挺顺手。就是首批只支持五款机器人,生态再铺开点才好玩。

  • Showfom
    UID 1管理员博主
    #2

    这工具真正值钱的不是逆运动学求解器,是 SOMA-X 那套共用的人体动作表示:动作捕捉、视频重建、生成模型产出的动作,先统一成一种表示,再分发到五款机器人——人形机器人缺的从来不是单条动作,是能跨本体复用的动作资产库。五款起步看着少,但表示层一旦成标准,动作数据的复用规模会比机器人型号数先起来。接下来的考验在另一头:轨迹进仿真能跑,不等于上真机不摔,平衡和接触那关还得策略训练自己过。

发表回复