更新时间:2026-11-13 GMT+08:00
分享

创建数据评测任务

数据评测是具身智能开发必不可少的环节,用户采集的数据可能在数据质量方面没有清晰的反馈。通过数据评测可以对数据集进行系统性的质量度量、能力映射和价值评估。

约束限制

当前版本仅支持LeRobot格式的数据集进行评测作业,当前内置支持的机器人类型有R1, SO101, A2D, CM_V2_SL, K4PRO, SH(青龙)。

前提条件

  • 用户已经开通了CloudRobo账号。
  • 用户已有一批LeRobot格式的数据集在本地。
  • 用户终端最低硬件配置为4U8G,用户已采购数据评测的算力资源。
  • 用户当前工作空间绑定的OBS桶必须可用且OBS桶策略正常,否则功能无法正常使用。
    • 如果OBS桶不可用,可根据界面提示重新选择存储地址。普通成员如遇配置失败,请联系管理员处理。
    • 如果OBS桶策略异常,可根据界面提示重新配置OBS桶策略。普通成员如遇配置失败,请联系管理员处理。
    • 如果因其他服务异常导致查询当前工作空间绑定的OBS桶详情失败,请联系华为云技术支持人员处理或提交工单。

创建数据评测任务

  1. 登录CloudRobo控制台。
  2. 在左侧导航栏中单击“数据准备 > 数据评测”,进入数据评测页面。
  3. 单击右上角“创建任务”,进入创建页面,参照如下参数说明配置相关信息。

    表1 数据评测参数说明

    参数

    说明

    基础信息

    任务名称

    数据评测任务的名称。

    系统默认自动生成名称:DataEval-时间戳

    用户也可自定义任务名称,

    命名规则:名称是由中文、数字、字母、下划线(_)、连字符(-)、点(.)、斜线(/)组成,输入长度范围为3~64个字符。

    描述(可选)

    数据评测的简介。

    长度为512个字符以内。

    资源配置

    资源池

    请按照实际需要选择资源池。

    • 专属资源池:专属资源池不与其他用户共享,资源更可控。在使用专属资源池之前,您需要先创建专属资源池并在CloudRobo平台完成纳管,然后在开发过程中方可选择此专属资源池。不同业务使用的专属资源池有所不同,请参考资源准备创建对应的专属资源池。
    • 公共资源池:公共资源池提供公共的大规模计算集群,根据用户作业参数分配使用,资源按作业隔离。用户下发训练作业、部署模型、使用开发环境实例等情况下,均可以使用公共资源池完成。开通账号并申请公测后即可使用CloudRobo的公共资源池。

    专属资源池

    当“资源池”选择“专属资源池”时,显示此参数。

    请在下拉列表选择已有的专属资源池。

    实例规格

    下拉选择资源池类型对应的实例规格。

    评测信息

    评测算法

    单击在弹出的窗口中选择相应的评测信息。

    当前可支持的评测算法有:数据集多样性评测、数据集质量评测。

    挂载配置:

    可选一份机器人描述文件/ROBOT_CONFIG_PATH自定义评测配置文件

    数据集

    可选“空间资产-数据”或“对象存储服务OBS”。

    • 空间资产-数据:单击在弹出的窗口中选择“空间资产-数据”(单击数据右侧“预览”可预览该数据详情),或者单击“创建数据集”,在弹出的窗口中填写参数信息。可参考空间资产-创建数据资产章节。
    • 对象存储服务OBS:单击在弹出的窗口中选择数据在OBS下的存储路径。
      说明:
      • 不支持选择跨区域(Region)的OBS桶。如果您的OBS桶中有需要特别保护的敏感数据,请自行对数据加密后再存放到OBS桶。
      • 需选择符合格式要求的数据文件,建议文件中包含README.md用来解析数据的详细情况。

    数据集名称

    仅在数据集选择“对象存储服务OBS”时有效。

    在输入框中输入数据集名称。

    命名规则:由中文、数字、字母、下划线(_)、连字符(-)、点(.)、斜线(/)、空格组成,不能以空格开头或结尾,长度为2~64个字符。

  4. 填写完相关参数后,单击“立即创建”,数据评测任务创建完成,系统自动返回数据评测列表页面,等待一段时间后,状态为“排队中”即为创建成功。

常见问题

创建数据评测任务时,如果系统提示配额或资源不足,请参考“创建执行作业时遇到系统提示配额或资源不足怎么解决”章节描述来解决。

相关文档