批导数据
原始数据采集完毕之后,需要您将原始数据转换Octopus平台适用的数据格式,以便于您更快速的完成数据处理。
创建数据导入任务
数据导入任务可选择“对象存储导入”和“数据递送导入”,本章节以“对象存储导入”为例。
- 在左侧菜单栏中,单击“数据处理 > 数据批导”。
- 选择“数据导入”页签,单击“导入”。
- 选择“对象存储导入”页签,填写具体信息。
选择目标数据包所在的对象存储路径,平台将自动扫描该目录下所有子目录。包含有“Rosbag包和与数据包同名yaml”文件夹的子目录将被识别为有效数据包,可导入。上传数据前,请确保原始数据包含必要的有效文件。
图1 数据对象存储导入
表1 数据导入参数说明(含*为必填项) 参数
说明
对象存储访问密钥*(AK/SK)
包含访问密钥ID(AK)和私有访问密钥(SK)两部分,导入数据时,通过AK识别访问用户的身份,通过SK对请求数据进行签名验证,用于确保请求的机密性、完整性和请求者身份的正确性。
对象存储目录*
建议对象存储目录选择包含“Rosbag包和与数据包同名yaml”文件夹的上一级目录。
数据包筛选*
数据包需包含符合平台要求的传感器数据文件。平台最多支持不超过10个有效数据包。
- 数据处理。
可选择数据是否进行Opendata转换,并且选用相对应的数据服务算子(数据回放)以及资源规格。
图2 数据处理
- 当yaml和算子中有相同的信息,算子上传后,会覆盖yaml中的信息。
- 没有进行Opendata转换的数据,只能作为算子作业的输入使用。
- 勾选“我已阅读并同意《八爪鱼自动驾驶云服务声明》”,单击“确认”,提交收集任务,系统将生成数据导入任务ID。
- 在任务列表,单击操作栏中的“详情”,进入到任务详情页,预览数据导入任务信息,查看数据包详情。
- 查看任务状态。
在任务列表,用户可通过查看任务所处状态了解任务当前进度。