数据预处理 创建数据预处理作业 开发数据预处理作业 父主题： 管理数据

查看更多 →

数据处理 图片处理 Data+ 在线解压

查看更多 →

如何上传数据至OBS？ 使用Octopus进行自动驾驶开发时，您需要将数据上传至 对象存储服务 （OBS）桶中。 您可以登录OBS管理控制台创建OBS桶，并在您创建的OBS桶中创建文件夹，然后再进行数据的上传，OBS上传数据的详细操作请参见《对象存储服务快速入门》。 父主题： 其他常见问题

查看更多 →

在数据集所在行，单击操作列的“导入”。 或者，您可以单击数据集名称，进入数据集“概览”页，在页面右上角单击“导入”。 在“导入”对话框中，参考如下说明填写参数，然后单击“确定”。 “数据来源”：“本地上传” “上传数据存储路径”：数据存储的OBS路径。 “上传数据”：单击“文件上传”，上传本地的数据，单击“确定”。 图1

查看更多 →

用方法。 如果您的数据量较小（小于100MB）或数据文件少（少于100个），建议您使用控制台上传数据。控制台上传无需工具下载或多余配置，在少量数据上传时，更加便捷高效。 如果您的数据量较大或数据文件较多，建议选择OBS Browser+或obsutil工具上传。OBS Brows

查看更多 →

雷达数据采集与上传 堆体服务对雷达点云数据规格约束、云台采集和环境要求 激光雷达点云数据上传 父主题： 堆体测量

查看更多 →

如何上传数据至OBS 使用RES进行推荐时，您需要将数据上传至对象存储服务（OBS）桶中。您可以登录OBS管理控制台创建OBS桶，并在您创建的OBS桶中创建文件夹，然后再进行数据的上传。创建OBS桶和上传文件夹的操作指导请参见创建桶和上传对象。 您在创建OBS桶时，需保证您的OBS桶与RES在同一个区域。

查看更多 →

如何上传实时数据？ 推荐系统支持您通过SDK上传实时数据，具体操作方法如下。 前提条件 如果需要使用近线上传实时数据的用户，可以使用DIS SDK接口上传，请您按照需求下载DIS SDK，下载完之后按照下面的说明进行SDK升级。 子账户无法使用SDK上传数据，需要主账号授权子账号DIS

查看更多 →

用方法。 如果您的数据量较小（小于100MB）或数据文件少（少于100个），建议您使用控制台上传数据。控制台上传无需工具下载或多余配置，在少量数据上传时，更加便捷高效。 如果您的数据量较大或数据文件较多，建议选择OBS Browser+或obsutil工具上传。OBS Brows

查看更多 →

传的数据内容，数据上传格式如下： 1 2 3 4 records=[{"data": "abcdefd", "partition_id": “shardId-0000000001”}] #"data"："xxx"为上传的数据值，请自定义；“partition_id”:“shard

查看更多 →

上传缓冲区数据 上传一个buffer到OBS，此方法会阻塞线程，直至上传结束。上传的根目录（目标OBS桶的位置）是用户在华为HiLens控制台上针对每个设备配置的（参见配置数据存储位置），如果用户没有给设备配置这个信息，那么上传文件会失败。 接口调用 hilens.upload_bufer(key

查看更多 →

下多种方式将文件上传到OBS中，通过OBS与Notebook进行数据同步。 表1 上传数据方法 上传方法 说明 “数据”页面上传 通过“数据”页面上传数据，支持上传最大为1GB的单个文件。 数据上传方法请参见“数据”页面上传。 使用命令行工具上传 命令行工具（eihealth-t

查看更多 →

上传数据相关API（废弃） 对已创建的上传作业进行鉴权（废弃） 父主题： 历史API

查看更多 →

上传缓冲区数据 UploadBuffer() 上传一个buffer到OBS，此方法会阻塞线程，直至上传结束。目标OBS桶可在华为HiLens控制台上进行配置，详情请参见配置数据存储位置。 接口调用 HiLensEC hilens::UploadBuffer(const std::string

查看更多 →

数据处理简介 数据处理可对自动驾驶过程中采集到的数据进行处理、解析，处理的结果可以用于回访定位问题，并可根据不同功能的算子生成不同的数据处理作业。数据处理操作引导如下： 数据批导：创建数据导入任务，收集采集车辆原始数据。 数据处理：支持根据自定义数据服务算子，对数据包进行处理，创建不同类型的作业。

查看更多 →

和接入之后，数据一般是不能直接满足训练要求的。为了保障数据质量，以免对后续操作（如数据标注、模型训练等）带来负面影响，开发过程通常需要进行数据处理。 常见的数据处理类型有以下四种： 数据校验：通常数据采集后需要进行校验，保证数据合法。 数据校验是指对数据可用性进行基本判断和验证的

查看更多 →

数据处理介绍 DWR如何实现数据处理 DWR提供的近数据处理能力，可以对OBS内存储的数据，按照用户编排的工作流进行自动化处理（如解析、转码、截图等）。 DWR基于 函数工作流 FunctionGraph的函数能力，将复杂的业务处理逻辑编排为工作流，通过事件触发器或API驱动，自动化

查看更多 →

“对象存储服务”的内容。 假设某用户于2023年7月1日对15TB数据做图片处理。由于数据处理费用无适用的资源包，则按照按需计费方式分析如下。 0~10TB范围内的数据免费，因此该用户的数据处理费用为： 数据处理费用= (15TB - 10TB) * 1024 * 0.025元/GB

查看更多 →

数据处理可以处理哪些数据源中的数据？ 目前仅支持读写OBS桶中的数据。如果读写租户OBS中数据，可以使用ModelArts提供的MoXing的API能力，实现读写OBS中的数据。 父主题： 数据处理

查看更多 →

上传 上传概述 流式上传（PUT上传） 表单上传（POST上传） 多段上传 断点续传 追加写对象 授权第三方上传 查看上传进度 使用上传回调获取对象信息 父主题： 对象管理

查看更多 →

上传小于1GB数据 上传数据 上传数据是最常用的添加数据功能，但由于网页传输大文件时存在一定的限制，所以上传数据的大小不能超过1GB。 图1 上传数据 复制数据 复制数据会从别的项目中复制一份数据到当前项目中，这里可选择的源项目需是当前账号为管理员的对应项目。如需设置项目成员，请参考用户指南中的项目成员和权限。

查看更多 →