-
数据处理
![]()
数据处理 在数据服务首页左侧导航，选择“首页>我的数据集”。 在“我的数据集”页签单击新增的数据集。 单击“应用数据集 > 数据处理”。 进入“新增作业”界面，如图1所示。 参数说明如下所示： 作业名称：自定义输入。 开发环境：选择通用编辑器。 作业位置：存储作业脚本的数据湖OB
来自：帮助中心 -
数据处理
![]()
数据处理 数据处理支持什么类型脚本？ 运行环境如何安装Python包？ 数据处理可以处理哪些数据源中的数据？ 用户注销后，是否会清理数据服务对应的个人数据以及资源，是否还会计费？ 父主题： 常见问题
来自：帮助中心 -
数据处理
![]()
-
数据处理
![]()
数据处理 当数据采集和接入之后，数据一般是不能直接满足训练要求的。为了保障数据质量，以免对后续操作（如数据标注、模型训练等）带来负面影响，开发过程通常需要进行数据处理。ModelArts提供了数据处理的功能，目的是帮助用户从大量的、杂乱无章的、难以理解的数据中抽取或者生成对某些特定的人们来说是有价值、有意义的数据。
来自：帮助中心 -
离线模式
![]()
用户可以设置在后续无网络启动直接进入离线模式作业空间，设置后当用户无网络情况时，默认进离线模式的“作业空间”。 单击“离线使用”，进入到“作业空间”页面。 在离线模式下的“作业空间”页面，单击右上角“登录”，弹出“华为账号登录”对话框，如图2所示。单击“离线使用”。 图2 华为账号登录 离线模式下的“作
来自：帮助中心 -
离线作业
![]()
-
离线日志
![]()
生日志，页面会无数据显示。 图1 日志管理 在需要下载的日志行单击“下载”，即可将日志下载到本地。 日志转存储 华为云为您提供了日志转存储服务，日志转存储服务是华为云CDN配合函数工作流，将CDN日志存储到OBS桶，可以帮助您将日志存储更长的时间，便于您基于长时间的日志做出自定义
来自：帮助中心 -
数据处理
![]()
-
数据处理
![]()
-
数据处理
![]()
-
数据处理
![]()
-
转换离线模型
![]()
训练后的Caffe和Tensorflow模型，有两种初步评估的方法评估Ascend 310芯片是否支持用户模型，评估方法如下：模型使用的算子是否全部包含在算子清单内，包含即支持。使用模型转换工具直接转换训练好的模型，确认是否可以转换成功，转换成功即支持，不支持的算子将返回错误信息。算子清单可参考《算子清单》。如存在不支持的算子，请参考《T
来自：帮助中心 -
离线模型推理
![]()
-
转换离线模型
![]()
离线模型转换工具包含在DDK工具包内，位于目录<$DDK_HOME>/uihost/bin/omg下，OMG为命令行工具（可通过-h获得参数信息），用于实现caffe和tensorflow模型转换成Ascend 310支持的om文件。OMG工具的使用说明请参考《模型转换指导》中的“使用OMG工具转换模型”章节。caffe模型的转换：#om
来自：帮助中心 -
数据处理简介
![]()
数据处理简介 ModelArts平台提供的数据处理功能，基本目的是从大量的、杂乱无章的、难以理解的数据中抽取或者生成对某些特定的人们来说是有价值、有意义的数据。当数据采集和接入之后，数据一般是不能直接满足训练要求的。为了保障数据质量，以免对后续操作（如数据标注、模型训练等）带来负
来自：帮助中心 -
数据处理简介
![]()
数据处理简介 数据处理可对自动驾驶过程中采集到的数据进行处理、解析，处理的结果可以用于回访定位问题，并可根据不同功能的算子生成不同的数据处理作业。数据处理操作引导如下： 数据批导：创建数据导入任务，收集采集车辆原始数据。 数据处理：支持根据自定义数据服务算子，对数据包进行处理，创建不同类型的作业。
来自：帮助中心 -
数据处理
![]()
-
数据处理
![]()
-
数据处理
![]()
-
数据处理
![]()
-
数据处理
![]()
数据处理 修改列名 数据集列合并 数据集聚合 数据集行合并 数据集行过滤 数据集连接 数据集抽样 数据集拆分 数据集行去重 执行spark sql脚本 替换 缺失值填充 缺省值填充 修改列数据类型 数据集选择列 设置元数据 数据集按列排序 增加序列号 普通表转KV表 KV表转普通表
来自：帮助中心
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
