AI全流程开发 数据管理 数据集存储在OBS中。 数据集的标注信息存储在OBS中。 支持从OBS中导入数据。 开发环境 Notebook实例中的数据或代码文件可以存储在OBS中。 训练模型 训练作业使用的数据集、算法、运行脚本、训练输出产物、训练过程日志均可以存储在OBS中。 推理部署

查看更多 →

String bucketName ="obs_name"; ObsBuckets obsBuckets = new ObsBuckets(); obsBuckets.addObsBucketsItem(bucketName);

查看更多 →

OBS管理 OBS管理概述 文件传输（推荐） 上传文件至OBS 上传文件夹至OBS 从OBS下载文件 从OBS下载文件夹

查看更多 →

连接OBS 介绍 DIS可以向 对象存储服务 （Object Storage Service，简称OBS）上传数据。 前提条件 已参考自动创建委托创建IAM委托，授权DIS服务去访问用户的OBS。 数据转储 用户在新增转储任务时可设置”数据转储地址”。当“数据转储”设置为“OBS”时，DIS会将通道数据周期性导入OBS。

查看更多 →

OBS管理 查询OBS桶列表 查询OBS桶对象列表 父主题： Console

查看更多 →

OBS事件 华为云函数可以由不同的event源触发。这些事件源可以通过event定义和配置。 OBS事件 此示例设置一个OBS事件，每当对象上传到my-service-resource时，该事件将触发first函数。 # serverless.yml functions: first:

查看更多 →

OBS数据源测试连接失败 原因分析 可能是以下两种原因导致： 数据源地址未配置为Endpoint地址。 AK/SK和桶名称不正确。 解决方案 修改地址为Endpoint地址。 填写正确的AK/SK和桶名称。 如果排除以上问题后，仍然连接失败，可参考数据源连接测试失败排查操作进行问题排查。

查看更多 →

使用obsftp上传/下载数据失败 现象描述 obsftp能够成功启动，但上传/下载数据失败。 可能原因 由于obsftp启动时，如果不指定使用端口，会从0~65535端口中随机选一个。当防火墙或者使用的虚拟机安全组限制了obsftp选择的端口时，使用obsftp时就会出现上传/下载数据失败的现象。

查看更多 →

下载数据集到OBS桶 一个租户下成功订阅数据集的第一个用户订阅完成后不需要手动下载该数据集到OBS桶，系统会自动下载到OBS桶，在数据集订阅到期时间之前该用户也可以多次手动下载该数据集到OBS桶，该租户下的其他用户需要手动下载该数据集到OBS桶。 操作步骤 在数据集服务首页界面上方，单击“个人中心”。

查看更多 →

上传离线数据源至OBS RES使用对象存储服务（Object Storage Service，简称OBS）进行数据源的存储。因此，在使用RES之前您需要开通OBS服务并创建桶，然后在OBS桶中上传用户数据用于推荐作业的计算。 需要存放在OBS桶中的数据包括： 离线数据源：包含用户

查看更多 →

从OBS目录导入数据规范说明 导入数据集时，使用存储在OBS的数据时，数据的存储目录以及文件名称需满足ModelArts的规范要求。 当前只有“图像分类”、“物体检测”、“图像分割”、“文本分类”和“声音分类”标注类型支持按标注格式导入。 其中，“表格”类型的数据集，支持从OBS、

查看更多 →

数据库创建完成后，需要在数据库db1中基于OBS上的样本数据“obs://obs1/sampledata.csv”创建一个表，例如table1。 在“SQL编辑器”页面右侧的编辑窗口上方，选择队列“default”和数据库“db1”。 在编辑窗口中，输入如下SQL语句，单击“执行”。 create table

查看更多 →

查看数据集的OBS下载进度 功能介绍 查看数据集的OBS下载进度。 URI URI格式 POST /softcomai/datalake/v1.0/download/obs/status 参数说明 无。 请求 请求样例 POST https://endpoint/softcomai/datalake/v1

查看更多 →

查看数据集的OBS下载进度 功能介绍 查看数据集的OBS下载进度。 URI URI格式 POST /softcomai/datalake/v1.0/download/obs/status 参数说明 无。 请求 请求样例 POST https://endpoint/softcomai/datalake/v1

查看更多 →

OBS数据连接参数说明 表1 对象存储服务（OBS）连接 参数 是否必选 说明 数据连接类型 是 OBS连接固定选择为OBS。 数据连接名称 是 数据连接的名称，只能包含字母、数字、下划线和中划线，且长度不超过100个字符。 标签 否 标识数据连接的属性。设置标签后，便于统一管理。

查看更多 →

上传数据至OBS（首次使用时需要） 前提条件 已经在OBS上创建好普通OBS桶，请参见创建普通OBS桶。 已经安装obsutil，请参考下载和安装obsutil。 参考线下容器镜像构建及调试章节，构建容器镜像并调试，镜像构建及调试与单机单卡相同。 上传镜像，参考单机单卡训练的上传镜像章节操作。

查看更多 →

迁移OBS桶数据至 GaussDB (DWS)集群 教程指引 本教程通过演示将样例数据上传OBS，以及将OBS的数据导入GaussDB(DWS)的目标表中，让您快速掌握如何从OBS导入数据到GaussDB(DWS)集群的完整过程。 GaussDB(DWS)支持通过外表将OBS上TXT

查看更多 →

通过外表查询OBS上的数据 直接查询外表查看OBS上的数据 如果数据量较少，可直接使用SELECT查询外表，即可查看到OBS上的数据。 执行以下命令，则可以从外表查询数据。 1 SELECT * FROM product_info_ext_obs; 查询结果显示与原始数据显示相同，

查看更多 →

为什么OBS存储的数据丢失了？ 请检查桶中是否设置了生命周期过期删除规则，符合规则的对象会被删除。 请检查桶是否授权了其他用户桶的写权限，被授权的用户都可以删除对象。如果您开启了日志记录功能，可以通过日志记录查询到删除对象的用户。 父主题： 产品咨询

查看更多 →

通过OBS SDK快速使用OBS OBS SDK对OBS服务提供的REST API进行封装，以简化用户的开发工作。您直接调用OBS SDK提供的接口函数即可使用OBS管理数据。 本章节以Java、Python、Go三种SDK为例，帮助您快速上手OBS的基础功能，包括创建桶、上传对象、下载对象、列举对象。

查看更多 →

OBS资源 资源是服务中存在的对象。在OBS中，资源包括桶和对象。您可以在创建自定义策略时，通过指定资源路径来选择特定资源。 表1 OBS的指定资源与对应路径 资源类型 资源名称 资源路径 bucket 桶 【格式】 obs:*:*:bucket:桶名称 【说明】 对于桶资源，I

查看更多 →