对象存储服务 OBS     

对象存储服务(Object Storage Service)是一款稳定、安全、高效、易用的云存储服务,具备标准Restful API接口,可存储任意数量和形式的非结构化数据。

 
 

    obs 整个目录复制 更多内容
  • 查询OBS桶下的目录

    查询OBS桶下的目录 功能介绍 查询用户用于保存下载数据的OBS文件目录。 URI URI格式 GET /softcomai/datalake/v1.0/download/obs/listobjs?serviceType={serviceType}&preFolder={preFolder}

    来自:帮助中心

    查看更多 →

  • 使用obsutil实现目录分享

    使用obsutil实现目录分享 目录分享允许桶的拥有者将桶的目录或者整个桶以授权码+提取码的形式分享给其他用户。获取到授权码和提取码的用户,可以在授权码的有效期内通过OBS提供的工具(OBS Browser、obsutil),或者直接在浏览器上输入授权码进行对象的列举和下载。 o

    来自:帮助中心

    查看更多 →

  • 查询OBS桶下的目录

    查询OBS桶下的目录 功能介绍 查询用户用于保存下载数据的OBS文件目录。 URI URI格式 GET /softcomai/datalake/v1.0/download/obs/listobjs?serviceType={serviceType}&preFolder={preFolder}

    来自:帮助中心

    查看更多 →

  • OBS跨区域复制任务设置

    OBS跨区域复制任务设置 概述 “OBS跨区域复制任务设置”插件用于配置OBS启用/禁用跨区域复制任务。 配置介绍 表1 配置说明 参数 配置说明 任务所在region 选择任务所在区域。 桶名称 选择OBS桶名称。 任务设置 配置OBS启用/禁用跨区域复制任务。 启用:OBS启用跨区域复制任务。

    来自:帮助中心

    查看更多 →

  • 从OBS目录导入数据规范说明

    OBS目录导入数据规范说明 导入数据集时,使用存储OBS的数据时,数据的存储目录以及文件名称需满足ModelArts的规范要求。 当前只有“图像分类”、“物体检测”、“图像分割”、“文本分类”和“声音分类”标注类型支持按标注格式导入。 其中,“表格”类型的数据集,支持从OBS

    来自:帮助中心

    查看更多 →

  • 使用ma-cli obs-copy命令复制OBS数据

    使用ma-cli obs-copy命令复制OBS数据 使用ma-cli obs-copy [SRC] [DST]可以实现本地和OBS文件或文件夹的相互复制。 $ma-cli obs-copy -h Usage: ma-cli obs-copy [OPTIONS ] SRC

    来自:帮助中心

    查看更多 →

  • run.sh脚本测试ModelArts训练整体流程

    本地与ModelArts上训练对比 ModelArts上进行训练比本地训练多了一步OBS和容器环境的数据迁移工作。 增加了和OBS交互工作的整个训练流程如下: 建议使用OBSutil作为和OBS交互的工具,如何在本机安装obsutil可以参考obsutil安装和配置。 训练数据、代码、模型下载。(本地使用硬盘挂载或者docker

    来自:帮助中心

    查看更多 →

  • 在ModelArts Standard使用run.sh脚本实现OBS和训练容器间的数据传输

    建议使用OBSutil作为和OBS交互的工具,如何在本机安装obsutil可以参考安装和配置OBS命令行工具。 训练数据、代码、模型下载。(本地使用硬盘挂载或者docker cp,在ModelArts上使用OBSutil) 启动脚本,用法无切换,一般就是到达执行目录,然后python

    来自:帮助中心

    查看更多 →

  • 从OBS目录导入数据到数据集

    OBS目录导入数据到数据集 前提条件 已存在创建完成的数据集。 准备需要导入的数据,具体可参见从OBS目录导入数据规范说明。 需导入的数据,已存储OBS中。Manifest文件也需要存储OBS。详细指导请参见创建OBS桶用于ModelArts存储数据。 确保数据存储OBS

    来自:帮助中心

    查看更多 →

  • 训练作业使用MoXing复制数据较慢,重复打印日志

    ch的OBS接口直接从OBS上读取数据。 如果文件较小,可以将OBS上的数据保存成“.tar”包。训练开始时从OBS上下载到“/cache”目录,解压以后使用。 如果文件较大,可以保存成多个“.tar”包,在入口脚本中调用多进程进行并行解压数据。不建议把散文件保存到OBS上,这样会导致下载数据很慢。

    来自:帮助中心

    查看更多 →

  • 对象存储OBS源表

    对象存储OBS源表 功能描述 文件系统连接器可用于将单个文件或整个目录的数据读取到单个表中。 当使用目录作为source路径时,对目录中的文件进行 无序的读取。更多信息参考文件系统 SQL 连接器 语法格式 1 2 3 4 5 6 7 8 9 10 11 CREATE

    来自:帮助中心

    查看更多 →

  • 在ModelArts中如何查看OBS目录下的所有文件?

    在ModelArts中如何查看OBS目录下的所有文件? 在使用Notebook或训练作业时,需要查看目录下的所有文件,您可以通过如下方式实现: 通过OBS管理控制台进行查看。 使用当前账户登录OBS管理控制台,去查找对应的OBS桶、文件夹、文件。 通过接口判断路径是否存在。在已有

    来自:帮助中心

    查看更多 →

  • 使用obsutil实现客户端跨区域复制

    使用obsutil实现客户端跨区域复制 obsutil支持使用客户端跨区域复制模式进行复制,即通过数据流的方式从源桶直接复制数据到目标桶,且两个桶可以是任意两个OBS服务的桶;借助客户端跨区域复制模式即可实现相同账户下不同区域桶或不同账户间桶内对象复制;跨账号复制对象具体步骤如下:

    来自:帮助中心

    查看更多 →

  • 移动当前目录至新目录

    移动当前目录至新目录 功能介绍 移动当前目录至新目录。移动目录的的同时会移动其下的所有子目录与api。 调用方法 请参见如何调用API。 URI POST /v1/{project_id}/service/servicecatalogs/{catalog_id}/move 表1 路径参数

    来自:帮助中心

    查看更多 →

  • 创建目录

    String 目录名称。 parentNodeId 是 String 父目录ID。 secretLevel 是 String 密级。 description 是 String 描述。 businessType 是 String 业务类型,取值包括MODEL和PACKAGE。 响应

    来自:帮助中心

    查看更多 →

  • 创建目录

    创建目录 在应用的开发页面,根据规划创建目录,分别用于存放数据对象服务编排、脚本、事件、前端页面等。 目录配置为: 目录 说明 前台页面 用于存放前端页面。 控制逻辑 用于存放后台逻辑,如,脚本、服务编排、BPM等。 数据对象 用于存放数据模型(即数据对象)。 操作步骤 如图1

    来自:帮助中心

    查看更多 →

  • 修改目录

    "" }] 参数说明 参数名 是否必选 参数类型 备注 nodeId 是 String 目录节点ID。 nodeName 是 String 目录名称。 parentNodeId 是 String 目录父节点的ID。 secretLevel 是 String 密级。 comment 是

    来自:帮助中心

    查看更多 →

  • API目录

    API目录 订阅API产品 创建凭证 通过Explorer调试API 父主题: API消费

    来自:帮助中心

    查看更多 →

  • 目录分享

    目录分享 如果您想将一个文件夹分享给其他人,同时希望能够指定有效期,OBS Browser+提供文件夹分享和授权码登录的功能,轻松为你完成数据分享。 首先,您登录OBS Browser+后,选择您要分享的目录右键或者单击操作栏的分享按钮。 然后,选择分享链接的有效期,并输入提取码

    来自:帮助中心

    查看更多 →

  • 获取目录

    获取目录 功能介绍 获取目录 URI POST /GT3KServer/v4/features/{feature_id}/children 表1 路径参数 参数 是否必选 参数类型 描述 feature_id 是 String 特性目录ID 请求参数 表2 请求Header参数 参数

    来自:帮助中心

    查看更多 →

  • 修改目录

    修改目录 功能介绍 修改目录(数据标准、码表)。 调用方法 请参见如何调用API。 URI PUT /v2/{project_id}/design/directorys 表1 路径参数 参数 是否必选 参数类型 描述 project_id 是 String 项目ID,获取方法请参见项目ID和账号ID。

    来自:帮助中心

    查看更多 →

共105条
看了本文的人还看了