对象存储服务 OBS     

对象存储服务(Object Storage Service)是一款稳定、安全、高效、易用的云存储服务,具备标准Restful API接口,可存储任意数量和形式的非结构化数据。

 
 

    对象存储OBS预请求附加参数 更多内容
  • 对象存储卷

    对象存储对象存储卷概述 使用kubectl自动创建对象存储 使用kubectl对接已有对象存储 使用kubectl部署带对象存储卷的无状态工作负载 使用kubectl部署带对象存储卷的有状态工作负载 父主题: 存储管理-Flexvolume(已弃用)

    来自:帮助中心

    查看更多 →

  • 对象存储卷

    对象存储卷 云容器实例支持将对象存储卷挂载到容器中。 对象存储服务 OBS)是一个基于对象的海量存储服务,为客户提供海量、安全、高可靠、低成本的数据存储能力。OBS的更多信息,请参见对象存储服务。 使用限制 待挂载的对象存储必须是按需付费,更多信息,请参见请参见对象存储计费。 请

    来自:帮助中心

    查看更多 →

  • 设置桶和对象的存储类别

    设置桶和对象存储类别 操作场景 本章节指导用户在创建桶和上传对象时,初次设置桶和对象存储类别。如果桶和对象已有存储类别,而您想要修改其存储类别,请查看转换桶和对象存储类别。 桶存储类别和对象存储类别 创建桶时支持设置桶存储类别,也可在桶创建完成后修改桶存储类别。 上传对象时,对

    来自:帮助中心

    查看更多 →

  • 获取桶列表

    int,查询结果都是所有区域的桶列表。 请求消息参数请求消息中不带请求参数请求消息头 该操作消息头与普通请求一样,请参见表3,但可以带附加消息头,附加请求消息头如下所示。 表1 附加请求消息头 消息头名称 描述 是否必选 x-obs-bucket-type 通过此消息头明确获取的列表内容。

    来自:帮助中心

    查看更多 →

  • 配置OBS目的端参数

    配置OBS目的端参数 作业中目的连接为OBS连接时,即导入数据到云服务OBS时,目的端作业参数如表1所示。 高级属性里的参数为可选参数,默认隐藏,单击界面上的“显示高级属性”后显示。 表1 OBS作为目的端时的作业参数 参数类型 参数名 说明 取值样例 基本参数 桶名 写入数据的OBS桶名。

    来自:帮助中心

    查看更多 →

  • obsutil简介

    支持增量同步上传、下载和复制对象。 支持复制单个对象或按对象名前缀批量复制多个对象。 支持移动单个对象或按对象名前缀批量移动多个对象。 支持对失败的上传、下载、复制等任务进行恢复。 日志记录 支持在客户端配置日志记录,记录对桶和对象的操作日志,方便统计与分析。 obsutil目前暂不支持

    来自:帮助中心

    查看更多 →

  • 配置OBS目的端参数

    配置OBS目的端参数 作业中目的连接为OBS连接时,即导入数据到云服务OBS时,目的端作业参数如表1所示。 高级属性里的参数为可选参数,默认隐藏,单击界面上的“显示高级属性”后显示。 表1 OBS作为目的端时的作业参数 参数类型 参数名 说明 取值样例 基本参数 桶名 写入数据的OBS桶名。

    来自:帮助中心

    查看更多 →

  • 其他附加性说明

    其他附加性说明 本文档中提供的API接口均采用短连接,OMP作为服务端时会主动拆链,建议客户端不要主动拆链,等接收到服务端的FIN, ACK后按照正常四次挥手拆链。 若客户端主动拆链,可能造成该链路对应的端口短时间不可用,影响客户发送请求。 父主题: 附录

    来自:帮助中心

    查看更多 →

  • 预训练

    训练 前提条件 已上传训练代码、训练权重文件和数据集到SFS Turbo中,具体参考代码上传至OBS和使用Notebook将OBS数据导入SFS Turbo。 Step1 在Notebook中修改训练超参配置 以llama2-13b训练为例,执行脚本0_pl_pretrain_13b

    来自:帮助中心

    查看更多 →

  • SFS Turbo存储联动

    Turbo导出数据到OBS桶。 绑定OBS桶 登录弹性文件服务管理控制台。 在文件系统列表中,单击创建的文件系统名称,进入文件系统详情页面。 进入“绑定后端存储”页签,单击“绑定OBS桶”。 图1 绑定OBS桶 在右侧弹窗“绑定OBS桶”中,填写如下参数。 表1 参数说明 参数 含义 限制

    来自:帮助中心

    查看更多 →

  • 对象存储概述

    通过静态存储卷使用已有对象存储:即静态创建的方式,需要先使用已有的对象存储创建PV,然后通过PVC在工作负载中挂载存储。适用于已有可用的底层存储或底层存储需要包周期的场景。 通过动态存储卷使用对象存储:即动态创建的方式,无需预先创建对象存储,在创建PVC时通过指定存储类(StorageClass),即

    来自:帮助中心

    查看更多 →

  • 对象存储概述

    通过静态存储卷使用已有对象存储:即静态创建的方式,需要先使用已有的对象存储创建PV,然后通过PVC在工作负载中挂载存储。适用于已有可用的底层存储或底层存储需要包周期的场景。 通过动态存储卷使用对象存储:即动态创建的方式,无需预先创建对象存储,在创建PVC时通过指定存储类(StorageClass),即

    来自:帮助中心

    查看更多 →

  • 设置对象属性

    设置单个对象属性时生成结果清单文件。 f 附加参数,批量设置对象属性时可选 强制操作,不进行询问提示。 r 附加参数,批量设置对象属性时必选 按指定的对象名前缀批量设置对象属性。 v 附加参数,批量设置对象属性时可选 按指定的对象名前缀批量设置多版本对象属性。 o 附加参数,可选 生成结果清单文件

    来自:帮助中心

    查看更多 →

  • 构造请求

    对象存储支持的REST请求方法 方法 说明 GET 请求 服务器 返回指定资源,如获取桶列表、下载对象等。 PUT 请求服务器更新指定资源,如创建桶、上传对象等。 POST 请求服务器新增资源或执行特殊操作,如初始化上传段任务、合并段等。 DELETE 请求服务器删除指定资源,如删除对象等。 HEAD

    来自:帮助中心

    查看更多 →

  • 预训练

    训练 前提条件 已上传训练代码、训练权重文件和数据集到SFS Turbo中,具体参考代码上传至OBS和使用Notebook将OBS数据导入SFS Turbo。 Step1 在Notebook中修改训练超参配置 以llama2-13b训练为例,执行脚本0_pl_pretrain_13b

    来自:帮助中心

    查看更多 →

  • 设置跨域规则

    指定允许用户从应用程序中访问的header exposeHeader.add("x-obs-expose-header"); rule.setExposeHeader(exposeHeader); // 指定浏览器对特定资源的取(OPTIONS)请求返回结果的缓存时间,单位为秒 rule.setMaxAgeSecond(10);

    来自:帮助中心

    查看更多 →

  • 上传对象

    Parallel 请求中的-p参数。 Jobs 请求中的-j参数。 Threshold 请求中的-threshold参数。 PartSize 请求中的-ps参数。 Exclude 请求中的-exclude参数。 Include 请求中的-include参数。 TimeRange 请求中的-timeRange参数。

    来自:帮助中心

    查看更多 →

  • 创建对象存储服务

    数据。 OBS简介 对象存储服务OBS是一个基于对象的海量存储服务,为客户提供海量、安全、高可靠、低成本的数据存储能力。对象存储服务OBS的基本组成是桶和对象。桶是OBS存储对象的容器,每个桶都有自己的存储类别、访问权限、所属区域等属性,用户在互联网上通过桶的访问 域名 来定位桶。对象是OBS中数据存储的基本单位。

    来自:帮助中心

    查看更多 →

  • 监控对象存储服务

    监控对象存储服务 使用场景 用户在使用OBS的过程中会不断发送PUT、GET类的请求,产生上传、下载流量,也可能会遇到服务端返回的错误响应。为使用户更好地掌握OBS桶的状态,华为云提供了云监控服务(Cloud Eye)。用户可使用云监控服务(Cloud Eye)监控自己的OBS桶,

    来自:帮助中心

    查看更多 →

  • 源端为对象存储

    "fromJobConfig" } ] } 参数说明 参数 是否必选 类型 说明 fromJobConfig.bucketName 是 String 对象存储的桶名。 fromJobConfig.inputDirectory 是 String

    来自:帮助中心

    查看更多 →

  • 专属对象存储

    专属对象存储 专属对象存储是专属云资源下的对象存储服务对象存储服务可以申请独享的专属物理主机资源,从而满足您对隔离性、安全性、性能的更高要求。 图1 专属对象存储 购买专属对象存储 专属云的申请和开通是线下进行的,开通专属云后才能购买专属对象存储,购买方法请参见如何购买专属对象存储。 对象

    来自:帮助中心

    查看更多 →

共105条
看了本文的人还看了