对象存储服务 OBS     

对象存储服务(Object Storage Service)是一款稳定、安全、高效、易用的云存储服务,具备标准Restful API接口,可存储任意数量和形式的非结构化数据。

 
 

    对象存储OBS配置参数说明 更多内容
  • 配置Hive通过Guardian访问OBS

    配置Hive通过Guardian访问OBS 参考配置Guardian服务对接OBS完成Guardian对接OBS后,即可在Hive客户端创建存储OBS并行文件系统中的表。 Hive对接OBS MRS 集群支持Hive服务基于Metastore方式对接OBS配置Hive基于MetaStore方式对接OBS:

    来自:帮助中心

    查看更多 →

  • 配置Flink通过Guardian访问OBS

    配置Flink通过Guardian访问OBS 参考配置Guardian服务对接OBS完成Guardian对接OBS后,即可在Flink客户端访问OBS并行文件系统并运行作业。 Flink对接OBS 使用安装客户端的用户登录Flink客户端安装节点。 执行如下命令初始化环境变量。 source

    来自:帮助中心

    查看更多 →

  • 配置CORS实现跨域访问OBS

    已经配置了静态网站托管,配置方法请参见静态网站托管。 新建CORS规则 OBS支持通过控制台、API、SDK方式新建CORS规则,不支持通过OBS Browser+、obsutil方式新建CORS规则。 使用OBS控制台 在OBS管理控制台左侧导航栏选择“桶列表”。 在OBS管理控制台桶列表中,单击待操作的桶,进入“对象”页面。

    来自:帮助中心

    查看更多 →

  • 使用kubectl部署带对象存储卷的无状态工作负载

    使用kubectl部署对象存储卷的无状态工作负载 操作场景 对象存储卷创建或导入CCE后,可以在工作负载中挂载对象存储卷。 约束与限制 如下配置示例适用于Kubernetes 1.13及以下版本的集群。 操作步骤 请参见通过kubectl连接集群,使用kubectl连接集群。

    来自:帮助中心

    查看更多 →

  • 连接器图元

    单击(不同类型的连接器图元图标有所不同),设置调用“OBS”参数。 图1 配置OBS 表2 OBS参数说明 参数 说明 动作 系统预置了如下三个动作: view_object_obs:系统预置的查看存储对象的接口。 put_object_obs:系统预置的存储对象接口,用于将系统的对象存储OBS存储桶中。 get

    来自:帮助中心

    查看更多 →

  • 初始化配置obsutil

    初始化配置obsutil 使用obsutil之前,您需要配置obsutil与OBS的对接信息,包括OBS终端节点地址(Endpoint)和访问密钥(AK和SK)。获得OBS的认证后,才能使用obsutil执行OBS桶和对象的相关操作。 前提条件 已成功下载obsutil,具体请参见下载软件。

    来自:帮助中心

    查看更多 →

  • 配置监控数据存储至OBS

    行的操作下的“配置数据存储”。 进入“配置数据存储”页面。 在“配置数据存储”页面,根据页面提示设置参数,为企业路由器实例配置OBS存储。 在“配置数据存储”页面,参数的详细说明,请参见配置OBS数据存储。 父主题: 使用CES服务监控ESW网络指标

    来自:帮助中心

    查看更多 →

  • 配置OBS目的端参数

    配置OBS目的端参数 作业中目的连接为OBS连接时,即导入数据到云服务OBS时,目的端作业参数如表1所示。 高级属性里的参数为可选参数,默认隐藏,单击界面上的“显示高级属性”后显示。 表1 OBS作为目的端时的作业参数 参数类型 参数名 说明 取值样例 基本参数 桶名 写入数据的OBS桶名。

    来自:帮助中心

    查看更多 →

  • 配置Spark通过Guardian访问OBS

    配置Spark通过Guardian访问OBS 参考配置Guardian服务对接OBS完成Guardian对接OBS后,即可在Spark客户端创建Location为OBS路径的表。 Spark对接OBS MRS集群支持Spark服务在创建表时指定Location为OBS文件系统路径,也支持基于Hive

    来自:帮助中心

    查看更多 →

  • 配置HetuEngine通过Guardian访问OBS

    配置HetuEngine通过Guardian访问OBS 参考配置Guardian服务对接OBS完成Guardian对接OBS后,即可在HetuEngine客户端创建指定Location为OBS文件系统路径的表,也支持基于Hive Metastore方式对接OBS。 HetuEngine对接OBS

    来自:帮助中心

    查看更多 →

  • 配置Kafka数据转储至OBS

    设置存储Topic数据的OBS桶的名称。 选择:在下拉列表中选择已创建的OBS桶名称,或者单击“创建转储地址”,新创建一个OBS桶。 输入:输入已创建的OBS桶名称,或者单击“创建转储地址”,新创建一个OBS桶。输入的OBS桶必须和Kafka实例在同一个区域。 转储目录 OBS中存储Topi

    来自:帮助中心

    查看更多 →

  • 设置对象存储挂载参数

    无需填写 不校验服务端证书 sigv2 无需填写 签名版本。对象桶自动使用。 public_bucket 1 设置为1时匿名挂载公共桶。对象桶只读模式下自动使用。 表2 默认使用且可修改的挂载参数 参数 参数值 描述 max_write 131072 仅配置big_writes的情况下才生效,推荐使用128KB。

    来自:帮助中心

    查看更多 →

  • 设置对象存储挂载参数

    前提条件 CCE容器存储(Everest)版本要求1.2.8及以上版本。插件主要负责将挂载参数识别并传递给底层存储,指定参数是否有效依赖于底层存储是否支持。 约束与限制 挂载参数暂不支持安全容器。 对象存储挂载参数 CCE的存储插件everest在挂载对象存储时默认设置了表1和表2的参数,其中表1中的参数不可取消。

    来自:帮助中心

    查看更多 →

  • 配置远程备份至OBS桶

    日志备份”,进入系统日志备份配置管理页面。 图1 日志备份 在“远程备份至OBS 服务器 ”区域,单击“编辑”,弹出备份至OBS配置窗口,配置桶相关参数。 表1 配置参数说明 参数 说明 状态 选择开启或关闭备份至OBS桶,默认。 ,表示开启备份日志至OBS桶。每天零点自动启动备份。

    来自:帮助中心

    查看更多 →

  • 配置Hudi通过Guardian访问OBS

    配置Hudi通过Guardian访问OBS 参考配置Guardian服务对接OBS完成Guardian对接OBS后,即可在spark-shell中创建Hudi COW表存储OBS中。 Hudi对接OBS 使用客户端安装用户登录客户端安装节点。 配置环境变量。 source 客户端安装目录/bigdata_env

    来自:帮助中心

    查看更多 →

  • 配置HDFS通过Guardian访问OBS

    配置HDFS通过Guardian访问OBS 参考配置Guardian服务对接OBS完成Guardian对接OBS后,即可在HDFS客户端查看和创建OBS文件目录。 HDFS对接OBS 以客户端安装用户登录安装了HDFS客户端的节点。 执行以下命令,切换到客户端安装目录。 cd 客户端安装目录

    来自:帮助中心

    查看更多 →

  • 配置Yarn通过Guardian访问OBS

    配置Yarn通过Guardian访问OBS 参考配置Guardian服务对接OBS完成Guardian对接OBS后,即可在集群客户端执行Yarn任务访问OBS。 Yarn对接OBS 以客户端安装用户登录安装了Yarn客户端的节点。 执行以下命令,切换到客户端安装目录。 cd 客户端安装目录

    来自:帮助中心

    查看更多 →

  • 为obsutil配置HTTP代理

    obsutil配置HTTP代理 您可以通过如下两种方式配置HTTP代理。 方式一,通过配置文件.obsutilconfig中的proxyUrl参数,示例:proxyUrl=http://username:password@your-proxy:8080; 方式二,通过系统环境变

    来自:帮助中心

    查看更多 →

  • 配置OBS目的端参数

    配置OBS目的端参数 作业中目的连接为OBS连接时,即导入数据到云服务OBS时,目的端作业参数如表1所示。 高级属性里的参数为可选参数,默认隐藏,单击界面上的“显示高级属性”后显示。 表1 OBS作为目的端时的作业参数 参数类型 参数名 说明 取值样例 基本参数 桶名 写入数据的OBS桶名。

    来自:帮助中心

    查看更多 →

  • 配置OBS目的端参数

    配置OBS目的端参数 支持使用 CS V、CarbonData或二进制格式批量传输大量文件到OBS。 表1 OBS作为目的端时的作业参数 参数类型 参数名 说明 取值样例 基本参数 桶名 写入数据的OBS桶名。 bucket_2 写入目录 写入数据到OBS服务器的目录,目录前面不加“/”。

    来自:帮助中心

    查看更多 →

  • 对象存储迁移实施步骤

    源端桶对应账户需要的权限:只读访问 对象存储服务 (OSS)的权限(XXyunOSSReadOnlyAccess)。 目的端桶需要的权限包括:列举桶,获取桶位置,列举对象,获取对象元数据,获取对象内容,上传对象,列举已上传段,取回归档存储对象。 迁移步骤 创建迁移任务组 图2 迁移任务组

    来自:帮助中心

    查看更多 →

共105条
看了本文的人还看了