对象存储服务 OBS     

对象存储服务(Object Storage Service)是一款稳定、安全、高效、易用的云存储服务,具备标准Restful API接口,可存储任意数量和形式的非结构化数据。

 
 

    并行数据存储 更多内容
  • 配置Hive分区元数据冷热存储

    配置Hive分区元数据冷热存储 分区元数据冷热存储介绍 为了减轻集群元数据库压力,将长时间未使用过的指定范围的分区相关元数据移动到备份表,这一过程称为分区数据冻结,冻结的分区数据称为冷分区,未冻结的分区称为热分区,存在冷分区的表称为冻结表。将被冻结的数据重新移回原元数据表中,这一过程称为分区数据解冻。

    来自:帮助中心

    查看更多 →

  • 配置Flink任务并行度

    配置Flink任务并行度 操作场景 并行度控制任务的数量,影响操作后数据被切分成的块数。调整并行度让任务的数量和每个任务处理的数据与机器的处理能力达到更优。 查看CPU使用情况和内存占用情况,当任务和数据不是平均分布在各节点,而是集中在个别节点时,可以增大并行度使任务和数据更均匀的分布

    来自:帮助中心

    查看更多 →

  • 并行文件系统概述

    用户可以通过以下几种方式使用并行文件系统。 OBS桶的权限管理规则及权限要求同样适用于并行文件系统,用户在使用并行文件系统前需要确保具备OBS资源的访问权限。 表1 使用方式 方式 主要功能 相关链接 并行文件系统控制台 您可以在控制台创建并行文件系统,并进行查看、管理等基本操作。 创建并行文件系统

    来自:帮助中心

    查看更多 →

  • 设置Spark Core并行度

    设置Spark Core并行度 操作场景 并行度控制任务的数量,影响shuffle操作后数据被切分成的块数。调整并行度让任务的数量和每个任务处理的数据与机器的处理能力达到更优。 查看CPU使用情况和内存占用情况,当任务和数据不是平均分布在各节点,而是集中在个别节点时,可以增大并行度使任务和数

    来自:帮助中心

    查看更多 →

  • 创建并行文件系统

    。 查看已购存储包。 区域选择后,“已购存储包”右侧会显示该区域已经购买的存储包类型及剩余容量,可根据存储包信息确认是否在该区域创建并行文件系统。 数据冗余存储策略:配置多AZ后,数据冗余存储至多个AZ中,可用性更高。 请根据业务情况提前规划是否配置多AZ功能,并行文件系统一旦创建成功,后续无法修改数据冗余存储策略。

    来自:帮助中心

    查看更多 →

  • 数据转发至MongoDB存储

    数据转发至MongoDB存储 场景说明 对于平台的流转数据可以选择让平台将设备上报数据转发给文档数据库服务(DDS),由DDS进行存储(华为云DDS完全兼容MongoDB协议),用户无需做额外的数据存储代码开发即可使用设备数据进行业务处理。本示例为将流转数据转发至文档数据库服务存储。

    来自:帮助中心

    查看更多 →

  • 配置Hive分区元数据冷热存储

    配置Hive分区元数据冷热存储 分区元数据冷热存储介绍 为了减轻元数据库压力,将长时间未使用过的指定范围的分区相关元数据移动到备份表,这一过程称为分区数据冻结,移动的分区数据称为冷分区,未冻结的分区称为热分区,存在冷分区的表称为冻结表。将被冻结的数据重新移回原元数据表,这一过程称为分区数据解冻。

    来自:帮助中心

    查看更多 →

  • 配置并行处理算子

    配置并行处理算子 并行处理算子可以同时执行多个分支逻辑,分支间互不影响。 表1 并行处理算子 参数 说明 失败策略 当并行分支中存在失败情况时,配置API工作流的失败策略。 任一分支失败则终止:表示当并行分支中存在失败情况时,则此API工作流置为失败状态,不再继续执行。 分支失败

    来自:帮助中心

    查看更多 →

  • 配置并行文件系统

    图1 选择组件 单击“云存储配置”模块中的“编辑”,进入云存储配置页面。 单击选择“配置并行文件系统”。 图2 配置并行文件系统 从下拉框中选择已授权的并行文件系统名称。 如需新增授权,可以单击下拉框右侧“去授权并行文件系统”进行添加,具体操作请参考授权并行文件系统。 参考表1配置容器挂载的路径和权限。

    来自:帮助中心

    查看更多 →

  • 配置管理数据备份存储

    配置管理数据备份存储 配置保存eBackup管理数据数据库及配置文件等)的备份存储信息,用于发生灾难后恢复eBackup管理系统。eBackup支持NFS、S3、FTP和SFTP存储作为管理数据的备份存储。本节介绍如何配置S3类型的备份存储。 背景信息 备份eBackup管理数

    来自:帮助中心

    查看更多 →

  • 挂载并行文件系统

    nux重启后,都需要重新挂载。 并行文件系统的容量请以实际使用情况为准。 您也可以设置开机自动挂载并行文件系统,具体操作请参见开机自动挂载并行文件系统。 一个并行文件系统支持挂载到多台 云服务器 ,但数据一致性需由您自行维护,避免出现多台云 服务器 同时对一个文件并发写入的情况。 桶级的

    来自:帮助中心

    查看更多 →

  • 配置Flink任务并行度

    配置Flink任务并行度 Flink任务并行度介绍 并行度控制任务的数量,影响操作后数据被切分成的块数。调整并行度让任务的数量和每个任务处理的数据与机器的处理能力达到更优。 查看CPU使用情况和内存占用情况,当任务和数据不是平均分布在各节点,而是集中在个别节点时,可以增大并行度使任务和数

    来自:帮助中心

    查看更多 →

  • 删除存储

    删除存储 删除存储前,需要先在数据管道删除对应的存储输出算子,或者修改对应的存储输出算子使其输出到其它存储中,然后点击存储管理页面上的“删除存储”按钮。 父主题: 存储

    来自:帮助中心

    查看更多 →

  • 更新存储

    响应Body参数 参数 参数类型 描述 data_store_id String 存储 ID 最小长度:0 最大长度:64 name String 存储名称 最小长度:0 最大长度:64 group_id String 存储 ID 最小长度:0 最大长度:64 tags Array of Tag

    来自:帮助中心

    查看更多 →

  • 扩容存储

    当存储容量不足,不能满足当前使用要求时,您可以对存储进行扩容。专属企业存储类型扩容相关说明,请参考下表所示。新增后的总容量需要小于等于100TB。提交订单后,您可以单击管理控制台主页面右上角“费用 > 我的订单”,单击订单“详情”可查看订单状态。存储扩容订单状态说明请参考表2。

    来自:帮助中心

    查看更多 →

  • 续订存储

    用户申请的存储到期后,如果需要继续使用,可以进行续订。如果存储启用双活功能,则会同步续订已关联的存储和FC交换机(低时延类型存储有FC交换机)。只有处于“可用”、“过期”或“冻结”状态的专属企业存储,才能续订。系统弹出“续费管理”页面。系统弹出“支付”页面。

    来自:帮助中心

    查看更多 →

  • 存储资源

    存储资源 存储资源的计费模式是按需或者购买套餐包的形式, 按需计费可根据数据量的大小收费,故不需要提前进行购买 套餐包需提前购买,当存储用量超过套餐包规格时,超出部分将自动按量按需计费 图1 存储资源 图2 存储套餐包 图3 购买存储套餐包 父主题: 购买计算资源(主账号操作)

    来自:帮助中心

    查看更多 →

  • 挂载存储

    挂载存储 在Kubernetes中,通过PersistentVolume(PV)方式挂载存储,典型的步骤如下: 创建PV,为集群提供存储服务。 apiVersion: v1 kind: PersistentVolume metadata: name: mypv1 annotations:

    来自:帮助中心

    查看更多 →

  • 存储管理

    存储管理 创建WKS存储 查询WKS存储 删除WKS存储 查询共享存储目录 创建共享存储目录 修改共享目录成员 创建个人存储目录 删除共享目录 删除个人存储目录 查询个人存储目录 查询存储目录访问权限策略 新增或更新存储目录访问权限自定义策略 父主题: 云应用API

    来自:帮助中心

    查看更多 →

  • 存储规格

    存储规格 数据表最大列数不能超过1600列。 init_td(TD(Transaction Directory,事务目录)是Ustore表独有的用于存储页面事务信息的结构,TD的数量决定该页面支持的最大并发数。在创建表或索引时可以指定初始的TD大小init_td)取值范围[2,

    来自:帮助中心

    查看更多 →

  • 存储规格

    存储规格 数据表最大列数不能超过1600列。 init_td(TD(Transaction Directory,事务目录)是Ustore表独有的用于存储页面事务信息的结构,TD的数量决定该页面支持的最大并发数。在创建表或索引时可以指定初始的TD大小init_td)取值范围[2,

    来自:帮助中心

    查看更多 →

共105条
看了本文的人还看了