对象存储服务 OBS     

对象存储服务(Object Storage Service)是一款稳定、安全、高效、易用的云存储服务,具备标准Restful API接口,可存储任意数量和形式的非结构化数据。

 
 

    大数据量的存储 更多内容
  • 更改Broker的存储目录

    由于Kafka不感知磁盘容量,建议各Broker实例配置磁盘个数和容量保持一致。 更改Broker角色存储目录,所有Broker实例存储目录将同步修改。 更改Broker单个实例存储目录,只对单个实例生效,其他节点Broker实例存储目录不变。 对系统影响 更改Broker角色存储目录需要重新启动服务,服务重启时无法访问。

    来自:帮助中心

    查看更多 →

  • 执行大数据量的shuffle过程时Executor注册shuffle service失败

    执行大数据量shuffle过程时Executor注册shuffle service失败 问题 执行超过50T数据shuffle过程时,出现部分Executor注册shuffle service超时然后丢失从而导致任务失败问题。错误日志如下所示: 2016-10-19 01:33:34

    来自:帮助中心

    查看更多 →

  • 产品概述

    30TB~500TB数据量迁移,500TB以上建议通过专线迁移 用户无法提供容量存储介质 用户需要快速迁移数据,对传输速率,传输时间要求比较紧急 Teleport单设备支持60TB和120TB两种规格。 华为数据中心邮寄Teleport设备给用户 磁盘方式 30TB以下数据量迁移 外置

    来自:帮助中心

    查看更多 →

  • Flink任务开发建议

    大数据量的维度表建议采用HBase 数据量比较大,而且不要数据高一致场景,可以采用HBase类KV库提供维度表点查关联能力。 由于K-V库数据需由另外作业写入,与当前Flink作业会存在一定时差,容易导致当前Flink作业查询K-V库时不是最新数据,且由于lookup查询不支持回撤,关联结果存在一致性问题。

    来自:帮助中心

    查看更多 →

  • 选择合适的存储云服务

    选择合适存储云服务 了解数据特征(如可共享、大小、访问模式、延迟、吞吐量和数据持久性),以便为您工作负载选择合适专用数据存储。 PERF03-05 选择合适类型存储云服务 父主题: PERF03 性能建模

    来自:帮助中心

    查看更多 →

  • 更改DataNode的存储目录

    以下场景: 更改DataNode角色存储目录,所有DataNode实例存储目录将同步修改。 更改DataNode单个实例存储目录,只对单个实例生效,其他节点DataNode实例存储目录不变。 对系统影响 更改DataNode角色存储目录需要停止并重新启动HDFS服务,集群未完全启动前无法提供服务。

    来自:帮助中心

    查看更多 →

  • 解绑存储库的资源

    解绑存储资源 当绑定资源不再需要备份时,可以从存储库中解绑。 资源从存储库中解绑后,将不再按照该存储策略执行自动备份和复制任务,且系统将彻底删除资源产生自动备份和手动备份,删除后将无法用于数据恢复,请谨慎操作。 解绑资源时,对解绑资源业务无任何性能影响。 解绑存储库的资源操作步骤

    来自:帮助中心

    查看更多 →

  • DDS使用的的存储配置是什么

    DDS使用存储配置是什么 文档数据库服务存储采用云硬盘,具体情况请参考《云硬盘用户指南》。 文档数据库服务备份数据存储采用对象存储服务,不占用用户购买数据库空间。关于文档数据库实例存储硬件配置,请参见《对象存储服务用户指南》。 父主题: 数据库存储

    来自:帮助中心

    查看更多 →

  • 管理集群的共享存储信息

    管理集群共享存储信息 操作场景 集群创建完成后,如需查看集群所使用共享存储详细信息,可进入一站式HPC服务提供“共享存储”页,查看例如集群所使用SFS名称和ID、存储协议、共享路径以及挂载点等信息。 操作步骤 登录HPC-S²控制台。 单击左侧“共享存储”。 在“共

    来自:帮助中心

    查看更多 →

  • 查看TaurusDB的存储容量

    显示的使用状况就是该实例购买包周期共享存储容量及目前数据已占用容量。 如果已使用空间超过购买共享存储容量,TaurusDB会自动扩容,无需担心磁盘满带来业务问题。 自动扩容空间会按照按需使用收费标准收取,建议超出后使用磁盘容量变更功能扩展包周期存储容量。 备份空间: 系统会赠送一份与包周期或按需存储容量相同大小的备份空间。

    来自:帮助中心

    查看更多 →

  • 查看TaurusDB的存储容量

    显示的使用状况就是该实例购买包周期共享存储容量及目前数据已占用容量。 如果已使用空间超过购买共享存储容量,TaurusDB会自动扩容,无需担心磁盘满带来业务问题。 自动扩容空间会按照按需使用收费标准收取,建议超出后使用磁盘容量变更功能扩展包周期存储容量。 备份空间: 系统会赠送一份与包周期或按需存储容量相同大小的备份空间。

    来自:帮助中心

    查看更多 →

  • 更改DataNode的存储目录

    以下场景: 更改DataNode角色存储目录,所有DataNode实例存储目录将同步修改。 更改DataNode单个实例存储目录,只对单个实例生效,其他节点DataNode实例存储目录不变。 对系统影响 更改DataNode角色存储目录需要停止并重新启动HDFS服务,集群未完全启动前无法提供服务。

    来自:帮助中心

    查看更多 →

  • 解绑存储库的策略

    解绑存储策略 操作场景 当绑定策略存储库不再需要自动备份和复制时,可以将策略从存储库中解绑,或将该策略启用状态设置为关闭。本章将介绍如何解绑存储策略。 前提条件 存储库已绑定策略。 解绑存储策略操作步骤 登录云备份管理控制台。 登录管理控制台。 单击管理控制台左上角的,选择区域。

    来自:帮助中心

    查看更多 →

  • 绑定存储库的资源

    当您同时开启多个存储自动绑定时,系统将会根据最先执行备份策略时间点对资源进行扫描,并将未备份资源自动绑定至对应策略绑定存储库上,开始自动备份。 当最先被绑定存储库绑定容量已满时,资源将会绑定至下一个执行备份策略存储库上。 如果最先执行备份策略同时绑定多个存储库,则未备份

    来自:帮助中心

    查看更多 →

  • 计费概述

    数据湖探索DLI计费由不同计费项组成,不同计费项有不同计费模式,如图1所示。 图1 DLI计费组成 计费项 DLI计费项包括计算计费、存储计费、扫描量计费。DLI计费详情请参见DLI产品价格详情。您可以通过DLI提供价格计算器,快速计算出购买资源参考价格。 表1

    来自:帮助中心

    查看更多 →

  • 数据量很大,如何进行快照备份?

    数据量很大,如何进行快照备份? 如果快照数据量极大,快照备份要超过一天时,可参考如下方法进行优化。 快照备份时候指定索引,比如先分批,默认是*,将会备份所有的索引。 使用自定义快照仓库。 创建自定义仓库。 除了使用 云搜索服务 提供repo_auto之外,客户也可以自己创建一个仓库,接口见如下:

    来自:帮助中心

    查看更多 →

  • Delta 数据量较大时,如何优化校验任务?

    源端元数据同步至迁移中心。 创建N个Delta元数据连接,除了执行机IP和端口不同以外,其余参数配置需要与步骤1.中第一个元数据连接保持一致。 “N”需要根据您现有的E CS 资源和表数量来确定。在ECS资源充足且表数量非常多情况下,增加元数据连接数量可以提高数据校验效率。

    来自:帮助中心

    查看更多 →

  • Kafka集群节点内多磁盘数据量占用高

    properties中配置项log.dirs获得数据存储目录。 其中配置文件路径请根据时间环境集群版本修改,当磁盘有多块时,该配置项有多个,逗号间隔。 使用cd命令进入使用率较高磁盘对应3中获取数据存储目录下。 使用du -sh *命令打印出当前topic名称及大小。 由于

    来自:帮助中心

    查看更多 →

  • 什么是DES?

    30TB~500TB数据量迁移,500TB以上建议通过专线迁移 用户无法提供容量存储介质 用户需要快速迁移数据,对传输速率,传输时间要求比较紧急 Teleport单设备支持60TB和120TB两种规格。 华为数据中心邮寄Teleport设备给用户 磁盘方式 30TB以下数据量迁移 外置

    来自:帮助中心

    查看更多 →

  • 什么是云存储优化与提升服务?

    什么是云存储优化与提升服务? 随着客户对云存储需求持续增长,如具有业务峰值流量较高特点客户,存储弹性需求也随之提高,导致业务出现性能瓶颈。再如,AI模型训练面临数据量和模型参数不断增加,迫切需要加快训练速度。泛互联网客户对存储性能、安全性和易用性提出了更高要求,客户难以正确配置存储资源来更好的支撑业务。

    来自:帮助中心

    查看更多 →

  • 大Key诊断

    选择“Key诊断”,勾选对应类型,查看对应类型Key信息。 图1 Key诊断 您可以查看Key信息。参数请查看表1。 表1 Key参数 参数 描述 类型 Key类型。 string hash zset set exhash list stream Key名

    来自:帮助中心

    查看更多 →

共105条
看了本文的人还看了