从纵向来看，每个shard内部有多个副本组成，保证分片数据的高可靠性，以及计算的高可靠性。 数据分布设计 Shard数据分片均匀分布 建议用户的数据均匀分布到集群中的多个shard分片，如图1所示有3个分片。 假如有30 GB数据需要写入到集群中，需要将30 GB数据均匀切分后分别放到shard-1、s

查看更多 →

服务分布 表1 服务分布 服务名 服务器 安装目录 端口 cas uniform-auth 10.190.x.x 10.190.x.x /app/apache-tomcat-9.0.64_uniform_auth/ 8001 父主题： 平台运行维护软件部署

查看更多 →

服务分布 表1 服务分布 服务名 服务器 安装目录 端口 ser-gateway 10.190.x.x 10.190.x.x /app/appdeploy/portal/ser-gateway 8003 Ser-portal /app/appdeploy/portal/ser-portal

查看更多 →

重分布 集群重分布是集群扩容后的一项重要且耗时的任务，集群扩容前业务数据都集中分布在老节点上，扩容之后会新增空的可用节点，此时将老节点的数据均匀分布到新扩容节点的过程称为数据“重分布”，数据“重分布”后将大大提升业务响应速率。 默认情况下，在扩容之后将自动调起重分布任务，为了增强

查看更多 →

服务分布 表1 服务分布 服务名 服务器 安装目录 端口 Sf3d 10.190.x.x 10.190.x.x 10.190.x.x /app/apache-tomcat-9.0.64_sf3d 8080 sfmap /app/appdeploy/sfmapTile_V6.0.SP2_arm

查看更多 →

String 专属分布式存储池名称。 id String 专属分布式存储池ID。 project_id String 专属分布式存储池归属的project_id。 capacity Integer 申请的专属分布式存储池容量，单位GB。 type String 专属分布式存储池的存储类型 SAS：高IO专属分布式存储池。

查看更多 →

非HDFS数据残留导致数据分布不均衡 问题背景与现象 数据出现不均衡，某磁盘过满而其他磁盘未写满。 HDFS DataNode数据存储目录配置为“/export/data1/dfs--/export/data12/dfs”，看到的现象是大量数据都是存储到了“/export/data1/dfs”，其他盘的数据比较均衡。

查看更多 →

分布式环境的数据布局 技术背景 为了解决PB级海量数据的高性能查询和数据导入，DWS采用了两层数据布局机制来利用并发度提高性能：第一层，用户可在创建表时指定数据分布策略（Hash分布、复制分布），数据写入系统时根据对应的分布策略确定存储在哪一个节点上。第二层，节点内部数据进一步通过分区规则进行细分。

查看更多 →

服务分布 表1 服务分布 服务名 服务器 安装目录 端口 cas uniform-auth 10.190.x.x 10.190.x.x /app/apache-tomcat-9.0.64_uniform_auth/ 8001 父主题： 二三维底板服务维护软件部署

查看更多 →

数据多样化存储 云数据库RDS支持与分布式缓存服务Redis版、GeminiDB (Redis接口)和对象存储服务等存储产品搭配使用，实现多样化存储扩展。 图1 数据库多样化存储 父主题： 典型应用

查看更多 →

数据库存储 DDS使用的的存储配置是什么 数据超过了文档数据库实例的最大存储容量怎么办 什么是DDS实例的只读状态？

查看更多 →

账单数据存储（旧版） 开通消费数据存储功能 资源消费记录 流水详单 资源详单 对账单 父主题： 附录

查看更多 →

Hive ORC数据存储优化 操作场景 “ORC”是一种高效的列存储格式，在压缩比和读取效率上优于其他文件格式。 建议使用“ORC”作为Hive表默认的存储格式。 前提条件 已登录Hive客户端，具体操作请参见Hive客户端使用实践。 操作步骤 推荐：使用“SNAPPY”压缩，适用于压缩比和读取效率要求均衡场景。

查看更多 →

数据转发至Kafka存储 场景说明 对于设备上报的数据，可以选择让平台将设备上报数据推送给应用服务器，由应用服务器进行保存；还可以选择让平台将设备上报数据转发给分布式消息服务（Kafka），由Kafka进行存储。 本示例为将所有设备上报的数据转发至Kafka存储。 购买Kafka实例

查看更多 →

数据库存储 GaussDB使用 的什么存储 数据超过了 GaussDB 实例的最大存储容量怎么办 如何查看GaussDB的存储空间使用情况

查看更多 →

设备存储数据查询 查询设备属性最新状态值 根据标签查询设备历史值 根据标签聚合查询指标 父主题： API列表

查看更多 →

Hive ORC数据存储优化 操作场景 “ORC”是一种高效的列存储格式，在压缩比和读取效率上优于其他文件格式。 建议使用“ORC”作为Hive表默认的存储格式。 前提条件 已登录Hive客户端，具体操作请参见Hive客户端使用实践。 操作步骤 推荐：使用“SNAPPY”压缩，适用于压缩比和读取效率要求均衡场景。

查看更多 →

多云存储数据同步方案 应用双写 如果数据是在应用服务侧产生，或者数据在客户端产生但通过服务端将数据写入对象存储，则建议使用双写方案，架构如下： 此时业务应用可对接两家对象存储的SDK，将文件以同步模式或者异步模式写入两家对象存储。对象存储的上行流量免费，所以该架构不会增加任何成本。

查看更多 →

开通消费数据存储功能 客户在对象存储服务（OBS）中创建桶后，即可开通消费数据存储服务，华为云会按时将账单文件同步存储至您OBS对应的桶资源中。 如何开通账单订阅功能 在OBS中创建桶，详细操作请参见创建桶。 根据下图所示登录费用中心。 进入“消费数据存储”页面。 设置对象存储桶名称。

查看更多 →

数据库存储 RDS for MySQL支持哪些存储引擎 RDS使用的什么存储 云数据库 RDS for MySQL是否支持存储过程和函数 数据超过了RDS for MySQ L实例 的最大存储容量怎么办 如何查看RDS的存储空间使用情况 在RDS for SQL Server上创建的数据库保存在什么路径下

查看更多 →

直读归档存储数据 实际业务场景下，您可能有不通过恢复而直接获取归档数据的诉求。如有时间要求，需要急速读取归档数据；或者在OBS与其他系统对接的情况下，因接口兼容问题，需要直接读取归档数据。 桶开启归档数据直读后，存储类别为归档存储的对象可以直接访问，无需提前恢复。下载和拷贝归档存

查看更多 →