基于Slurm构建泛HPC场景云上云下资源协同解决方案

生效。 集群 选择需要进行恢复的集群名称，可选择当前集群或者其他集群。 只能选择处于“可用”状态的集群，如果快照所属的集群处于“不可用”状态，那么也无法将快照恢复到本集群。 恢复到其他集群时，目标集群的版本不低于本集群的版本。当本集群存在冻结状态的索引快照时，在恢复数据后，该索引

查看更多 →

启用集群间拷贝功能备份集群数据 操作场景 当用户需要将保存在HDFS中的数据从当前集群备份到另外一个集群时，需要使用DistCp工具。DistCp工具依赖于集群间复制功能，该功能默认未启用。两个集群都需要配置。 该任务指导 MRS 集群管理员在MRS修改参数以启用集群间复制功能。 对系统的影响

查看更多 →

启用集群间拷贝功能备份集群数据 操作场景 当用户需要将保存在HDFS中的数据从当前集群备份到另外一个集群时，需要使用DistCp工具。DistCp工具依赖于集群间拷贝功能，该功能默认未启用。两个集群都需要配置。 该任务指导MRS集群管理员在MRS修改参数以启用集群间拷贝功能。 对系统的影响

查看更多 →

导入数据至OpenSearch集群 OpenSearch集群导入数据方式 使用自建Logstash导入数据到OpenSearch 使用开源OpenSearch API导入数据到OpenSearch 使用 CDM 导入数据到OpenSearch 增强OpenSearch集群数据导入性能

查看更多 →

使用OpenSearch集群搜索数据 使用DSL语言在OpenSearch中搜索数据 使用SQL语言在OpenSearch中搜索数据 父主题： 使用OpenSearch搜索数据

查看更多 →

集群索引插入数据失败 问题现象 向 CSS 集群索引中插入数据失败，报错如下： 问题分析 当磁盘的使用率超过95%时，Elasticsearch为了防止节点耗尽磁盘空间，自动将索引设置为只读模式。 解决方案 新版本（7.10.2之后）集群磁盘使用率下降后会自动关闭只读模式，只需清理或扩容磁盘。

查看更多 →

MRS集群元数据概述 MRS的数据连接用于管理集群中组件使用的外部源连接，如Hive的元数据可以通过数据连接关联使用外部的关系型数据库。 本地元数据：元数据存储于集群内的本地 GaussDB 中，当集群删除时元数据同时被删除，如需保存元数据，需提前前往数据库手动保存元数据。 外置数据连接

查看更多 →

arch集群数据导入性能。 表1 OpenSearch集群导入数据的方式 导入数据方式 适用场景 支持数据格式 相关文档 数据处理管道Logstash Logstash开源 服务器 端实时数据处理管道，支持多个来源采取数据。适用场景多，比如日志数据、监控数据、metric数据等流数据。

查看更多 →

改，此时优化器会生成一个跨逻辑集群的查询或修改计划，保证用户关联的逻辑集群可以查询或修改表的数据。 图1 跨逻辑集群实现数据查询 图2 跨逻辑集群实现数据写入 操作步骤 参见创建DWS 3.0集群创建DWS 3.0集群，集群创建后默认会转换成逻辑集群v3_logical。 通过节

查看更多 →

图1 切换冷热数据原理 在创建集群时，启用的冷数据节点会被打上“cold”标签，用来存放冷数据，数据节点会被打上“hot”标签，用于存放热数据。用户可以通过配置指定索引，将数据分配到冷数据节点上。只有集群存在冷数据节点时，数据节点才会被打上热标签。 冷数据节点只有在创建集群时可以选择

查看更多 →

管理MRS集群元数据 MRS集群元数据概述 配置Ranger元数据存储至RDS 配置Hive元数据存储至RDS 配置LakeFormation数据连接 管理MRS集群数据连接 父主题： 管理MRS集群

查看更多 →

备份恢复MRS集群数据 MRS集群数据备份恢复简介 启用MRS集群间拷贝功能 创建MRS集群数据备份任务 创建MRS集群数据恢复任务 备份MRS集群组件数据 恢复MRS集群组件数据 管理MRS集群备份恢复任务 使用HDFS快照快速恢复组件业务数据 父主题： MRS集群运维

查看更多 →

从GaussDB(DWS)集群导入数据到新集群 功能描述 通过在集群中创建Foreign Table的方式，实现在多个集群之间的关联查询和用来导入数据。 使用场景 将数据从一个GaussDB(DWS)集群导入到另外一个GaussDB(DWS)集群中。 多个集群之间的关联查询。 注意事项

查看更多 →

在“备份配置”指定需要备份的数据。 支持备份元数据和业务数据。 各组件不同数据的备份任务操作请参考备份恢复MRS集群数据。 单击“确定”保存。 在备份任务列表，可以查看刚创建的备份任务。 在指定的备份任务“操作”列，选择“更多 > 即时备份”，可以立即运行备份任务。 创建元数据备份任务（MRS

查看更多 →

登录 云搜索服务 管理控制台。 开启集群自动创建快照。支持在创建集群的时候就打开集群自动创建快照，操作指导请参见7，或者在集群创建完成之后再开启集群自动创建快照。 如果在创建集群时已经打开集群自动创建快照，请执行7。 如果是集群创建完成之后开启集群自动创建快照，请执行下一步。 在“集群管理”页面，单击

查看更多 →

新老业务的数据隔离。而新的逻辑集群lc2关联的用户u2，通过授权可以跨逻辑集群访问逻辑集群lc1的表。 集群规模：从原始的物理集群3节点，扩容到6节点并拆分成2套逻辑集群。 业务隔离：新、老业务数据隔离在不同逻辑集群中。 图1 跨逻辑集群访问数据 创建集群并准备表数据 参见创建G

查看更多 →

上传应用数据至MRS集群 MRS集群处理的数据源通常来源于OBS文件系统或集群内的HDFS文件系统，OBS为客户提供海量、安全、高可靠、低成本的数据存储能力。 用户可以基于MRS管理控制台和OBS客户端对OBS数据进行浏览、管理和使用，也可以将OBS的数据导入集群的HDFS系统后

查看更多 →

管理MRS集群数据连接 本章节主要介绍如何在MRS管理控制台上创建、查看和删除集群数据连接。 创建数据连接 登录MRS管理控制台，在导航栏选择“数据连接”。 单击“新建数据连接 ”。 配置RDS MySQL数据连接相关操作请参考为已有MRS集群创建RDS数据连接相关操作进行配置。

查看更多 →

MRS集群数据备份恢复简介 MRS集群数据备份恢复概述 Manager提供对集群内的用户数据及系统数据的备份恢复能力，备份功能按组件提供。系统支持备份Manager的数据、组件元数据及业务数据。 MRS 3.x及之后版本，备份功能支持将数据备份至本地磁盘（LocalDir）、本端

查看更多 →

仅Elasticsearch 7.10.2集群和OpenSearch 1.3.6集群支持数据导入性能增强。 前提条件 待增强数据导入性能的集群处于“可用”状态。 Bulk路由优化 通过指定配置项“index.bulk_routing”可以开启集群的Bulk路由优化，该优化可以减少内部

查看更多 →

生效。 集群 选择需要进行恢复的集群名称，可选择当前集群或者其他集群。 只能选择处于“可用”状态的集群，如果快照所属的集群处于“不可用”状态，那么也无法将快照恢复到本集群。 恢复到其他集群时，目标集群的版本不低于本集群的版本。当本集群存在冻结状态的索引快照时，在恢复数据后，该索引

查看更多 →