基于Slurm构建泛HPC场景云上云下资源协同解决方案

Administrator”策略 恢复数据 恢复数据将覆盖集群中当前的数据，请谨慎操作。 登录 云搜索服务 管理控制台。 在“集群管理”页面，单击需要进行备份的集群名称，进入集群基本信息页面。在左侧导航栏选择“集群快照”，进入“集群快照”管理页面。 或者，在“集群管理”页面，单击对应集群“操作”列的“更多

查看更多 →

启用集群间拷贝功能备份集群数据 操作场景 当用户需要将保存在HDFS中的数据从当前集群备份到另外一个集群时，需要使用DistCp工具。DistCp工具依赖于集群间拷贝功能，该功能默认未启用。两个集群都需要配置。 该任务指导 MRS 集群管理员在MRS修改参数以启用集群间拷贝功能。 对系统的影响

查看更多 →

启用集群间拷贝功能备份集群数据 操作场景 当用户需要将保存在HDFS中的数据从当前集群备份到另外一个集群时，需要使用DistCp工具。DistCp工具依赖于集群间复制功能，该功能默认未启用。两个集群都需要配置。 该任务指导MRS集群管理员在MRS修改参数以启用集群间复制功能。 对系统的影响

查看更多 →

图1 切换冷热数据原理 在创建集群时，启用的冷数据节点会被打上“cold”标签，用来存放冷数据，数据节点会被打上“hot”标签，用于存放热数据。用户可以通过配置指定索引，将数据分配到冷数据节点上。只有集群存在冷数据节点时，数据节点才会被打上热标签。 冷数据节点只有在创建集群时可以选择

查看更多 →

管理MRS集群元数据 MRS集群元数据概述 配置Ranger元数据存储至RDS 配置Hive元数据存储至RDS 配置LakeFormation数据连接 管理MRS集群数据连接 父主题： 管理MRS集群

查看更多 →

备份恢复MRS集群数据 MRS集群数据备份恢复简介 启用MRS集群间拷贝功能 创建MRS集群数据备份任务 创建MRS集群数据恢复任务 备份MRS集群组件数据 恢复MRS集群组件数据 管理MRS集群备份恢复任务 使用HDFS快照快速恢复组件业务数据 父主题： MRS集群运维

查看更多 →

改，此时优化器会生成一个跨逻辑集群的查询或修改计划，保证用户关联的逻辑集群可以查询或修改表的数据。 图1 跨逻辑集群实现数据查询 图2 跨逻辑集群实现数据写入 操作步骤 参见创建DWS 3.0集群创建DWS 3.0集群，集群创建后默认会转换成逻辑集群v3_logical。 通过节

查看更多 →

导入数据至OpenSearch集群 OpenSearch集群导入数据方式 使用自建Logstash导入数据到OpenSearch 使用开源OpenSearch API导入数据到OpenSearch 使用 CDM 导入数据到OpenSearch 增强OpenSearch集群数据导入性能

查看更多 →

使用OpenSearch集群搜索数据 使用DSL语言在OpenSearch中搜索数据 使用SQL语言在OpenSearch中搜索数据 父主题： 使用OpenSearch搜索数据

查看更多 →

从 GaussDB (DWS)集群导入数据到新集群 功能描述 通过在集群中创建Foreign Table的方式，实现在多个集群之间的关联查询和用来导入数据。 使用场景 将数据从一个GaussDB(DWS)集群导入到另外一个GaussDB(DWS)集群中。 多个集群之间的关联查询。 注意事项

查看更多 →

集群索引插入数据失败 问题现象 向 CSS 集群索引中插入数据失败，报错如下： 问题分析 当磁盘的使用率超过95%时，Elasticsearch为了防止节点耗尽磁盘空间，自动将索引设置为只读模式。 解决方案 新版本（7.10.2之后）集群磁盘使用率下降后会自动关闭只读模式，只需清理或扩容磁盘。

查看更多 →

arch集群数据导入性能。 表1 OpenSearch集群导入数据的方式 导入数据方式 适用场景 支持数据格式 相关文档 数据处理管道Logstash Logstash开源 服务器 端实时数据处理管道，支持多个来源采取数据。适用场景多，比如日志数据、监控数据、metric数据等流数据。

查看更多 →

MRS集群元数据概述 MRS的数据连接用于管理集群中组件使用的外部源连接，如Hive的元数据可以通过数据连接关联使用外部的关系型数据库。 本地元数据：元数据存储于集群内的本地GaussDB中，当集群删除时元数据同时被删除，如需保存元数据，需提前前往数据库手动保存元数据。 外置数据连接

查看更多 →

MRS集群上的数据准备 从MRS导入数据到GaussDB(DWS)集群之前，假设您已经完成了以下准备工作： 已创建MRS集群。 在MRS集群上创建了Hive/Spark ORC表，且表数据已经存储到该表对应的HDFS路径上。 如果您已经完成上述准备，则可以跳过本章节。 为方便起见，以在MRS集群上创建Hive

查看更多 →

从MRS导入数据到集群 从MRS导入数据概述 MRS集群上的数据准备 手动创建外部服务器 创建外表 执行数据导入 清除资源 错误处理 父主题： 导入数据

查看更多 →

登录 云搜索 服务管理控制台。 开启集群自动创建快照。支持在创建集群的时候就打开集群自动创建快照，操作指导请参见7，或者在集群创建完成之后再开启集群自动创建快照。 如果在创建集群时已经打开集群自动创建快照，请执行7。 如果是集群创建完成之后开启集群自动创建快照，请执行下一步。 在“集群管理”页面，单击

查看更多 →

在“备份配置”指定需要备份的数据。 支持备份元数据和业务数据。 各组件不同数据的备份任务操作请参考备份恢复MRS集群数据。 单击“确定”保存。 在备份任务列表，可以查看刚创建的备份任务。 在指定的备份任务“操作”列，选择“更多 > 即时备份”，可以立即运行备份任务。 创建元数据备份任务（MRS

查看更多 →

ON格式的数据导入到集群进行查询。 本教程中以 CS V格式为例，进行如下操作： 生成CSV格式的数据文件。 创建一个与GaussDB(DWS)集群在同一区域的OBS存储桶，然后将数据文件上传到该存储桶。 创建外表，用于引流OBS存储桶中的数据到GaussDB(DWS)集群。 启动G

查看更多 →

新老业务的数据隔离。而新的逻辑集群lc2关联的用户u2，通过授权可以跨逻辑集群访问逻辑集群lc1的表。 集群规模：从原始的物理集群3节点，扩容到6节点并拆分成2套逻辑集群。 业务隔离：新、老业务数据隔离在不同逻辑集群中。 图1 跨逻辑集群访问数据 创建集群并准备表数据 参见创建GaussDB(DWS)存算一体2

查看更多 →

查询Kafka集群元数据信息 功能介绍 查询Kafka集群元数据信息。 调用方法 请参见如何调用API。 URI GET /v2/{project_id}/instances/{instance_id}/management/cluster 表1 路径参数 参数 是否必选 参数类型

查看更多 →

查询Kafka集群元数据信息 当前页面API为历史版本API，未来可能停止维护。请使用查询Kafka集群元数据信息。 URI GET /v1.0/{project_id}/instances/{instance_id}/manage/cluster 参数说明如下表所示。 表1 参数说明

查看更多 →