挂载并行文件系统失败 本文根据在挂载并行文件系统时遇到的不同现象，总结了常见挂载并行文件系统失败的可能原因及解决办法。 现象一：挂载并行文件系统时出现“The specified bucket does not exist”类似错误 问题定位： 待挂载并行文件系统不存在。 解决办法：

查看更多 →

单机多卡数据并行-DataParallel(DP) 本章节介绍基于PyTorch引擎的单机多卡数据并行训练。 MindSpore引擎的分布式训练参见MindSpore官网。 训练流程简述 单机多卡数据并行训练流程介绍如下： 将模型复制到多个GPU上 将一个Batch的数据均分到每一个GPU上

查看更多 →

集群 基础配置 网络 认证 访问配置 权限管控 容器驱逐配置 端口范围配置 特性开关 调度器性能配置 集群调度器配置 调度算法 部署策略 控制器性能配置 集群控制器并发配置 节点生命周期控制器（node-lifecycle-controller）配置 负载弹性伸缩控制器（hori

查看更多 →

集群 DDS集群由dds mongos、config、shard组成，节点架构示意图如下： 图1 分片集群示意图 dds mongos dds mongos负责查询与数据写入的路由，是实例访问的统一入口。 每个实例有2～32个dds mongos，数量由用户自定义。 用户可直接连接dds

查看更多 →

集群 集群创建 集群运行 集群删除 集群升级

查看更多 →

集群 Kubernetes版本发布记录 Autopilot集群版本发布说明 购买Autopilot集群 连接集群 管理集群 升级集群 将Standard/Turbo集群迁移至Autopilot集群

查看更多 →

检查所有节点同步状态 检查是否存在控制节点，且只有一个 注意事项 集群内各 服务器 版本需保持一致：只能同一版本的服务器做集群 各服务器的数据库配置需一致：各服务器数据库配置需要保持一致，其中url中ip地址也要一致 各服务器redis配置需一致：各服务器配置的redis相关参数需要是一致的，如redis

查看更多 →

DWS采用全并行的MPP架构数据库，业务数据被分散存储在多个节点上，数据分析任务被推送到数据所在位置就近执行，并行地完成大规模的数据处理工作，实现对数据处理的快速响应。 查询高性能，万亿数据秒级响应 DWS后台通过算子多线程并行执行、向量化计算引擎实现指令在寄存器并行执行，以及L

查看更多 →

使用EVAL和EVALSHA命令时，D CS Redis集群实例使用第一个key来计算slot，用户代码需要保证操作的key是在同一个slot。 对mget，hmget等批量命令做并行和异步IO优化 某些客户端对于MGET，HMGET这些命令没有做特殊处理，串行执行再合并返回，效率较低，建议做并行优化。 例如Jedi

查看更多 →

python通过thrift访问cloudtable，多个任务并行缓慢 如何查看HBase shell的TTL属性？ 服务器资源为什么会被释放？ 怎样删除集群？ 资源停止服务或逾期释放说明 那些场景会影响数据均衡？ 如何调整数据均衡的灵敏度，调整后有哪些影响？ Doris集群回收站数据处理

查看更多 →

集群 业务模型编号对应的业务模型，请参见业务模型。 OPS：Operation Per Second，数据库每秒执行的操作数。 不同业务模型和shard节点规格下，基于3.4版本的数据库实例，根据表2预置小数据量数据，测试的OPS数据，详见表1中加粗内容。 表1 弱一致性，且预置小数据量数据下的OPS

查看更多 →

集群 管理集群 管理服务 管理实例 父主题： Manager操作指导（适用于3.x版本）

查看更多 →

集群 Kubernetes版本发布记录 Autopilot集群版本发布说明 购买Autopilot集群 连接集群 管理集群 升级集群 将Standard/Turbo集群迁移至Autopilot集群 父主题： Autopilot集群用户指南

查看更多 →

检查所有节点同步状态 检查是否存在控制节点，且只有一个 注意事项 集群内各服务器版本需保持一致：只能同一版本的服务器做集群 各服务器的数据库配置需一致：各服务器数据库配置需要保持一致，其中url中ip地址也要一致 各服务器redis配置需一致：各服务器配置的redis相关参数需要是一致的，如redis

查看更多 →

集群访问/集群连接 自行搭建的Kibana和Cerebro可以访问 CSS 集群吗？ 9200和9300端口是否都开放？ 如何使用NAT网关实现 云搜索服务 公网访问 新建集群是否可以使用老集群IP地址？ CSS集群是否支持采用x-pack-sql-jdbc进行客户端连接并查询？ ECS无法连接到集群

查看更多 →

待入库数据的服务器为数据服务器。此时，只需检测以确认数据服务器和 GaussDB (DWS)集群能够正常通信，并查看和记录数据在数据服务器上的存放目录备用。 如果待入库数据还没有就绪，则请先参考如下步骤，将数据上传到数据服务器上。 操作步骤 以root用户登录数据服务器。 创建数据文件存放目录“/input_data”。

查看更多 →

CDM 通过专线直接迁移近一个月的数据以及备HBase集群的数据： CDH → CDM（华为云） → MRS 使用云专线直接迁移时的优缺点： 优点：数据无需做多次的搬迁，缩短整体搬迁周期。 缺点：在数据大量传输过程中会占用专线带宽，对客户并行进行的业务存在影响，跨越多个交换机设备。 CD

查看更多 →

e_statements来进行单CN的上限控制。 在自适应负载特性下，参数work_mem的默认数值不能变大，否则会引起内存不受控（例如未做Analyze的语句）。 以下场景或语句由于内存使用的特殊性和不确定性，可能导致大并发场景内存不受控，遇到需要降低并发数： 单条元组占用内存

查看更多 →

取消挂载并行文件系统失败 本文根据在取消挂载并行文件系统时遇到的不同现象，总结了常见取消挂载并行文件系统失败的可能原因及解决办法。 现象一：取消挂载并行文件系统时出现“target is busy”类似错误 问题定位： 取消挂载时，命令行终端停留在挂载目录或其子目录。 解决办法：

查看更多 →

OBS和 MapReduce服务 MRS，帮助用户在华为云上快速搭建大数据存算分离集群。MRS是一个在华为云上部署和管理Hadoop系统的服务，通过为MRS集群绑定弹性云服务 ECS委托方式访问OBS，实现用户使用MRS集群作数据计算处理，而数据存储在OBS服务中。大数据在人们的生活中无处不在

查看更多 →

sh命令刷新集群内置客户端。 创建OBS并行文件系统 登录OBS控制台。 选择“并行文件系统 > 创建并行文件系统”。 填写文件系统名称，例如“guardian-obs”。 企业项目需要与MRS集群保持一致，其他参数请根据需要填写。 单击“立即创建”。 创建云服务委托并绑定集群 登录华为云管理控制台。

查看更多 →