创建IAM用户并授权使用 CDM 如果您需要对您所拥有的数据集成服务（CDM）进行精细的权限管理，您可以使用统一身份认证服务（Identity and Access Management，简称IAM），通过IAM，您可以： 根据企业的业务组织，在您的华为云账号中，给企业中不同职能部门的员工创建I

查看更多 →

odeManager中获取数据，当数据量达到一个级别（10T级别），会出现NodeManager单点瓶颈（ShuffleService服务在NodeManager进程中），就会出现某些Task获取数据超时，从而出现该问题。 因此，当数据量达到10T级别以上的Spark任务，建议用

查看更多 →

在CDM集群中创建连接 创建CDM与数据源之间的连接 配置连接参数 上传CDM连接驱动 新建Hadoop集群配置

查看更多 →

在CDM集群中创建连接 创建CDM与数据源之间的连接 配置连接参数 上传CDM连接驱动 新建Hadoop集群配置 父主题： 数据集成（CDM作业）

查看更多 →

难题。 若您的集群对接了对象存储，且需同步搬迁至云上，可以使用华为云 对象存储迁移 服务 OMS ，帮助您将对象存储中的数据在线迁移至华为云 对象存储服务 OBS。 若您的集群使用文件存储，迁移上云可以使用华为云弹性文件服务 SFS，具体请参见数据迁移。 数据库迁移 若您的数据库采用集群

查看更多 →

odeManager中获取数据，当数据量达到一个级别（10T级别），会出现NodeManager单点瓶颈（ShuffleService服务在NodeManager进程中），就会出现某些Task获取数据超时，从而出现该问题。 因此，当数据量达到10T级别以上的Spark任务，建议用

查看更多 →

为了满足全球日益增长的能源需求，石油和天然气行业已经成为高性能计算（HPC）的最大应用和创新行业之一。随着自然资源消耗，以及勘探成本增加，高度复杂的计算建模方式取代了传统的经验+实验方法，成为能源勘探和开发的重要工具。 客户瓶颈 能源公司非常依赖于地震数据，以及从数据中获得的模型，从而为

查看更多 →

一个查询语句要经过多个算子步骤才会输出最终的结果。由于个别算子耗时过长导致整体查询性能下降的情况比较常见。这些算子是整个查询的瓶颈算子。通用的优化手段是EXPLAIN ANALYZE/PERFORMANCE命令查看执行过程的瓶颈算子，然后进行针对性优化。 如下面的执行过程信息中，Hashagg算子的执行时间占总时间的：(51016-13535)/

查看更多 →

Studio服务的DLF组件提供了一站式的大数据协同开发平台，借助DLF的在线脚本编辑、周期调度CDM的迁移作业，也可以实现增量数据迁移。 这里以DWS导入到OBS为例，介绍DLF配合CDM实现增量迁移的流程： 获取CDM作业的JSON 修改JSON 创建DLF作业 获取CDM作业的JSON

查看更多 →

创建CDM作业的节点配置完后，还需要在后面添加运行CDM作业的REST节点，具体请参见《 云数据迁移 API参考》中的“启动作业”章节。配置RestAPI节点的属性如下 ： 节点名称：运行作业。 URL地址：其中project_id、cluster_id和2. 配置“创建作业”节点中的保持一

查看更多 →

ir_models/text_encoder.mindir --device=Ascend 上述命令中：modelFile指定生成的mindir模型文件；device指定运行推理的设备。其他用法请参考benchmark文档。 测试结果如下所示： 图1 测试结果 父主题： 性能调优

查看更多 →

一个查询语句要经过多个算子步骤才会输出最终的结果。由于个别算子耗时过长导致整体查询性能下降的情况比较常见。这些算子是整个查询的瓶颈算子。通用的优化手段是EXPLAIN ANALYZE/PERFORMANCE命令查看执行过程的瓶颈算子，然后进行针对性优化。 如下面的执行过程信息中，Hashagg算子的执行时间占总时间的：(51016-13535)/

查看更多 →

查找问题根因并进行调优：通过分析执行计划，找到可能存在的原因，进行针对性的调优，通常为调整数据库级SQL调优参数。 编写更优的SQL：介绍一些复杂查询中的中间临时数据缓存、结果集缓存、结果集合并等场景中的更优SQL语法。 父主题： GaussDB (DWS)性能调优

查看更多 →

Server，简称E CS ）作为集群的节点，每个 弹性云服务器 是集群中的一个节点。 与 裸金属服务器 的关系 数据仓库 服务使用裸金属 服务器 （Bare Metal Server，简称BMS）作为集群的节点，每个裸金属服务器是集群中的一个节点。 与虚拟私有云的关系 数据仓库服务使用虚拟私有云（Virtual

查看更多 →

网视频等行业。 客户瓶颈 随着5G时代的到来，视频展现形式多样化，人们对视频质量要求提升。高清视频内容的制作与转换需求增加，对转码服务的效率和成本都是极大的挑战。已有资源不足以负荷转码任务量的增长，转码速度缓慢，如新增资源则是一笔不少的成本支出。 竞享实例的应用 客户可以将自己转

查看更多 →

源端的库名在配置文件中配置后，check.input文件中的源端会默认填写配置文件中的库名，若check.input文件中填入其他库名，以check.input文件中的优先级为高。 校验级别Check Strategy支持high、middle、low三种，若未填写，默认为low。 校验模式Check

查看更多 →

回答 造成该现象的原因是NodeManager重启。使用ExternalShuffle的时候，Spark将借用NodeManager传输Shuffle数据，因此NodeManager的内存将成为瓶颈。 在当前版本的 FusionInsight 中，NodeManager的默认内存只有1

查看更多 →

本节介绍镜像及集群依赖服务的相关数据迁移，如云存储、云数据库、分布式缓存、分布式消息等。 镜像迁移 镜像的跨区域迁移可以使用 容器镜像服务 SWR的“镜像同步”功能。 对于镜像仓库中已有的镜像，您需要执行手动镜像同步，将镜像同步到目标区域。另外，为镜像设置镜像自动同步功能，可以帮助您把最新推送的镜像自

查看更多 →

在WiseDBA中查看数据库WDR报表 GaussDB数据库 支持生成WDR报表，WDR报表是长期性能问题最主要的诊断手段。基于快照的性能基线，从多维度做性能分析，用于诊断数据库内核的性能故障。能帮助DBA掌握系统负载繁忙程度、各个组件的性能表现及性能瓶颈。 查看WDR报表 进入AppStage运维中心。

查看更多 →

在WiseDBA中查看数据库WDR报表 GaussDB数据库支持生成WDR报表，WDR报表是长期性能问题最主要的诊断手段。基于快照的性能基线，从多维度做性能分析，用于诊断数据库内核的性能故障。能帮助DBA掌握系统负载繁忙程度、各个组件的性能表现及性能瓶颈。 查看WDR报表 进入AppStage运维中心。

查看更多 →

概述 链路追踪采集分布式应用的完整调用链路，提供了接口调用、数据库、异常等数据采集类型。可以帮助开发者快速分析和诊断分布式应用架构下的性能瓶颈，提高微服务时代下的开发诊断效率。 安装探针是使用链路追踪功能的前提，详细操作参见探针接入。 父主题： 链路追踪

查看更多 →