数据仓库 华为云数据仓库高级工程师培训 父主题： 培训服务

查看更多 →

MySQL-> CSS /ES 表1 数据类型映射关系 数据类型（MySQL） 数据类型（Elasticsearch） 是否支持映射 BIT[(M)] BOOLEAN | LONG|TEXT 支持 1个字节的映射为BOOLEAN。 2~63个字节映射为LONG。 64个字节映射为TEXT。

查看更多 →

ES监听器配置 功能介绍 该接口用于es监听器配置。 调用方法 请参见如何调用API。 URI POST /v1.0/{project_id}/clusters/{cluster_id}/es-listeners 表1 路径参数 参数 是否必选 参数类型 描述 project_id

查看更多 →

数据仓库 表1 数据仓库权限 权限 对应API接口 授权项（Action） IAM项目 (Project) 企业项目 (Enterprise Project) 获取数据仓库列表 GET /v1.0/{project_id}/common/warehouses octopus:dataWarehouse:list

查看更多 →

数据仓库 获取数据仓库列表信息 获取数据仓库的数据列表 父主题： API

查看更多 →

GaussDB (for MySQL)-> CS S/ES 表1 数据类型映射关系 数据类型（GaussDB(for MySQL)） 数据类型（Elasticsearch） 是否支持映射 BIT[(M)] BOOLEAN | LONG|TEXT 支持 1个字节的映射为BOOLEAN。 2~63个字节映射为LONG。

查看更多 →

更新ES监听器 功能介绍 该接口用于更新ES监听器。 调用方法 请参见如何调用API。 URI PUT /v1.0/{project_id}/clusters/{cluster_id}/es-listeners/{listener_id} 表1 路径参数 参数 是否必选 参数类型

查看更多 →

别分类和数据保护服务。 与数据仓库服务的关系 数据仓库服务（Data Warehouse Service，简称DWS）是一种基于公有云基础架构和平台的在线数据处理数据库，提供即开即用、可扩展且完全托管的分析型数据库服务。经用户授权后，数据安全中心可以为数据仓库服务提供敏感数据自动识别分类和数据保护服务。

查看更多 →

域名 √ √ √ √ √ 数据复制服务 DRS DRS运行实例 √ √ √ √ √ 数据仓库服务 DWS 数据仓库服务 √ √ √ √ √ 数据仓库节点 √ × × × × 数据仓库实例 √ × × × × 弹性文件服务Turbo EFS 实例 √ √ × √ × 弹性负载均衡 ELB

查看更多 →

数据仓库规格 GaussDB(DWS)的规格按照产品类型分为存算一体和存算分离。其中存算一体还包含单机版模式。各产品类型的不同差异，详情请参见数据仓库类型。 低配置集群，如内存16G、vCPU4核及以下的规格，建议不要用于生产环境，可能会导致资源过载风险。 存算一体规格 存算一体

查看更多 →

数据仓库类型 产品类型概述 存算一体：面向数据分析场景，为用户提供高性能、高扩展、高可靠、高安全、低时延、易运维的企业级数仓服务，支持2048节点、20PB级超大规模数据分析能力，适用于“库、仓、市、湖”一体化的融合分析业务。 存算分离：采用存算分离云原生架构，计算、存储分层弹性

查看更多 →

做源表 语法格式 用DWS-Connector做源表时，DWS-Connector实现了SupportsLimitPushDown和SupportsFilterPushDown接口，支持将limit和where条件下推到数据库执行。 1 2 3 4 5 6 7 8

查看更多 →

数据仓库专家服务 服务概述 华为云为客户提供数据仓库专家服务，包含咨询服务、规划设计与实施服务、数据仓库迁移服务、开发支持服务。 前提条件 客户应提前至少5个工作日申请该服务，以便于华为云评估客户业务目标及时间计划可行性。 服务期间如涉及大批量资源需求，建议客户提前10个工作日请，具体视申请的产品类型及数量评估而定。

查看更多 →

在任务启动、任务全量同步阶段，不建议对源数据库做DDL操作 为了保持数据一致性，不允许对正在同步中的目标数据库进行修改操作（包括但不限于DDL操作）。 同步过程中，不允许修改、删除连接源和目标数据库的用户的用户名、密码、权限，或修改源和目标数据库的端口号。 同步过程中，不允许源库写入

查看更多 →

ES异常恢复后同步数据失败 问题描述 ES异常恢复后，手动执行以下脚本未成功。 ca_cm__migrationCustomer ca_cm__loginAccountNameMigration 创建的用户，登录失败，用户相关数据未同步到ES索引表中。 原因分析 ES异常恢复后，

查看更多 →

做维表 语法格式 1 2 3 4 5 6 7 8 9 10 11 create table dwsSource ( attr_name attr_type (',' attr_name attr_type)* ) with ( 'connector'

查看更多 →

MySQL->CSS/ES实时同步 增量同步失败报错，关键词“write table *** failed: null” 父主题： 失败案例

查看更多 →

在任务启动、任务全量同步阶段，不建议对源数据库做DDL操作。 为了保持数据一致性，不允许对正在同步中的目标数据库进行修改操作（包括但不限于DDL操作）。 同步过程中，不允许修改、删除连接源和目标数据库的用户的用户名、密码、权限，或修改源和目标数据库的端口号。 同步过程中，不允许源库写

查看更多 →

，写ES的速率低于1M/S，这里可以针对filebeat.yml配置文件做优化，提高写入ES的性能。 原因分析 filebeat.yml的默认配置比较保守，在日志量很大的业务场景，需要修改filebeat.yml参数进行调优。 处理步骤 针对filebeat.yml配置文件做参数优化，调整input端配置：

查看更多 →

hSize设置为50000即可。 Q: 遇到数据库死锁了怎么办？ A：通常出现死锁大致分为行锁死锁和分布式死锁。 行锁：该场景通常为同一主键数据的并发更新造成行锁，该情况可以通过对数据做key by解决，key by必须根据数据库主键做，保证同一个主键数据会在同一个并发中，破坏掉

查看更多 →

。 整库迁移：适用于数据入湖和数据上云场景下，离线或自建数据库整体迁移场景，请参见整库迁移支持的数据源类型。 本文介绍2.9.2.200版本 CDM 集群所支持的数据源。因各版本集群支持的数据源有所差异，其他版本支持的数据源仅做参考。 表/文件迁移支持的数据源类型 表/文件迁移可以实现表或文件级别的数据迁移。

查看更多 →