上表中非云服务的数据源，例如MySQL，既可以支持用户本地数据中心自建的MySQL，也可以是用户在E CS 上自建的MySQL，还可以是第三方云的MySQL服务。 整库迁移支持的数据源类型 整库迁移适用于将本地数据中心或在ECS上自建的数据库，同步到云上的数据库服务或大数据服务中，适用于数

查看更多 →

上表中非云服务的数据源，例如MySQL，既可以支持用户本地数据中心自建的MySQL，也可以是用户在ECS上自建的MySQL，还可以是第三方云的MySQL服务。 整库迁移支持的数据源类型 整库迁移适用于将本地数据中心或在ECS上自建的数据库，同步到云上的数据库服务或大数据服务中，适用于数

查看更多 →

布，但是元数据和索引存储在本地，仍然需要进行重分布。存算分离表在重分布时，表只支持读，元数据的重分布时间一般比较短，但是，如果表上创建了索引，索引会影响重分布的性能，重分布完成时间与索引的数据量成正比关系，在此期间，表只支持读。 实时数仓（单机部署）不支持分布式模式，因此不支持扩缩容、逻辑集群、资源管理等操作。

查看更多 →

数据仓库 规格 GaussDB (DWS)的规格按照产品类型分为标准数仓和实时数仓。其中实时数仓还包含单机版模式。各产品类型的不同差异，详情请参见数据仓库类型。 低配置集群，如内存16G、vCPU4核及以下的规格，建议不要用于生产环境，可能会导致资源过载风险。 标准数仓（DWS 2.0）规格

查看更多 →

填写需要查询构建历史列表的构建任务ID。获取方法：在构建任务详情页，拷贝浏览器URL末尾的32位数字、字母组合的字符串，即为构建任务ID。 约束限制： 不涉及。 取值范围： 只能是英文字母和数字，长度为32个字符。 表2 Query参数 参数 是否必选 参数类型 描述 offset 是 Integer

查看更多 →

支持的数据源 实时处理集成作业可以实现表或文件级别的数据实时增量迁移。 实时处理集成作业支持的数据源如表1所示。 表1 实时增量数据迁移支持的数据源 数据源分类 源端数据源 对应的目的端数据源 关系型数据 MySQL Hadoop： MRS Hudi 消息系统：DMS Kafka 数据仓库：DWS

查看更多 →

手工搭建Hadoop环境（Linux） 简介 本文介绍了如何在华为云上使用 弹性云服务器 的Linux实例手工搭建Hadoop环境。Hadoop是一款由Apache基金会用Java语言开发的分布式开源软件框架，用户可以在不了解分布式底层细节的情况下，开发分布式程序，充分利用集群的能力进

查看更多 →

Mapreduce访问Yarn，Mapreduce访问HDFS的RPC通道。 HBase访问HDFS的RPC通道。 说明： 用户可在HDFS组件的配置界面中设置该参数的值，设置后全局生效，即Hadoop中各模块的RPC通道的加密属性全部生效。 对RPC的加密方式，有如下三种取值： “authent

查看更多 →

您可以在HDFS组件的配置界面中设置该参数的值，设置后全局生效，即Hadoop中各模块的RPC通道是否加密全部生效。 安全模式：privacy 普通模式：authentication Web最大并发连接数限制 为了保护Web 服务器 的可靠性，当访问的用户连接数达到一定数量之后，对新增用户的连接进

查看更多 →

为云服务。 客户必须提供业务系统相关的信息（包括但不限于技术栈、应用架构、部署架构、数据量和性能等）。 在华为云提供实施服务的过程中，如客户提供的资料中含有第三方软件，客户须负责与第三方厂商交涉，协助华为云解决问题。 授权华为团队与迁移相关的操作权限。 华为责任 华为需明确此次迁移项目负责人。

查看更多 →

产生告警的角色名称。 主机名 产生告警的主机名。 对系统的影响 Hive默认数据仓库被删除，会导致在默认数据仓库中创建库、创建表失败，影响业务正常使用。 可能原因 Hive定时查看默认数据仓库的状态，发现Hive默认数据仓库被删除。 处理步骤 检查Hive默认数据仓库。 以roo

查看更多 →

出该字段是数组d的第二个元素里嵌套的e对象。表关联的OBS服务器为obs_server。foldername为外表中数据源文件目录，即表数据目录在OBS上对应的文件目录。 认证用的AK和SK硬编码到代码中或者明文存储都有很大的安全风险，建议在配置文件或者环境变量中密文存放，使用时解密，确保安全。

查看更多 →

war”的信息，即为准确的构建包路径。 父主题： Maven构建

查看更多 →

将用户pom文件中的的hadoop-hdfs设置为： <dependency> <groupId>org.apache.hadoop</groupId> <artifactId>hadoop-hdfs</artifactId> <version>${hadoop.version}</version>

查看更多 →

n”。 委托名称：选择创建委托中创建的“ASOperation”。 运行时语言：选择“Python3.6”。 进入as_graceful_shutdown函数详情页，在“代码”页签，代码选择“上传自ZIP文件”，将如下程序保存成扩展名为“.py”的文件格式，压缩成zip包，并上传。然后，在“设置

查看更多 →

构建程序 本案例提供了实现告警日志功能的程序包，使用空白模板创建函数，用户可以下载（index.zip）学习使用。 创建功能函数 创建实现日志提取功能的函数，将示例代码包上传。创建过程请参考创建函数，运行时语言选择“Python2.7”，委托名称选择创建委托中的“serverless_trust”。

查看更多 →

huaweicloudsdklts”。同时，示例代码中包含了已适用于python3.9的huaweicloudsdklts依赖。 创建功能函数 创建实现日志提取功能的函数，将示例代码包上传。创建过程请参考创建事件函数，运行时语言选择“Python3.9”，委托名称选择创建委托中的“LtsOperation”。

查看更多 →

API名称：默认即可，无需修改。 分组：选择在APIG服务中创建的API分组，若无分组，可单击“创建分组”跳转至APIG创建，更多详情请参见创建API分组。 发布环境：选择“RELEASE”。 安全认证：此处为方便测试，选择“None”，实际业务请选择更安全的认证方式，例如IAM认证等。 请求协议：选择“HTTPS”。

查看更多 →

卡片构建 构建的事件模板可以通过卡片形式展示，并支持在卡片上处理事务。本章节介绍如何构建事件模板卡片。 操作步骤 登录圆桌，在页面右上角单击“轻应用构建”，进入“轻应用构建”平台。 在“我的模板集”首页，单击已创建的模板集名称，或者单击“操作”列的“编辑”，进入模板集详情页面。

查看更多 →

构建验证 手动构建验证 Gitlab自动触发Jenkins构建 父主题： Gitlab对接Jenkins自动构建并部署到CAE

查看更多 →

构建验证 手动构建验证 GitLab自动触发Jenkins构建 父主题： 使用GitLab对接Jenkins自动构建并升级部署到ServiceStage的组件

查看更多 →