使用Loader从HBase导出数据到关系型数据库 操作场景 该任务指导用户使用Loader将数据从HBase导出到关系型数据库。 前提条件 创建或获取该任务中创建Loader作业的业务用户和密码。 确保用户已授权访问作业执行时操作的HBase表或phoenix表。 获取关系型数据库使用的用户和密码。

查看更多 →

使用Loader从Hive导出数据到关系型数据库 操作场景 该任务指导用户使用Loader将数据从Hive导出到关系型数据库。 前提条件 创建或获取该任务中创建Loader作业的业务用户和密码。 确保用户已授权访问作业执行时操作的Hive表。 获取关系型数据库使用的用户和密码。 检查磁盘

查看更多 →

表输入 概述 “表输入”算子，将关系型数据库表的指定列按顺序转换成同等数量的输入字段。 输入与输出 输入：表列 输出：字段 参数说明 表1 算子参数说明 参数 含义 类型 是否必填 默认值 输入字段 配置关系型数据库输入字段的相关信息： 位置：配置输入字段的位置。 字段名：配置输入字段名。

查看更多 →

前提条件 已获取开发人员及以上权限用户的账号和密码。 创建关系型数据库检查规则时，请确保已将对应关系型数据库配置为首选映射。 创建图数据库检查规则时，请确保对应图数据库为默认图数据库，且目标实体下不存在抽取方式为物理表的关系型数据库映射。 进入“基础数据管理 > 数据源”页面，查看目标

查看更多 →

表输入 概述 “表输入”算子，将关系型数据库表的指定列按顺序转换成同等数量的输入字段。 输入与输出 输入：表列 输出：字段 参数说明 表1 算子参数说明 参数 含义 类型 是否必填 默认值 输入字段 配置关系型数据库输入字段的相关信息： 位置：配置输入字段的位置。 字段名：配置输入字段名。

查看更多 →

使用Loader从关系型数据库导入数据到HBase 操作场景 该任务指导用户使用Loader将数据从关系型数据库导入到HBase。 前提条件 创建或获取该任务中创建Loader作业的业务用户和密码。 确保用户已授权访问作业执行时操作的HBase表或phoenix表。 获取关系型数据库使用的用户和密码。

查看更多 →

安全组是一个逻辑上的分组，为同一个虚拟私有云内具有相同安全保护需求，并相互信任的 弹性云服务器 和华为云关系型数据库实例提供访问策略。 为了保障数据库的安全性和稳定性，在使用华为云关系型数据库实例之前，您需要设置安全组，开通需访问数据库的IP地址和端口。 内网连接RDS实例时，设置安全组分为以下两种情况：

查看更多 →

properties 端口 访问OBS数据的端口。默认值为“443”。 访问标识(AK) 表示访问OBS的用户的访问密钥AK。 密钥(SK) 表示访问密钥对应的SK。 关系型数据库连接 关系型数据库连接是Loader与关系型数据库进行数据交换的通道，配置参数如表2所示。 部分参数

查看更多 →

Boolean 是否添加SQL语句，关系型数据库使用。 - true (添加) - false（不添加） querySql 否 String 查询SQL语句，可为空，关系型数据库使用。 sourceTable 否 String 源端表名，关系型数据库使用。 sourceSchema 否

查看更多 →

使用Loader从HDFS/OBS导出数据到关系型数据库 操作场景 该任务指导用户使用Loader将数据从HDFS/OBS导出到关系型数据库。 前提条件 创建或获取该任务中创建Loader作业的业务用户和密码。 确保用户已授权访问作业执行时操作的HDFS/OBS目录和数据。 获取关系型数据库使用的用户和密码。

查看更多 →

如果您更改一个参数值，则所做更改的应用时间将由该参数的类型决定。 华为云关系型数据库服务的管理控制台显示与数据库实例关联的数据库参数模板的状态。例如，如果数据库实例未使用对其关联的数据库参数模板所做的最新更改，则华为云关系型数据库服务的管理控制台将显示状态为“等待重启”的数据库参数模板。您将

查看更多 →

使用Loader从关系型数据库导入数据到Hive 操作场景 该任务指导用户使用Loader将数据从关系型数据库导入到Hive。 前提条件 创建或获取该任务中创建Loader作业的业务用户和密码。 确保用户已授权访问作业执行时操作的Hive表。 获取关系型数据库使用的用户和密码。

查看更多 →

使用Loader从关系型数据库导入数据到HDFS/OBS 操作场景 该任务指导用户使用Loader将数据从关系型数据库导入到HDFS/OBS。 前提条件 创建或获取该任务中创建Loader作业的业务用户和密码。 确保用户已授权访问作业执行时操作的HDFS/OBS目录和数据。 获取关系型数据库使用的用户和密码。

查看更多 →

connector.write.max-retries 否 写数据失败时的最大尝试次数。默认值为3 connector.write.exclude-update-columns 否 默认值为空（默认忽略primary key字段），表示更新主键值相同的数据时，忽略指定字段的更新

查看更多 →

使用Loader从关系型数据库导入数据到ClickHouse 操作场景 该任务指导用户使用Loader将数据从关系型数据库导入到ClickHouse，本章节以MySQL为例进行操作。 前提条件 创建或获取该任务中创建Loader作业的业务用户和密码。 ClickHouse表已创建

查看更多 →

场景五：使用default传参为日志不存在的字段填充默认值 原始日志 { "content": "this is a log" } 加工规则： e_if(e_not_has("type"), e_set("type", "log")) 加工结果 { "type": "log"

查看更多 →

典型场景：从 FTP服务器 导入数据到HBase 典型场景：从关系型数据库导入数据到HDFS/OBS 典型场景：从关系型数据库导入数据到HBase 典型场景：从关系型数据库导入数据到Hive 典型场景：从HDFS/OBS导入数据到HBase 典型场景：从关系型数据库导入数据到ClickHouse 典型场

查看更多 →

理的在线关系型数据库服务。 云数据库相关环境变量如下表所示。 表4 RDS关系型数据库相关环境变量 环境变量 说明 RELATIONAL_DATABASE_NAME 关系型数据库实例名称 RELATIONAL_DATABASE_CONNECTION_TYPE 关系型数据库实例的连

查看更多 →

RDS for SQL Server连接不上的判断方法 场景排查 弹性 云服务器 能否ping通华为云关系型数据库实例。 如果ping不通，可以查看弹性云 服务器 和华为云关系型数据库实例是否处于同一个虚拟私有云内，是否使用同一个安全组。 内网连接方式下，弹性云服务器与云数据库RDS实例

查看更多 →

理的在线关系型数据库服务。 云数据库相关环境变量如下表所示。 表4 RDS关系型数据库相关环境变量 环境变量 说明 RELATIONAL_DATABASE_NAME 关系型数据库实例名称 RELATIONAL_DATABASE_CONNECTION_TYPE 关系型数据库实例的连

查看更多 →

器 典型场景：从Hive导出数据到SFTP服务器 典型场景：从HDFS/OBS导出数据到关系型数据库 典型场景：从HBase导出数据到关系型数据库 典型场景：从Hive导出数据到关系型数据库 典型场景：从HBase导出数据到HDFS/OBS 父主题： 使用Loader

查看更多 →