查询具体更新的文件分区，因此它的速度比UPSERT快。当数据源不包含更新数据时建议使用该操作，若数据源中存在更新数据，则在数据湖中会出现重复数据。 BULK_INSERT（批量插入）：用于初始数据集加载， 该操作会对主键进行排序后直接以写普通parquet表的方式插入Hudi表，

查看更多 →

流式写入Hudi表 HoodieDeltaStreamer流式写入 Hudi自带HoodieDeltaStreamer工具支持流式写入，也可以使用SparkStreaming以微批的方式写入。HoodieDeltaStreamer提供以下功能： 支持Kafka，DFS多种数据源接入

查看更多 →

MRS Hive目标端写入时出现数据乱码 原因分析 创建任务时，目标端存储类型选择与建表时类型不一致。 比如建表时存储类型为text（文本文件），而创建任务时目标端存储类型选择了RCFile格式。 解决方案 修改界面选择的存储类型与建表时一致即可。 父主题： 数据集成任务

查看更多 →

从Kafka读取数据写入到Elasticsearch 本指导仅适用于Flink 1.12版本。 场景描述 本示例场景对用户购买商品的数据信息进行分析，将满足特定条件的数据结果进行汇总输出。购买商品数据信息为数据源发送到Kafka中，再将Kafka数据的分析结果输出到Elasticsearch中。

查看更多 →

写入更新数据时报错 Parquet/Avro schema 问题 数据写入时报错： org.apache.parquet.io.InvalidRecordException: Parquet/Avro schema mismatch: Avro field 'col1' not found

查看更多 →

Streaming从Kafka读取数据再写入HBase 场景说明 Java样例代码 Scala样例代码 父主题： 开发Spark应用

查看更多 →

写入更新数据时报错 Parquet/Avro schema 问题 数据写入时报错： org.apache.parquet.io.InvalidRecordException: Parquet/Avro schema mismatch: Avro field 'col1' not found

查看更多 →

写入和读写操作 关于写入和读写操作的命令： INSERT，可向表中插入一行或多行数据。 UPDATE，可修改表中现有数据。 DELETE，可删除表中现有数据。 COPY，导入数据。 INSERT和COPY是纯写入的操作。并发写入操作，需要等待，对同一个表的操作，当事务T1的INS

查看更多 →

流式写入Hudi表 HoodieDeltaStreamer流式写入 Hudi自带HoodieDeltaStreamer工具支持流式写入，也可以使用SparkStreaming以微批的方式写入。HoodieDeltaStreamer提供以下功能： 支持Kafka，DFS多种数据源接入

查看更多 →

MySQL到MySQL 支持的源和目标数据库 表1 支持的数据库 源数据库 目标数据库 RDS for MySQL RDS for MySQL 数据库账号权限要求 使用DRS创建录制回放任务时，连接源和目标数据库账号的权限建议保持一致，再启动任务。 使用须知 为了确保录制回放任务

查看更多 →

MySQL到MySQL 支持的源和目标数据库 表1 支持的数据库 源数据库 目标数据库 E CS 自建MySQL 5.6、5.7、8.0版本 本地自建MySQL 5.6、5.7、8.0版本 其他云上MySQL 5.6、5.7、8.0版本 RDS for MySQL 数据库账号权限要求

查看更多 →

时了解 GaussDB (for MySQL)的健康状态。 数据迁移 使用DRS迁移到GaussDB(for MySQL)数据 使用mysqldump迁移GaussDB(for MySQL)数据 数据库连接 绑定和解绑公网地址 修改数据库端口 管理数据库集群 变更实例的CPU和内存规格

查看更多 →

MySQL)支持通过多种方式实现数据迁移，常见的数据迁移方式如下： 使用DRS迁移到GaussDB(for MySQL)数据。 使用mysqldump迁移到GaussDB(for MySQL)数据。 发布区域：全部 使用DRS迁移数据 使用mysqldump迁移数据 重置管理员密码 在使用GaussDB(for

查看更多 →

RDS for MySQL 5.7测试数据 通用型测试数据 独享型测试数据 鲲鹏通用增强型测试数据 父主题： RDS for MySQL

查看更多 →

数据库类—MySQLDelete 适用于MySQLDelete删除操作使用。 参数 是否必选 参数类型 描述 Ip 是 String 数据库ip：如果是华为云RDS实例，需要绑定EIP，并保证实例端口安全组策略开启放行，详细请参考华为云：通过公网连接MySQL实例。 Port 是

查看更多 →

“true”（默认），则仅显示和调试用户编写的代码。否则将显示和调试所有包括库调用的代码。 “django” 如果设置为 “true”（默认），CodeArts IDE将为Django页面模板启用对应调试功能。 “pythonArgs” 传递给Python解释器的命令行参数。要将

查看更多 →

击“新建数据连接”。 图1 新建连接 在“新建数据连接”窗口中，选择数据源类型“云数据库 MySQL”，然后配置相关参数。 图2 新建RDS MySQL数据连接 连接RDS MySQL时，相关参数如表1所示。 表1 RDS MySQL数据连接参数 参数名 说明 名称 数据连接的名

查看更多 →

创建云数据库MySQL 进入华为云官网，登录华为云账号。 搜索云数据库MySQL，单击立即购买，进入购买数据库实例页面，如下图，根据界面提示，填写要购买的数据库实例信息，如下表所示。 图1 购买数据库实例页面 表1 购买数据库实例参数说明 参数名称 参数说明 取值样例 计费模式 必选参数

查看更多 →

RDS for MySQL 5.6测试数据 通用型测试数据 独享型测试数据 父主题： RDS for MySQL

查看更多 →

RDS for MySQL 8.0测试数据 通用型测试数据 独享型测试数据 父主题： RDS for MySQL

查看更多 →

接入GaussDB(for MySQL)数据源 概述 ROMA Connect支持把GaussDB(for MySQL)数据库作为一个数据源，并用于数据集成任务。在使用GaussDB(for MySQL)数据源前，您需要先接入数据源。 前提条件 每个接入的数据源都要归属到某个集成应用

查看更多 →