Broker的时间。 消息键（Key）与消息体（Value）的格式 Kafka消息的消息键和消息体部分都可以使用某种格式来序列化或反序列化成二进制数据。 消息体格式 由于 Kafka 消息中消息键是可选的，以下语句将使用消息体格式读取和写入消息，但不使用消息键格式。 'format'

查看更多 →

上此依赖。 数据库驱动 否 根据实际需要确定，如果你的实时任务中使用了数据库，那么就需要添加对应数据库的驱动程序包 如使用了oracle和mysql,那么就需要添加oracle和mysql的jdbc驱动。如果没使用数据库则不需要 父主题： 实时处理服务部署

查看更多 →

云数据库MySQL/MySQL数据库连接参数说明 连接MySQL数据库连接时，相关参数如表1所示。 作业运行中禁止修改密码或者更换用户。在作业运行过程中修改密码或者更换用户，密码不会立即生效且作业会运行失败。 表1 MySQL数据库连接参数 参数名 说明 取值样例 名称 连接的名

查看更多 →

、区分的连接名。 mysql_link 数据库服务器 配置为要连接的数据库的IP地址或 域名 。 单击输入框后的“选择”，可获取用户的MySQL数据库实例列表。 192.168.0.1 端口 配置为要连接的数据库的端口。 3306 数据库名称 配置为要连接的数据库名称。 dbname

查看更多 →

配置目的端作业参数，根据待导入数据的云服务配置对应参数，如表2所示。 表2 目的端作业参数 目的端数据库类型 目的端参数 参数说明 取值样例 云数据库MySQL 云数据库PostgreSQL 云数据库SQL Server - 整库迁移到RDS关系数据库时，目的端作业参数请参见配置MySQL/SQL Se

查看更多 →

示例 使用Kafka发送数据，通过JDBC结果表将Kafka数据再输出到MySQL数据库中。 参考增强型跨源连接，在 DLI 上根据MySQL和Kafka所在的虚拟私有云和子网分别创建相应的增强型跨源连接，并绑定所要使用的Flink弹性资源池。 设置MySQL和Kafka的安全组，添

查看更多 →

Loader）是一个基于Kafka Connect框架的实时数据集成服务。 CDL服务能够从各种OLTP数据库中捕获数据库的Data Change事件，并推送到kafka，再由sink connector推送到大数据生态系统中。 CDL目前支持的数据源有MySQL、PostgreSQ

查看更多 →

示例 使用Kafka发送数据，通过JDBC结果表将Kafka数据再输出到MySQL数据库中。 参考增强型跨源连接，在DLI上根据MySQL和Kafka所在的虚拟私有云和子网分别创建相应的增强型跨源连接，并绑定所要使用的Flink弹性资源池。 设置MySQL和Kafka的安全组，添

查看更多 →

MariaDB->MySQL 不支持 不支持 入云 MariaDB-> GaussDB (for MySQL) 不支持 不支持 入云 GaussDB(for MySQL)->GaussDB(for MySQL) 支持 仅支持单AZ任务升级 出云 MySQL->MySQL 支持 仅支持单AZ任务升级

查看更多 →

GaussDB(for MySQL)->GaussDB(for MySQL) 入云 MySQL->MySQL MySQL->Oracle MySQL-> CSS /ES MySQL->Kafka DDM->MySQL DDM->Oracle DDM->Kafka DDS->MongoDB

查看更多 →

DDS->Kafka 暂不支持 支持 暂不支持 PostgreSQL->Kafka 支持 支持 暂不支持 GaussDB(for MySQL)->Kafka 支持 支持 支持 GaussDB主备版->Kafka 支持 支持 暂不支持 GaussDB分布式版->Kafka 支持 支持

查看更多 →

Hive 1.2.1 2.3.3 存储元数据的数据库：MySQL HBase 1.3.1 1.3.1 - Spark 2.2.2 3.1.1 - Kafka 1.1.0 2.11-2.4.0 - Oozie 2.x 5.1.0 - MySQL 5.7.1 RDS - Flink 1.7

查看更多 →

storage.ultra.v2 kafka_storage_space Number 必填 Kafka实例存储空间容量，存储空间不支持缩容。存储空间主要用于存储消息（包含副本，Kafka默认使用3副本），除了存储消息外还需要预留部分空间用于存储日志和元数据。例如：业务消息体积预估100GB，则存储空间最少应为100GB

查看更多 →

择“ MRS Kafka”，单击“下一步”。 图2 创建MRS Kafka数据源 配置源端MRS Kafka的数据源连接，具体参数配置如下。 表1 MRS Kafka数据源配置 参数 值 名称 自定义MRS Kafka数据源名称。例如当前配置为“source_kafka”。 Manager

查看更多 →

已创建DMS Kafka实例。 具体步骤可参考：DMS Kafka入门指引。 创建DMS Kafka实例时，不能开启Kafka SASL_SSL。 已创建RDS MySQL实例。 本示例创建的RDS MySQL数据库版本选择为：8.0。 具体步骤可参考：RDS MySQL快速入门。 整体作业开发流程

查看更多 →

参数说明 Kafka 连接名称 是 创建连接的名称。可自定义。 只能由中文字符、英文字符、数字及特殊字符"_"、"-"组成。 Kafka类型 是 目前支持MRS-Kafka、IoT-Kafka、DMS-Kafka和Default-Kafka，其中Default-Kafka为开源Kafka。

查看更多 →

配置ROMA Connect接入业务系统的数据库，确保可以正常从数据库读取和写入数据。 不同类型数据源的接入配置不同，此处以Kafka作为源端数据库，MySQL作为目标端数据库为例进行说明，其他类型数据库请参考接入数据源。 接入源端Kafka数据源： 在左侧的导航栏选择“数据源管理”，单击页面右上角的“接入数据源”。

查看更多 →

Influx、云数据库MySQL、MapReduce服务（MRS）、 区块链 服务 BCS ，文档数据库服务DDS，第三方应用服务（HTTP推送），AMQP推送消息队列，MQTT推送消息队列，设备。 表3 设置转发目标参数列表 转发目标 参数说明 数据接入服务（DIS） 区域：选择转发服务的所在

查看更多 →

云服务接入LTS概述 云日志服务（LTS）支持采集计算、存储、安全、数据库等多种华为云服务的日志数据，您可以使用LTS对云服务日志进行关键词搜索、运营数据统计分析、运行状况监控告警等多种操作。当前LTS支持采集的云服务日志如下表所示： 表1 云服务接入 序号 云服务简称 云服务名称

查看更多 →

了解VPC计费说明。 DMS Kafka Kafka提供的消息队列服务，向用户提供计算、存储和带宽资源独占式的Kafka专享实例。 Kafka版支持按需和包周期两种付费模式。Kafka计费项包括Kafka实例和Kafka的磁盘存储空间。 了解Kafka计费说明。 RDS MySQL 数据库 RDS for

查看更多 →

自定义信息抽取模型 信息抽取模型简介 准备训练数据 创建模型 管理版本

查看更多 →