ClickHouse消费Kafka数据异常 问题现象 用户在ClickHouse集群创建Kafka引擎表test.user_log_kafka消费Kafka数据，查看Kafka监控发现凌晨开始出现消息堆积，数据一直没有被消费。 原因分析 Kafka出现消息堆积，说明ClickHo

查看更多 →

理。 查看生产消费详情 进入KafkaUI界面。 使用具有KafkaUI页面访问权限的用户登录 FusionInsight Manager，选择“集群 > 服务 > Kafka”。 如需在页面上进行相关操作，例如创建Topic，需同时授予用户相关权限，请参考Kafka用户权限说明。

查看更多 →

快速连接Kafka并生产消费消息 本章节将为您介绍分布式消息服务Kafka版入门的使用流程，以创建一个开启密文接入、安全协议为SASL_SSL的Kafka实例，客户端使用内网通过同一个VPC连接Kafka实例生产消费消息为例，帮助您快速上手Kafka。 图1 Kafka使用流程 准备工作

查看更多 →

选择Topic。 消费组 输入消费组名称，输入长度范围为3到64个字符。 Kafka实例未创建消费组时，事件流启动用后，Kafka实例会自动创建输入的消费组，详情请参见查看Kafka消费组信息。 Kafka实例已创建消费组时，此处输入创建好的消费组名称即可，详情请参见创建Kafka消费组。 并发数

查看更多 →

创建用户 授权用户 消费组管理 分布式消息服务Kafka版支持在控制台删除消费组、重置消费进度以及查看消费者连接地址。 支持区域： 全部 删除消费组 重置消费进度 查看消费者连接地址 修改配置参数 分布式消息服务Kafka版为实例、Topic、消费者提供了几个常用配置参数的默认值，您可

查看更多 →

分布式消息（Kafka） 分布式消息（Kafka）连接器包含“Topic列表”、“发送数据”、“指定分区发送”三个执行动作和“消费消息”一个触发事件。 连接参数 创建分布式（Kafka）连接时连接参数说明如表1所示。如果需要连接的Kafka配置了IP地址白名单限制，则需要放通 集成工作台 公网出口访问地址“124

查看更多 →

导出Kafka消费组列表 消费组创建成功后，可导出Kafka实例中消费组的列表信息 导出Kafka消费组列表 登录管理控制台。 在管理控制台左上角单击，选择区域。 请选择Kafka实例所在的区域。 在管理控制台左上角单击，选择“应用中间件 > 分布式消息服务Kafka版”，进入分布式消息服务Kafka专享版页面。

查看更多 →

向Kafka生产并消费数据程序 Flink向Kafka生产并消费数据应用开发思路 Flink向Kafka生产并消费数据Java样例代码 Flink向Kafka生产并消费数据Scala样例代码 父主题： 开发Flink应用

查看更多 →

使用SpringBoot生产消费Kafka集群数据 本章节适用于 MRS 3.3.0及之后版本。 功能简介 通过SpringBoot实现对Kafka集群生产消费的功能。 代码样例 通过SpringBoot实现Kafka生产消费的样例代码如下： @RestController public

查看更多 →

h如何对接Kafka实例。 方案架构 Kafka实例作为Logstash输出源的示意图如下。 图1 Kafka实例作为Logstash输出源 Logstash从数据库采集数据，然后发送到Kafka实例中进行存储。Kafka实例作为Logstash输出源时，由于Kafka的高吞吐量，可以存储大量数据。

查看更多 →

查看Kafka生产消费示例代码 分布式消息服务Kafka版支持在控制台查看Java、Go和Python语言的生产消费消息示例代码，您可以参考示例代码快速完成Kafka客户端的集成，并进行消息的生产和消费。 查看Kafka生产消费示例代码 登录管理控制台。 在管理控制台左上角单击，选择区域。

查看更多 →

连接池配置中已配置连接池，其优先级大于全局配置。 登录微服务引擎控制台。 在左侧导航栏选择“应用网关 ”。 单击待操作的实例名称。 在左侧导航栏选择“网关配置 > 参数配置”。 单击待编辑参数“参数值”列的“编辑”，在弹出框中可根据实际需要编辑合适的值，具体参数见表1。 表1 连接超时时间参数

查看更多 →

配置参数 执行样例代码前，必须在hbase-site.xml配置文件中，配置正确的ZooKeeper集群的地址。 配置项如下： <property> <name>hbase.zookeeper.quorum</name> <value>xxx-zk1.cloudtable.com

查看更多 →

参数配置 获取参数模板列表 获取指定实例的参数 修改指定实例的参数 创建参数模板 删除参数模板 查询参数模板详情 复制参数模板 重置参数组 比较两个参数组模板之间的差异 查询可应用实例列表 校验参数组名称是否存在 应用参数模板 查询参数模板的应用记录 查询参数模板的修改历史 父主题：

查看更多 →

参数配置 使用说明 在“参数配置”中，新建的参数为全局参数，可以通过“更新流程参数”节点进行赋值和修改。 新增参数 参考流程管理中操作，创建所需的流程。 在流程设计页面的主菜单中，单击“配置”，选择“参数配置”。 单击“新增参数”，设置参数类型和参数ID。 图1 新增全局参数 设置完成后，单击“保存”。

查看更多 →

配置参数 执行样例代码前，必须在hbase-site.xml配置文件中，配置正确的ZooKeeper集群的地址。 配置项如下： <property> <name>hbase.zookeeper.quorum</name> <value>xxx-zk1.cloudtable.com

查看更多 →

参数配置 修改指定实例的参数 获取参数模板列表 获取指定实例的参数 父主题： 历史API

查看更多 →

是否设置为广播消费。 若开启广播消费，每条消息都会被消费组内的所有消费者消费一次。否则，每条消息只会被消费组内的某一消费者消费。 是否顺序消费 RocketMQ实例的版本为5.x时，需要设置此参数。 开启顺序消费后，消费者将按顺序消费消息。 按顺序消费可以保证消息的消费顺序和发送的顺序一致，即先发送的先消费，后发送的后消费。

查看更多 →

Broker实例IP地址:Kafka连接端口 topic名称 Kafka Broker实例IP地址可登录集群的FusionInsight Manager界面，在“集群 > 服务 > Kafka > 实例”界面中查询，多个地址可用“,”分隔。Broker端口号可通过Kafka服务配置参数“port”查询，默认为9092。

查看更多 →

。 单击“配置参数”页签。 在“配置参数”页面，找到需要配置的参数，单击“编辑”。 根据下表参数说明，配置参数。 表1 配置参数说明 内容 内容说明 参数 参数的名称。查看参数的具体功能说明，请参考实例配置参数说明。 参数默认值 参数的系统默认值。 参数范围 参数的取值范围。 参数运行值

查看更多 →

配置参数 操作步骤 以租户管理员角色登录AICC，选择“配置中心 > 系统管理 > 租户参数”，打开参数管理页面。 图1 参数配置 表1 租户参数说明 参数名称 描述 统一公共配置 公共类 是否启用页面水印 是否启用页面水印。 用户号码匿名化规则 用户号码匿名化规则。可选：中间4位匿名化；只保留后4位。

查看更多 →