分布式消息服务 Kafka 

 

分布式消息服务 Kafka 是一个高吞吐、高可用的消息中间件服务,适用于构建实时数据管道、流式数据处理、第三方解耦、流量削峰去谷等场景,具有大规模、高可靠、高并发访问、可扩展且完全托管的特点,是分布式应用上云必不可少的重要组件

 
 

    kafka使用教程 kafkaclient 更多内容
  • 使用教程

    使用教程 创建 MRS Hive连接器 创建MySQL连接器 MySQL数据迁移到MRS Hive分区表 MySQL数据迁移到OBS MySQL数据迁移到DWS MySQL整库迁移到RDS服务 Oracle数据迁移到 云搜索 服务 Oracle数据迁移到DWS OBS数据迁移到云搜索服务

    来自:帮助中心

    查看更多 →

  • 使用教程

    使用教程 数据架构示例 父主题: 数据架构

    来自:帮助中心

    查看更多 →

  • 使用教程

    使用教程 脚本及作业中引用参数使用介绍 作业调度支持每月最后一天 配置作业调度为年调度 补数据场景使用介绍 获取SQL节点的输出结果值 查询SQL获取max值传递给 CDM 作业 IF条件判断教程 获取Rest Client节点返回值教程 For Each节点使用介绍 引用脚本模板和参数模板的使用介绍

    来自:帮助中心

    查看更多 →

  • 使用教程

    使用教程 创建MRS Hive连接器 创建MySQL连接器 MySQL数据迁移到MRS Hive分区表 MySQL数据迁移到OBS MySQL数据迁移到DWS MySQL整库迁移到RDS服务 Oracle数据迁移到云搜索服务 Oracle数据迁移到DWS OBS数据迁移到云搜索服务

    来自:帮助中心

    查看更多 →

  • 使用教程

    使用教程 创建MRS Hive连接器 创建MySQL连接器 MySQL数据迁移到MRS Hive分区表 MySQL数据迁移到OBS MySQL数据迁移到DWS MySQL整库迁移到RDS服务 Oracle数据迁移到云搜索服务 Oracle数据迁移到DWS OBS数据迁移到云搜索服务

    来自:帮助中心

    查看更多 →

  • 使用教程

    使用教程 新建一个业务场景 新建一个质量作业 新建一个对账作业实例 父主题: 数据质量

    来自:帮助中心

    查看更多 →

  • 使用Kafka

    使用Kafka Kafka用户权限管理 Kafka客户端使用实践 使用Kafka生产消费数据 创建Kafka Topic 在Kafka Topic中接入消息 管理Kafka Topic Kafka企业级能力增强 Kafka性能调优 Kafka运维管理 Kafka常见问题

    来自:帮助中心

    查看更多 →

  • 使用Kafka

    opic的内容 如何配置Kafka客户端shell命令日志 如何获取Topic的分布信息 Kafka高可靠使用说明 使用Kafka Shell命令无法操作Kafka集群 Kafka生产者写入单条记录过长问题 Kakfa消费者读取单条记录过长问题 Kafka集群节点内多磁盘数据量占用高

    来自:帮助中心

    查看更多 →

  • 使用Kafka

    使用Kafka Kafka数据消费概述 Kafka用户权限管理 Kafka客户端使用实践 快速使用Kafka生产消费数据 创建Kafka Topic 在Kafka Topic中接入消息 管理Kafka Topic Kafka企业级能力增强 Kafka性能调优 Kafka运维管理 Kafka常见问题

    来自:帮助中心

    查看更多 →

  • 使用Kafka Eagle对接MRS Kafka

    使用Kafka Eagle对接MRS Kafka 应用场景 Kafka Eagle是一款分布式、高可用的Kafka监控软件,提供丰富的Kafka监控指标,例如:Kafka集群的Broker数、Topic数、Consumer数、Topic LogSize Top10、Topic Capacity

    来自:帮助中心

    查看更多 →

  • 场景说明

    在Spark应用中,通过使用StructuredStreaming调用kafka接口来获取单词记录,然后把单词记录分类统计,得到每个单词记录数。 数据规划 StructuredStreaming样例工程的数据存储在Kafka组件中。向Kafka组件发送数据(需要有kafka权限用户)。 确

    来自:帮助中心

    查看更多 →

  • 教程指引

    教程指引 本教程旨在演示使用GDS(Gauss Data Service)工具将远端服务器上的数据导入 GaussDB 中的办法,帮助您学习如何通过GDS进行数据导入的方法。 在本教程中,您将: 生成本教程需要使用 CS V格式的数据源文件。 将数据源文件上传到数据服务器。 创建外表,

    来自:帮助中心

    查看更多 →

  • 教程:使用JDBC或ODBC开发

    教程使用JDBC或ODBC开发 开发规范 驱动下载 基于JDBC开发 基于ODBC开发

    来自:帮助中心

    查看更多 →

  • 场景说明

    FangBo 数据规划 Spark Streaming样例工程的数据存储在Kafka组件中。向Kafka组件发送数据(需要有kafka权限用户)。 确保集群安装完成,包括HDFS、Yarn、Spark和Kafka。 本地新建文件“input_data1.txt”,将“log1.txt

    来自:帮助中心

    查看更多 →

  • 使用Kafka Token认证

    BOOTSTRAP_SERVERS需根据集群实际情况,配置为Kafka Broker节点的主机名及端口,可通过集群 FusionInsight Manager界面中选择“集群 > 服务 > Kafka > 实例”查看。 SECURITY_PROTOCOL为连接Kafka的协议类型,在本示例中,配置为“SASL_PLAINTEXT”。

    来自:帮助中心

    查看更多 →

  • 视频教程

    新手入门 概览 快速入门 视频教程 最佳实践 重要按钮 重要按钮 概览 快速入门 视频教程 最佳实践 视频教程 视频教程 一级分类 二级分类 实践分类 一级分类: 二级分类: 实践分类: 全部 产品介绍 操作指导 抱歉,没有找到该分类的视频,建议您修改筛选条件。

    来自:帮助中心

    查看更多 →

  • IF条件判断教程

    IF条件判断教程 当您在数据开发模块进行作业开发编排时,想要实现通过设置条件,选择不同的执行路径,可使用IF条件判断。 本教程包含以下三个常见场景举例。 根据前一个节点的执行状态进行IF条件判断 根据前一个节点的输出结果进行IF条件判断 多IF条件下当前节点的执行策略 IF条件的

    来自:帮助中心

    查看更多 →

  • Flink向Kafka生产并消费数据应用开发思路

    service.name kafka //10.96.101.32:21007表示kafka服务器的IP:port 开发思路 启动Flink Kafka Producer应用向Kafka发送数据。 启动Flink Kafka Consumer应用从Kafka接收数据,保证topic与producer一致。

    来自:帮助中心

    查看更多 →

  • 如何获取Kafka Consumer Offset信息

    如何获取Kafka Consumer Offset信息 问题背景与现象 使用Kafka Consumer消费数据时,如何获取Kafka Consumer Offset相关信息? Kafka API简单说明 新Producer API 指org.apache.kafka.clients

    来自:帮助中心

    查看更多 →

  • 使用Kafka Token认证

    BOOTSTRAP_SERVERS需根据集群实际情况,配置为Kafka Broker节点的主机名及端口,可通过集群FusionInsight Manager界面中选择“集群 > 服务 > Kafka > 实例”查看。 SECURITY_PROTOCOL为连接Kafka的协议类型,在本示例中,配置为“SASL_PLAINTEXT”。

    来自:帮助中心

    查看更多 →

  • 使用kafka采集数据时报错IllegalArgumentException

    使用kafka采集数据时报错IllegalArgumentException 问题 线程“main”报错 org.apache.kafka.common.KafkaException,构造kafka消费者失败,报错: java.lang.IllegalArgumentException:

    来自:帮助中心

    查看更多 →

共105条
看了本文的人还看了