分布式消息服务 Kafka 

 

分布式消息服务 Kafka 是一个高吞吐、高可用的消息中间件服务,适用于构建实时数据管道、流式数据处理、第三方解耦、流量削峰去谷等场景,具有大规模、高可靠、高并发访问、可扩展且完全托管的特点,是分布式应用上云必不可少的重要组件

 
 

    kafka参数配置详解 更多内容
  • Kafka常用配置参数

    Kafka常用配置参数 本章节内容适用于 MRS 3.x及后续版本。 参数入口 请参考修改集群服务配置参数进入Kafka服务参数“全部配置”页面。 常用参数 表1 参数说明 配置参数 说明 缺省值 log.dirs Kafka数据存储目录列表,以逗号分隔多个目录。 %{@auto.detect

    来自:帮助中心

    查看更多 →

  • Kafka常用配置参数

    Kafka常用配置参数 本章节内容适用于MRS 3.x及后续版本。 参数入口 请参考修改集群服务配置参数进入Kafka服务全部配置页面。 常用参数 表1 参数说明 配置参数 说明 缺省值 log.dirs Kafka数据存储目录列表,以逗号分隔多个目录。 %{@auto.detect

    来自:帮助中心

    查看更多 →

  • 配置Kafka源端参数

    配置Kafka源端参数 表1 Kafka作为源端时的作业参数 参数类型 参数 说明 取值样例 基本参数 Topic 主题名称。支持单个topic。 cdm_topic 数据格式 解析数据时使用的格式: JSON:以JSON格式解析源数据。 CS V格式:以CSV格式解析源数据。 JSON格式

    来自:帮助中心

    查看更多 →

  • 配置Kafka/DMS Kafka源端参数

    配置Kafka/DMS Kafka源端参数 作业中源连接为Kafka连接或DMS Kafka连接时,源端作业参数如表1所示。 表1 Kafka作为源端时的作业参数 参数类型 参数 说明 取值样例 基本参数 Topics 支持单个或多个topic。 est1,est2 数据格式 解析数据时使用的格式:

    来自:帮助中心

    查看更多 →

  • 配置Kafka/DMS Kafka源端参数

    配置Kafka/DMS Kafka源端参数 作业中源连接为Kafka连接或DMS Kafka连接时,源端作业参数如表1所示。 表1 Kafka作为源端时的作业参数 参数类型 参数 说明 取值样例 基本参数 Topics 支持单个或多个topic。 est1,est2 数据格式 解析数据时使用的格式:

    来自:帮助中心

    查看更多 →

  • 修改Kafka实例配置参数

    修改Kafka实例配置参数 分布式消息服务Kafka版为实例、Topic、消费者提供了几个常用配置参数的默认值,您可以根据实际业务需求,在控制台自行修改参数值。其他在控制台未列出的配置参数,请参考Kafka配置进行修改。 Kafka实例的参数分为动态参数和静态参数: 动态参数:动

    来自:帮助中心

    查看更多 →

  • WK文件配置详解

    WK文件配置详解 表1 WK文件配置详解 参数 说明 net_type CNN:不包含LSTM/RNN/ROIPooling/PSROIPooling的任意网络 ROI/PSROI:包含ROI Pooling 和PSROI Pooling 的网络 Recurrent:包含ROI Pooling

    来自:帮助中心

    查看更多 →

  • 详解

    rkload参数后开启内存使用量估算,且存在估算值大于0的算子时才会显示该字段。 E-width:每个算子输出元组的估算宽度。 E-costs:每个算子估算的执行代价。 E-costs是优化器根据成本参数定义的单位来衡量的,习惯上以磁盘页面抓取为1个单位,其他开销参数将参照它来设置。

    来自:帮助中心

    查看更多 →

  • 详解

    Vector前缀的算子是指向量化执行引擎算子,一般出现含有列存表的Query中。 Streaming是一个特殊的算子,它实现了分布式架构的核心数据shuffle功能,Streaming共有三种形态,分别对应了分布式结构下不同的数据shuffle功能: Streaming (type: GATHER):作用是coordinator从DN收集数据。

    来自:帮助中心

    查看更多 →

  • 详解

    kload参数后开启内存使用量估算,且存在估算值大于0的算子时才会显示该字段。 E-width:每个算子输出元组的估算宽度。 E-costs:每个算子估算的执行代价。 E-costs是优化器根据成本参数定义的单位来衡量的,习惯上以磁盘页面抓取为1个单位, 其它开销参数将参照它来设置。

    来自:帮助中心

    查看更多 →

  • Kafka客户端参数配置建议

    Kafka客户端参数配置建议 Kafka客户端的配置参数很多,以下提供Producer和Consumer几个常用参数配置。不同版本的Kafka客户端参数名称可能不同,以下配置参数适用于1.1.0及以上版本。其他参数和版本配置,请参考Kafka配置。 表1 Producer参数 参数

    来自:帮助中心

    查看更多 →

  • 配置MRS Kafka目的端参数

    配置MRS Kafka目的端参数 表1 Kafka作为目的端时的作业参数 参数类型 参数名 说明 取值样例 基本参数 Topic 输入Topic数据库名称。 default 数据格式 写入目的端时使用的数据格式。 CSV:将列按照字段分隔符拼接。 JSON: 将所有列按照指定字段名称拼接为JSON字符串。

    来自:帮助中心

    查看更多 →

  • 详解

    详解 如SQL执行计划概述节中所说,EXPLAIN会显示执行计划,但并不会实际执行SQL语句。EXPLAIN ANALYZE和EXPLAIN PERFORMANCE两者都会实际执行SQL语句并返回执行信息。在这一节将详细解释执行计划及执行信息。 执行计划 以如下SQL语句为例: 1

    来自:帮助中心

    查看更多 →

  • 详解

    详解 如SQL执行计划概述节中所说,EXPLAIN会显示执行计划,但并不会实际执行SQL语句。EXPLAIN ANALYZE和EXPLAIN PERFORMANCE两者都会实际执行SQL语句并返回执行信息。在这一节将详细解释执行计划及执行信息。 执行计划 以如下SQL语句为例: 1

    来自:帮助中心

    查看更多 →

  • 详解

    详解 如SQL执行计划概述节中所说,EXPLAIN会显示执行计划,但并不会实际执行SQL语句。EXPLAIN ANALYZE和EXPLAIN PERFORMANCE两者都会实际执行SQL语句并返回执行信息。在这一节将详细解释执行计划及执行信息。 执行计划 以如下SQL语句为例: 1

    来自:帮助中心

    查看更多 →

  • 功能详解

    功能详解 语音回呼功能详解 语音通知功能详解 语音验证码功能详解

    来自:帮助中心

    查看更多 →

  • 接口详解

    本Demo应用引入了thymeleaf,在配置文件中配置thymeleaf基本参数后,该接口返回为登录页的静态资源login.html,即登录页的界面。 图3 配置thymeleaf /is/login接口 该接口为查询当前访问的用户是否登录,如果登录,则返回当前登录的用户信息,否则返回消息为空。与OrgI

    来自:帮助中心

    查看更多 →

  • 配置参数

    配置参数 执行样例代码前,必须在hbase-site.xml配置文件中,配置正确的ZooKeeper集群的地址。 配置项如下: <property> <name>hbase.zookeeper.quorum</name> <value>xxx-zk1.cloudtable.com

    来自:帮助中心

    查看更多 →

  • 参数配置

    参数配置 获取参数模板列表 获取指定实例的参数 修改指定实例的参数 创建参数模板 删除参数模板 查询参数模板详情 复制参数模板 重置参数组 比较两个参数组模板之间的差异 查询可应用实例列表 校验参数组名称是否存在 应用参数模板 查询参数模板的应用记录 查询参数模板的修改历史 父主题:

    来自:帮助中心

    查看更多 →

  • 功能详解

    功能详解 AXB模式功能详解 AX模式功能详解 X模式功能详解 AXE模式功能详解 AXYB模式功能详解

    来自:帮助中心

    查看更多 →

  • 对象详解

    对象详解 BO Abstract BO Value Object 对象间关系 父主题: 后台应用管理

    来自:帮助中心

    查看更多 →

共105条
看了本文的人还看了