分布式消息服务 Kafka 

 

分布式消息服务 Kafka 是一个高吞吐、高可用的消息中间件服务,适用于构建实时数据管道、流式数据处理、第三方解耦、流量削峰去谷等场景,具有大规模、高可靠、高并发访问、可扩展且完全托管的特点,是分布式应用上云必不可少的重要组件

 
 

    kafka参数配置详解 更多内容
  • 配置详解

    make_all --ccache false -v && post_build.sh" params参数详解 params配置项指定了一些使用鸿蒙构建加速必配的参数参数说明如下: 参数项 是否必填 说明 示例 TB_RSYNC 是 需要同步的产物文件目录,“:”前为根目录,“:”后为若干个以“

    来自:帮助中心

    查看更多 →

  • 配置Kafka/DMS Kafka源端参数

    配置Kafka/DMS Kafka源端参数 作业中源连接为Kafka连接或DMS Kafka连接时,源端作业参数如表1所示。 表1 Kafka作为源端时的作业参数 参数类型 参数 说明 取值样例 基本参数 Topics 支持单个或多个topic。 est1,est2 数据格式 解析数据时使用的格式:

    来自:帮助中心

    查看更多 →

  • 配置Kafka/DMS Kafka源端参数

    配置Kafka/DMS Kafka源端参数 作业中源连接为Kafka连接或DMS Kafka连接时,源端作业参数如表1所示。 表1 Kafka作为源端时的作业参数 参数类型 参数 说明 取值样例 基本参数 Topics 支持单个或多个topic。 est1,est2 数据格式 解析数据时使用的格式:

    来自:帮助中心

    查看更多 →

  • 配置详解

    BuildAccelerateL3 -AOSP ./build.sh && ./post_build.sh" params参数详解 params配置项指定了一些使用AOSP构建加速必配的参数参数说明如下: 参数项 是否必填 说明 示例 TB_RSYNC 是 需要同步的产物文件目录,“:”前为根目录,“:”后为若干个以“

    来自:帮助中心

    查看更多 →

  • Kafka常用参数

    Kafka常用参数 本章节内容适用于 MRS 3.x及后续版本。 参数入口 参数入口,请参考修改集群服务配置参数。 常用参数 表1 参数说明 配置参数 说明 缺省值 log.dirs Kafka数据存储目录列表,以逗号分隔多个目录。 %{@auto.detect.datapart.bk

    来自:帮助中心

    查看更多 →

  • Kafka常用参数

    Kafka常用参数 本章节内容适用于MRS 3.x及后续版本。 参数入口 参数入口,请参考修改集群服务配置参数。 常用参数 表1 参数说明 配置参数 说明 缺省值 log.dirs Kafka数据存储目录列表,以逗号分隔多个目录。 %{@auto.detect.datapart.bk

    来自:帮助中心

    查看更多 →

  • 详解

    Vector前缀的算子是指向量化执行引擎算子,一般出现含有列存表的Query中。 Streaming是一个特殊的算子,它实现了分布式架构的核心数据shuffle功能,Streaming共有三种形态,分别对应了分布式结构下不同的数据shuffle功能: Streaming (type: GATHER):作用是coordinator从DN收集数据。

    来自:帮助中心

    查看更多 →

  • 详解

    kload参数后开启内存使用量估算,且存在估算值大于0的算子时才会显示该字段。 E-width:每个算子输出元组的估算宽度。 E-costs:每个算子估算的执行代价。 E-costs是优化器根据成本参数定义的单位来衡量的,习惯上以磁盘页面抓取为1个单位, 其它开销参数将参照它来设置。

    来自:帮助中心

    查看更多 →

  • WK文件配置详解

    WK文件配置详解 表1 WK文件配置详解 参数 说明 net_type CNN:不包含LSTM/RNN/ROIPooling/PSROIPooling的任意网络 ROI/PSROI:包含ROI Pooling 和PSROI Pooling 的网络 Recurrent:包含ROI Pooling

    来自:帮助中心

    查看更多 →

  • Kafka客户端参数配置建议

    Kafka客户端参数配置建议 Kafka客户端的配置参数很多,以下提供Producer和Consumer几个常用参数配置。其他参数配置,请参考Kafka配置。 表1 Producer参数 参数 默认值 推荐值 说明 acks 1 高可靠:all或者-1 高吞吐:1 收到Serve

    来自:帮助中心

    查看更多 →

  • 配置Kafka高可用和高可靠参数

    将会导致业务写入失败。 参数配置项为服务配置需要重启Kafka,建议在变更窗口做服务配置修改。 参数描述 如果业务需要保证高可用和高性能。 在服务配置如表1中参数参数配置入口请参考修改集群服务配置参数。 表1 服务端高可用性和高性能参数说明 参数 默认值 说明 unclean

    来自:帮助中心

    查看更多 →

  • 详解

    详解 如SQL执行计划概述节中所说,EXPLAIN会显示执行计划,但并不会实际执行SQL语句。EXPLAIN ANALYZE和EXPLAIN PERFORMANCE两者都会实际执行SQL语句并返回执行信息。在这一节将详细解释执行计划及执行信息。 执行计划 以如下SQL语句为例: 1

    来自:帮助中心

    查看更多 →

  • 详解

    详解 如SQL执行计划概述节中所说,EXPLAIN会显示执行计划,但并不会实际执行SQL语句。EXPLAIN ANALYZE和EXPLAIN PERFORMANCE两者都会实际执行SQL语句并返回执行信息。在这一节将详细解释执行计划及执行信息。 执行计划 以如下SQL语句为例: 1

    来自:帮助中心

    查看更多 →

  • 详解

    Vector前缀的算子是指向量化执行引擎算子,一般出现含有列存表的Query中。 Streaming是一个特殊的算子,它实现了分布式架构的核心数据shuffle功能,Streaming共有三种形态,分别对应了分布式结构下不同的数据shuffle功能: Streaming (type: GATHER):作用是coordinator从DN收集数据。

    来自:帮助中心

    查看更多 →

  • 配置Kafka高可用和高可靠参数

    将会导致业务写入失败。 参数配置项为服务配置需要重启Kafka,建议在变更窗口做服务配置修改。 参数描述 如果业务需要保证高可用和高性能。 在服务配置如表1中参数参数配置入口请参考修改集群服务配置参数。 表1 服务端高可用性和高性能参数说明 参数 默认值 说明 unclean

    来自:帮助中心

    查看更多 →

  • 功能详解

    功能详解 语音回呼功能详解 语音通知功能详解 语音验证码功能详解

    来自:帮助中心

    查看更多 →

  • 接口详解

    本Demo应用引入了thymeleaf,在配置文件中配置thymeleaf基本参数后,该接口返回为登录页的静态资源login.html,即登录页的界面。 图3 配置thymeleaf /is/login接口 该接口为查询当前访问的用户是否登录,如果登录,则返回当前登录的用户信息,否则返回消息为空。与OrgI

    来自:帮助中心

    查看更多 →

  • 参数配置

    参数为私密参数时,系统会将输入参数做加密存储,使用时进行解密,同时在运行日志里不可见。 参数描述 参数的说明。 删除 单击参数所在行,可以删除该参数。 根据需要新建并配置参数。 单击参数列表下的“立即创建”,新增一个新的参数,请根据需要自定义参数名称、类型(默认为“字符串类型”)、参数值,设置私密参数或运行时设置等。

    来自:帮助中心

    查看更多 →

  • 参数配置

    参数配置 获取参数模板列表 获取指定实例的参数 修改指定实例的参数 创建参数模板 删除参数模板 查询参数模板详情 复制参数模板 重置参数组 比较两个参数组模板之间的差异 查询可应用实例列表 校验参数组名称是否存在 应用参数模板 查询参数模板的应用记录 查询参数模板的修改历史 父主题:

    来自:帮助中心

    查看更多 →

  • 配置参数

    配置参数 执行样例代码前,必须在hbase-site.xml配置文件中,配置正确的ZooKeeper集群的地址。 配置项如下: <property> <name>hbase.zookeeper.quorum</name> <value>xxx-zk1.cloudtable.com

    来自:帮助中心

    查看更多 →

  • 配置Kafka连接

    配置Kafka连接 MRS Kafka 连接MRS上的Kafka数据源时,相关参数如表1所示。 作业运行中禁止修改密码或者更换用户。在作业运行过程中修改密码或者更换用户,密码不会立即生效且作业会运行失败。 表1 MRS Kafka连接参数 参数名 说明 取值样例 名称 连接的名称

    来自:帮助中心

    查看更多 →

共105条
看了本文的人还看了