分布式消息服务 Kafka 

 

分布式消息服务 Kafka 是一个高吞吐、高可用的消息中间件服务,适用于构建实时数据管道、流式数据处理、第三方解耦、流量削峰去谷等场景,具有大规模、高可靠、高并发访问、可扩展且完全托管的特点,是分布式应用上云必不可少的重要组件

 
 

    kafka查看参数配置情况 更多内容
  • 配置Kafka/DMS Kafka源端参数

    配置Kafka/DMS Kafka源端参数 作业中源连接为Kafka连接或DMS Kafka连接时,源端作业参数如表1所示。 表1 Kafka作为源端时的作业参数 参数类型 参数 说明 取值样例 基本参数 Topics 支持单个或多个topic。 est1,est2 数据格式 解析数据时使用的格式:

    来自:帮助中心

    查看更多 →

  • 配置Kafka/DMS Kafka源端参数

    配置Kafka/DMS Kafka源端参数 作业中源连接为Kafka连接或DMS Kafka连接时,源端作业参数如表1所示。 表1 Kafka作为源端时的作业参数 参数类型 参数 说明 取值样例 基本参数 Topics 支持单个或多个topic。 est1,est2 数据格式 解析数据时使用的格式:

    来自:帮助中心

    查看更多 →

  • Kafka常用参数

    Kafka常用参数 本章节内容适用于 MRS 3.x及后续版本。 参数入口 参数入口,请参考修改集群服务配置参数。 常用参数 表1 参数说明 配置参数 说明 缺省值 log.dirs Kafka数据存储目录列表,以逗号分隔多个目录。 %{@auto.detect.datapart.bk

    来自:帮助中心

    查看更多 →

  • 查看还款情况

    查看还款情况 后付费客户可以查看已出账账单的还款情况,企业主账号还可以查看关联企业子账号的所有应还账单。 操作步骤 选择“账单管理 > 费用账单”,单击页面右上角的“还款情况”。 进入“费用账单/还款情况”页面。 查看已出账账单的还款情况。 账单周期:账期对应的日期范围。 到期还

    来自:帮助中心

    查看更多 →

  • Kafka常用参数

    Kafka常用参数 本章节内容适用于MRS 3.x及后续版本。 参数入口 参数入口,请参考修改集群服务配置参数。 常用参数 表1 参数说明 配置参数 说明 缺省值 log.dirs Kafka数据存储目录列表,以逗号分隔多个目录。 %{@auto.detect.datapart.bk

    来自:帮助中心

    查看更多 →

  • Kafka客户端参数配置建议

    Kafka客户端参数配置建议 Kafka客户端的配置参数很多,以下提供Producer和Consumer几个常用参数配置。其他参数配置,请参考Kafka配置。 表1 Producer参数 参数 默认值 推荐值 说明 acks 1 高可靠:all或者-1 高吞吐:1 收到Serve

    来自:帮助中心

    查看更多 →

  • 查看Kafka主题

    查看Kafka主题 操作场景 用户可以在MRS上查看Kafka已创建的主题信息。 操作步骤 进入Kafka服务页面: 登录 FusionInsight Manager,具体请参见访问集群Manager。然后选择“集群 > 服务 > Kafka”。 单击“KafkaTopic监控”。

    来自:帮助中心

    查看更多 →

  • 配置Kafka高可用和高可靠参数

    将会导致业务写入失败。 参数配置项为服务配置需要重启Kafka,建议在变更窗口做服务配置修改。 参数描述 如果业务需要保证高可用和高性能。 在服务配置如表1中参数参数配置入口请参考修改集群服务配置参数。 表1 服务端高可用性和高性能参数说明 参数 默认值 说明 unclean

    来自:帮助中心

    查看更多 →

  • 查看参数

    查看参数 GaussDB 安装后,有一套默认的运行参数,为了使GaussDB与业务的配合度更高,用户需要根据业务场景和数据量的大小进行GUC参数调整。 操作步骤 连接数据库。 查看数据库运行参数当前取值。 方法一:使用SHOW命令。 使用如下命令查看单个参数: 1 gaussdb=#

    来自:帮助中心

    查看更多 →

  • 查看数据投递情况

    查看数据投递情况 操作场景 数据投递成功后,可以到投递目的地查看数据投递情况。请根据您的投递目的地选择对应操作: 投递到其他数据管道 投递到OBS桶 投递到LTS 前提条件 已完成数据投递操作,具体操作请参见新增数据投递。 投递到其他数据管道 登录管理控制台。 在页面左上角单击,选择“安全与合规

    来自:帮助中心

    查看更多 →

  • 查看Kafka主题

    查看Kafka主题 操作场景 用户可以在MRS上查看Kafka已创建的主题信息。 操作步骤 进入Kafka服务页面: MRS 3.x之前版本,单击集群名称,登录集群详情页面,选择“组件管理 > Kafka”。 若集群详情页面没有“组件管理”页签,请先完成IAM用户同步(在集群详情

    来自:帮助中心

    查看更多 →

  • 查看参数

    查看参数 GaussDB安装后,有一套默认的运行参数,为了使GaussDB与业务的配合度更高,用户需要根据业务场景和数据量的大小进行GUC参数调整。 操作步骤 连接数据库。 查看数据库运行参数当前取值。 方法一:使用SHOW命令。 使用如下命令查看单个参数: 1 gaussdb=#

    来自:帮助中心

    查看更多 →

  • 配置Kafka高可用和高可靠参数

    将会导致业务写入失败。 参数配置项为服务配置需要重启Kafka,建议在变更窗口做服务配置修改。 参数描述 如果业务需要保证高可用和高性能。 在服务配置如表1中参数参数配置入口请参考修改集群服务配置参数。 表1 服务端高可用性和高性能参数说明 参数 默认值 说明 unclean

    来自:帮助中心

    查看更多 →

  • 查看用户认证情况

    查看用户认证情况 检查标准 通常情况下,无用户认证失败记录,或者不存在认证成功过的帐号突然认证失败的记录。 操作步骤 以租户帐号登录华为乾坤控制台。 单击页面左上角按钮,单击“我的服务 > 云管理网络”,进入云管理网络服务首页。 单击页面右上角“ > 准入认证”。 图1 准入认证首页

    来自:帮助中心

    查看更多 →

  • 查看集群情况

    查看集群情况 查看集群情况流程 在“容器洞察 > 集群总览”页面的集群统计列表中,单击集群名称跳转至单个集群的智能分析页面。本页面分为五个页签,分别为: “集群”页签:具体信息请参见查看集群详情。 “节点”页签:具体信息请参见查看集群内节点详情。 “工作负载”页签:具体信息请参见查看集群内工作负载详情。

    来自:帮助中心

    查看更多 →

  • 配置对接Kafka

    Manager页面,选择“集群 > 服务 > Kafka > 配置”,参数类别设置为“全部配置”,搜索“ssl.mode.enable”并配置为“true”。 客户端配置。 登录集群的FusionInsight Manager,选择“集群 > 待操作的集群名称 > 服务 > Kafka > 更多 >

    来自:帮助中心

    查看更多 →

  • 配置对接Kafka

    Manager页面,选择“集群 > 服务 > Kafka > 配置”,参数类别设置为“全部配置”,搜索“ssl.mode.enable”并配置为“true”。 客户端配置。 登录集群的FusionInsight Manager,选择“集群 > 服务 > Kafka > 更多 > 下载客户端”,下载客户端压缩文件到本地机器。

    来自:帮助中心

    查看更多 →

  • 配置Kafka连接

    配置Kafka连接 MRS Kafka 连接MRS上的Kafka数据源时,相关参数如表1所示。 作业运行中禁止修改密码或者更换用户。在作业运行过程中修改密码或者更换用户,密码不会立即生效且作业会运行失败。 表1 MRS Kafka连接参数 参数名 说明 取值样例 名称 连接的名称

    来自:帮助中心

    查看更多 →

  • 参数配置

    参数为私密参数时,系统会将输入参数做加密存储,使用时进行解密,同时在运行日志里不可见。 参数描述 参数的说明。 删除 单击参数所在行,可以删除该参数。 根据需要新建并配置参数。 单击参数列表下的“立即创建”,新增一个新的参数,请根据需要自定义参数名称、类型(默认为“字符串类型”)、参数值,设置私密参数或运行时设置等。

    来自:帮助中心

    查看更多 →

  • 参数配置

    参数配置 获取参数模板列表 获取指定实例的参数 修改指定实例的参数 创建参数模板 删除参数模板 查询参数模板详情 复制参数模板 重置参数组 比较两个参数组模板之间的差异 查询可应用实例列表 校验参数组名称是否存在 应用参数模板 查询参数模板的应用记录 查询参数模板的修改历史 父主题:

    来自:帮助中心

    查看更多 →

  • 配置参数

    配置参数 执行样例代码前,必须在hbase-site.xml配置文件中,配置正确的ZooKeeper集群的地址。 配置项如下: <property> <name>hbase.zookeeper.quorum</name> <value>xxx-zk1.cloudtable.com

    来自:帮助中心

    查看更多 →

共105条
看了本文的人还看了