分布式消息服务 Kafka 

 

分布式消息服务 Kafka 是一个高吞吐、高可用的消息中间件服务,适用于构建实时数据管道、流式数据处理、第三方解耦、流量削峰去谷等场景,具有大规模、高可靠、高并发访问、可扩展且完全托管的特点,是分布式应用上云必不可少的重要组件

 
 

    kafka集群容量 更多内容
  • MRS集群容量调整

    MRS 集群容量调整 扩容MRS集群 扩容MRS集群节点数据盘 缩容MRS集群 缩容ClickHouseServer节点 退订MRS包周期集群指定节点 MRS集群Task节点弹性伸缩 父主题: MRS集群运维

    来自:帮助中心

    查看更多 →

  • 管理Kafka集群

    管理Kafka集群 管理Kafka集群包含以下内容: 添加集群到KafkaManager的WebUI界面 更新集群参数 删除KafkaManager的WebUI界面的集群 添加集群到KafkaManager的WebUI界面 首次创建Kafka集群后会在KafkaManager的W

    来自:帮助中心

    查看更多 →

  • Kafka集群部署

    Kafka集群部署 服务信息如下: 表1 服务信息3 服务服务器 安装目录 端口 zookeeper 10.190.x.x 10.190.x.x 10.190.x.x /app/zookeeper 2181、2888、3888 kafka /app/kafka 9092 安装JDK8

    来自:帮助中心

    查看更多 →

  • Kafka集群实例

    Kafka集群实例 Kafka集群实例规格 Kafka集群实例由三个及以上代理组成,兼容开源Kafka 1.1.0、2.7和3.x。 TPS(Transaction per second),在Kafka场景中,指每秒能写入到Kafka实例的最大消息数量。下表中TPS性能,是指以1

    来自:帮助中心

    查看更多 →

  • ALM-38001 Kafka磁盘容量不足

    Manager,选择“集群 > 待操作集群的名称 > 服务 > Kafka > 实例”,启动停止的Broker实例。 等待5至10分钟后查看Broker实例的运行状态是否为“良好”。 是,修复完成后按照ALM-38001 Kafka磁盘容量不足告警指导彻底解决磁盘容量不足问题。 否,联系运维人员。

    来自:帮助中心

    查看更多 →

  • 使用Kafka Shell命令无法操作Kafka集群

    使用Kafka Shell命令无法操作Kafka集群 问题背景与现象 用户执行Kafka命令查看当前topic信息,但发现业务执行失败。 具体信息如下: root@Slave2bin]#./kafka-topics.sh --describe --topic example-metric1

    来自:帮助中心

    查看更多 →

  • Kafka集群监控管理

    Kafka集群监控管理 Kafka集群监控管理包含以下内容: 查看Broker信息 查看Topic信息 查看Consumers信息 通过KafkaManager修改Topic的partition 查看Broker信息 登录KafkaManager的WebUI界面。 在集群列表页面

    来自:帮助中心

    查看更多 →

  • 如何选择Kafka实例存储容量阈值策略?

    该策略场景下磁盘使用到达容量阈值95%后,依旧可以正常生产和消费消息,但是会删除最早的10%的消息,以保证磁盘容量充足。该场景优先保障业务不中断,数据可能会丢失。 以上两种策略需要基于业务对数据和业务的可靠性来进行选择,只能作为极端场景下的一种处理方式。建议业务购买时保证有充足的磁盘容量,避免磁盘的使用达到容量阈值。

    来自:帮助中心

    查看更多 →

  • 容量优化

    限制与约束 使用容量优化功能需开通企业支持计划。 容量优化功能包括日常风险预测(包含自定义风险分析与智能风险分析)与重保风险预测,只有被列入白名单的用户才能使用智能风险分析重保风险预测。您可以通过提交工单方式向我们提交白名单申请。 日常风险预测 重保风险预测 查看监控信息 容量报告

    来自:帮助中心

    查看更多 →

  • 容量调整

    Turbo文件系统进行缩容操作,可以通过购买小容量的新文件系统再将原文件系统数据进行手动迁移,实现“缩容”。 通用文件系统无容量限制,不支持容量调整。 调整须知 SFS容量型文件系统调整规则如下: 增加容量规则 扩容后的文件系统的总容量<=(云账号的配额容量-该云账号下其他文件系统的总容量之和) 例如,云账

    来自:帮助中心

    查看更多 →

  • 容量预估

    选择目标实例,单击“详情”,进入“实例概览”页面。 单击“容量预估”,在“空间概况”区域,查看磁盘容量空间的使用情况。 图2 空间概况 您可以查看到如下信息: 磁盘空间的使用率 磁盘剩余可用空间以及磁盘总空间大小 近一周日均增长量 预计可用天数 如果近一周日均增长为0GB,即近一周没有容量的使用,预计可用“无限”天,可用天数将不展示。

    来自:帮助中心

    查看更多 →

  • 查询Kafka集群元数据信息

    查询Kafka集群元数据信息 功能介绍 查询Kafka集群元数据信息。 调用方法 请参见如何调用API。 URI GET /v2/{project_id}/instances/{instance_id}/management/cluster 表1 路径参数 参数 是否必选 参数类型

    来自:帮助中心

    查看更多 →

  • 查询Kafka集群元数据信息

    查询Kafka集群元数据信息 当前页面API为历史版本API,未来可能停止维护。请使用查询Kafka集群元数据信息。 URI GET /v1.0/{project_id}/instances/{instance_id}/manage/cluster 参数说明如下表所示。 表1 参数说明

    来自:帮助中心

    查看更多 →

  • 容量配置

    容量配置 管理线缆颜色和类型 管理标签 设置容量阈值 设置容量开关 父主题: 容量管理

    来自:帮助中心

    查看更多 →

  • 容量报告

    容量报告 操作步骤 登录管理控制台。 选择“服务列表 > 管理与监管 > 优化顾问”优化顾问服务页面。 按照前文步骤进行日常风险预测或重保风险预测。 左侧导航树选择“容量优化 > 容量报告”。 点击报告右侧“下载”,点击“是”进行容量报告下载,您也可以在日常风险预测和重保风险预测页面内进行报告导出。

    来自:帮助中心

    查看更多 →

  • 容量预估

    容量预估 数据库实例在使用过程中,当前磁盘空间数据与日志的占比以及历史上涨情况往往是用户关心的重点。数据管理服务提供了容量预估功能,可以方便地查看磁盘空间概况与分布,并通过历史数据结合智能算法提供了空间预估等功能,尽早发现空间不足的情况并及时避免。此外还提供了智能扩容、表智能诊断、TOP50库表等高级智能运维功能。

    来自:帮助中心

    查看更多 →

  • 准备连接Kafka集群配置文件

    准备连接Kafka集群配置文件 应用程序开发或运行过程中,需通过集群相关配置文件信息连接MRS集群,用于验证应用程序运行。 场景一:准备本地Windows开发环境调测程序所需配置文件。 登录 FusionInsight Manager,选择“集群 > 概览 > 更多 > 下载客户端”(MRS

    来自:帮助中心

    查看更多 →

  • 准备连接Kafka集群配置文件

    准备连接Kafka集群配置文件 准备集群认证用户信息 对于开启Kerberos认证的MRS集群,需提前准备具有相关组件操作权限的用户用于程序认证。 以下Kafka权限配置示例供参考,在实际业务场景中可根据业务需求灵活调整。 登录FusionInsight Manager。 选择“集群

    来自:帮助中心

    查看更多 →

  • 使用SpringBoot生产消费Kafka集群数据

    使用SpringBoot生产消费Kafka集群数据 本章节适用于MRS 3.3.0及之后版本。 功能简介 通过SpringBoot实现对Kafka集群生产消费的功能。 代码样例 通过SpringBoot实现Kafka生产消费的样例代码如下: @RestController public

    来自:帮助中心

    查看更多 →

  • 创建的Kafka实例是集群模式么?

    创建的Kafka实例是集群模式么? Kafka实例分为单机实例和集群实例,单机实例只有一个代理,是单机模式。集群实例由3个及以上代理组成,是集群模式。 父主题: 实例问题

    来自:帮助中心

    查看更多 →

  • 准备连接Kafka集群配置文件

    准备连接Kafka集群配置文件 应用程序开发或运行过程中,需通过集群相关配置文件信息连接MRS集群,用于验证应用程序运行。 场景一:准备本地Windows开发环境调测程序所需配置文件。 登录FusionInsight Manager,选择“集群 > 概览 > 更多 > 下载客户端

    来自:帮助中心

    查看更多 →

共105条
看了本文的人还看了