分布式消息服务 Kafka 

 

分布式消息服务 Kafka 是一个高吞吐、高可用的消息中间件服务,适用于构建实时数据管道、流式数据处理、第三方解耦、流量削峰去谷等场景,具有大规模、高可靠、高并发访问、可扩展且完全托管的特点,是分布式应用上云必不可少的重要组件

 
 

    kafka集群容量 更多内容
  • 创建的Kafka实例是集群模式么?

    创建的Kafka实例是集群模式么? Kafka实例分为单机实例和集群实例,单机实例只有一个代理,是单机模式。集群实例由3个及以上代理组成,是集群模式。 父主题: 实例问题

    来自:帮助中心

    查看更多 →

  • 准备连接Kafka集群配置文件

    准备连接Kafka集群配置文件 应用程序开发或运行过程中,需通过集群相关配置文件信息连接 MRS 集群,用于验证应用程序运行。 场景一:准备本地Windows开发环境调测程序所需配置文件。 登录 FusionInsight Manager,选择“集群 > 概览 > 更多 > 下载客户端

    来自:帮助中心

    查看更多 →

  • 准备连接Kafka集群配置文件

    准备连接Kafka集群配置文件 准备集群认证用户信息 对于开启Kerberos认证的MRS集群,需提前准备具有相关组件操作权限的用户用于程序认证。 以下Kafka权限配置示例供参考,在实际业务场景中可根据业务需求灵活调整。 登录FusionInsight Manager。 选择“集群

    来自:帮助中心

    查看更多 →

  • 单机和集群Kafka实例差异概述

    单机和集群Kafka实例差异概述 单机实例是分布式消费服务Kafka版提供的单代理实例,只适用体验和业务测试场景,无法保证性能和可靠性。如果需要在生产环境使用Kafka实例,建议购买集群实例。 单机实例和集群实例支持的特性和功能有部分差异,具体如表1所示。 表1 单机实例和集群实例的差异说明

    来自:帮助中心

    查看更多 →

  • 准备连接Kafka集群配置文件

    准备连接Kafka集群配置文件 准备集群认证用户信息 对于开启Kerberos认证的MRS集群,需提前准备具有相关组件操作权限的用户用于程序认证。 以下Kafka权限配置示例供参考,在实际业务场景中可根据业务需求灵活调整。 登录FusionInsight Manager。 选择“集群

    来自:帮助中心

    查看更多 →

  • 准备连接Kafka集群配置文件

    准备连接Kafka集群配置文件 应用程序开发或运行过程中,需通过集群相关配置文件信息连接MRS集群,用于验证应用程序运行。 场景一:准备本地Windows开发环境调测程序所需配置文件。 登录FusionInsight Manager,选择“集群 > 概览 > 更多 > 下载客户端”(MRS

    来自:帮助中心

    查看更多 →

  • 查看容量排名

    查看容量排名 提供用户查看已关联的资源容量排名的能力。 操作场景 通过Cloud Operations Center查看已关联的资源容量排名。 操作步骤 登录COC。 在左侧菜单栏选择“资源管理 > 应用资源管理”,进入“应用资源管理”页面,选择“应用管理”页签,单击“容量”。 图1

    来自:帮助中心

    查看更多 →

  • 更改Kafka Broker的存储目录

    ${BIGDATA_DATA_HOME}/kafka/data1/kafka-logs,${BIGDATA_DATA_HOME}/kafka/data2/kafka-logs”。 单击“保存”,并单击“确定”。界面提示“操作成功”,单击“完成”。 选择“集群 > 服务 > Kafka ,右上角选择“更多

    来自:帮助中心

    查看更多 →

  • 更改Broker的存储目录

    ${BIGDATA_DATA_HOME}/kafka/data1/kafka-logs,${BIGDATA_DATA_HOME}/kafka/data2/kafka-logs”。 单击“保存”,并单击“确定”。界面提示“操作成功”,单击“完成”。 选择“集群 > 服务 > Kafka”,右上角选择“更多

    来自:帮助中心

    查看更多 →

  • 配置Windows通过EIP访问集群Kafka

    登录到FusionInsight Manager页面,选择“集群 > 服务 > Kafka > 实例”,勾选所有Broker实例,单击“启动实例”。 给MRS服务集群的Broker节点分别绑定EIP。 在Windows通过已配置的Broker节点EIP地址和端口连接到Kafka集群并调试代码。 运行样例代码前,

    来自:帮助中心

    查看更多 →

  • 配置Windows通过EIP访问集群Kafka

    TRACE://:21013”,修改配置保存后重启Kafka集群。 如果当前集群为MRS 3.2.0-LTS.1,执行该步骤无法通过EIP访问Kafka时,可以参考如下操作进行处理: 登录到FusionInsight Manager页面,选择“集群 > 服务 > Kafka > 实例”,勾选所有Broker实例,选择“更多

    来自:帮助中心

    查看更多 →

  • SmartConnect迁移KAFKA实施步骤

    步骤一:创建分布式消息kafka 登录华为云控制台 单击“服务列表”,选择“应用中间件 > 分布式消息服务kafka版”,进入“分布式消息服务kafka版”页面,如下图所: 图2 分布式消息服务kafka版 单击“购买Kafka实例”,本次实验配置如下: 图3 购买Kafka实例 步骤二:开启SmartConnect

    来自:帮助中心

    查看更多 →

  • Kafka

    Kafka Kafka是一个分布式流处理平台,最初由LinkedIn开发。它是一个高吞吐量、低延迟的平台,可以处理大量的实时数据流。Kafka主要由三个部分组成:生产者、消费者和代理服务器。生产者将数据发布到Kafka集群,消费者从Kafka集群订阅数据并进行处理,代理服务器则是

    来自:帮助中心

    查看更多 →

  • Kafka同步Kafka

    Kafka同步Kafka 当前仅支持华南-广州。 前提条件 业务有自己的源Kafka和目标Kafka。 源Kafka和目标Kafka实例支持的版本:目前支持2.7及以上,后续支持版本会持续更新。 源Kafka和目标Kafka实例的规格、存储空间需保持一致。 确保vpc、子网、kafka等资源充足。

    来自:帮助中心

    查看更多 →

  • 设置容量阈值

    设置容量阈值 NetEco系统已预置了机柜的U空间、制冷、承重、网络、配电和空闲机柜判定的参考阈值,用户可根据实际情况自定义阈值。当设备实际运行参数超过容量阈值时,机柜视图会显示为不同的颜色。 前提条件 已具备“容量阈值设置”的操作权限。 操作步骤 选择“运营管理 > 容量管理 >

    来自:帮助中心

    查看更多 →

  • 了解容量管理

    了解容量管理 容量报表与统计 统计与分析机房容量使用情况,输出容量报表,为用户全面掌控机房能源使用效率、不断优化PUE(Power Usage Effectiveness,能源使用效率)和提高单位能耗产出提供数据支撑。 容量报表 支持按照指定范围(如:机房、楼层)、指定时间输出容量类报表,包含的容量报表如下:

    来自:帮助中心

    查看更多 →

  • 设置容量开关

    设置容量开关 用户可选择是否开启资产自动上架功能、是否显示“容量规划”网格、是否开启区分业务机柜功能、是否开启设计供电功率功能以及是否开启相邻U位不可用功能。 前提条件 已具备“容量开关设置”的操作权限。 操作步骤 选择“运营管理 > 容量管理 > 容量配置”。 在左侧导航栏中,

    来自:帮助中心

    查看更多 →

  • 容量变更

    容量变更 操作场景 随着业务数据的增加,原来申请的数据库存储容量不能满足需求,这时,您可以变更实例的磁盘容量。 使用须知 存储容量变更目前既支持扩容,也支持缩容。 为了避免影响业务访问,建议当存储容量使用率超过80%时,及时进行存储扩容。 缩容场景下,待变更到的磁盘容量必须大于已用量的125%,向上取整。

    来自:帮助中心

    查看更多 →

  • 规划HDFS容量

    象总量增加,需要消耗更多的内存,使集群现有硬件可能会难以满足业务需求,且导致集群难以扩展。 规划存储大量文件的HDFS系统容量,就是规划NameNode的容量规格和DataNode的容量规格,并根据容量设置参数。 容量规格 NameNode容量规格 在NameNode中,每个文件

    来自:帮助中心

    查看更多 →

  • 变更磁盘容量

    ,单击“扩容”。 在“磁盘变更”页面,选择空间大小,单击“下一步”。 每次变更最小容量为10GB,实例所选容量大小必须为10的整数倍,最小磁盘容量为40GB,最大磁盘容量为4000GB。 磁盘容量范围跟实例当前磁盘使用量有关,具体以页面显示为准。 规格确认。 重新选择:单击“上一步”,回到上个页面,修改新增空间大小。

    来自:帮助中心

    查看更多 →

  • 容量视图

    统计该管理域下已用端口数/总端口数。 容量使用趋势 按月统计机柜、U空间、电力、制冷和网络端口使用率。 说明: 默认展示最近12个月的数据。 容量使用比率 统计机柜、U空间、电力、制冷和网络端口的使用比率。 说明: “容量使用趋势”默认展示最近12个月的数据,“容量使用比率”默认展示当月的数据。 容量使用情况

    来自:帮助中心

    查看更多 →

共105条
看了本文的人还看了