分布式消息服务 Kafka 

 

分布式消息服务 Kafka 是一个高吞吐、高可用的消息中间件服务,适用于构建实时数据管道、流式数据处理、第三方解耦、流量削峰去谷等场景,具有大规模、高可靠、高并发访问、可扩展且完全托管的特点,是分布式应用上云必不可少的重要组件

 
 

    kafka参数配置详解 更多内容
  • DMS Kafka连接参数说明

    DMS Kafka连接参数说明 连接DMS的Kafka队列时,相关参数如表1所示。 作业运行中禁止修改密码或者更换用户。在作业运行过程中修改密码或者更换用户,密码不会立即生效且作业会运行失败。 表1 DMS Kafka连接参数 参数名 说明 取值样例 名称 连接的名称,根据连接的

    来自:帮助中心

    查看更多 →

  • 设置配置参数

    设置配置参数 接口名称 WEB_SetConfigWizardDone(后续废弃) 功能描述 设置配置参数 应用场景 设置配置参数 URL https://ip/action.cgi?ActionID=WEB_SetConfigWizardDone 参数 参数 类型 取值范围 参数说明

    来自:帮助中心

    查看更多 →

  • 配置进程参数

    因而Driver和Executor的参数配置对spark应用的执行有着很大的影响意义。用户可通过如下操作对Spark集群性能做优化。 操作步骤 配置Driver内存。 Driver负责任务的调度,和Executor、AM之间的消息通信。当任务数变多,任务平行度增大时,Driver内存都需要相应增大。

    来自:帮助中心

    查看更多 →

  • 设备参数配置

    设备参数配置 删除设备全局参数 创建设备全局参数 查询设备全局参数 修改设备全局参数 父主题: 网络编排

    来自:帮助中心

    查看更多 →

  • 登录参数配置

    登录参数配置 接口功能 在登录前配置登录所需要的参数。 接口描述 1 2 HW_INT IOTA_ConfigSetStr(HW_INT iItem, HW_CHAR *pValue) HW_INT IOTA_ConfigSetUint(HW_INT iItem, HW_UINT

    来自:帮助中心

    查看更多 →

  • 登录参数配置

    登录参数配置 接口功能 在登录前配置登录所需要的参数。 接口描述 1 public static boolean setConfig(int key, String value); 接口所属类 LoginConfig 参数说明 字段 必选/可选 类型 描述 key 必选 int

    来自:帮助中心

    查看更多 →

  • HBase参数配置

    在左侧导航树,单击集群管理。 选中需要修改参数的集群,单击对应的集群名称,跳转到该集群详情页面。 在“参数配置”中单击“参数配置”页签,对HBase参数进行修改。 CloudTable集群当前可以修改的HBase参数请参见HBase参数说明。 选中需要修改的参数,在“参数值”列单击。 在修改框中输

    来自:帮助中心

    查看更多 →

  • 配置连接参数

    HDFS连接参数说明 FTP/SFTP连接参数说明 Redis连接参数说明 DDS连接参数说明 CloudTable连接参数说明 MongoDB连接参数说明 Cassandra连接参数说明 DIS连接参数说明 Kafka连接参数说明 DMS Kafka连接参数说明 云搜索 服务 CSS )连接参数说明

    来自:帮助中心

    查看更多 →

  • 配置Kafka数据均衡工具

    MRS 集群管理员已明确业务需求,并准备一个Kafka管理员用户(属于kafkaadmin组,普通模式不需要)。 已安装Kafka客户端。 操作步骤 以客户端安装用户,登录已安装Kafka客户端的节点。 切换到Kafka客户端安装目录,例如“/opt/client”。 cd /opt/client

    来自:帮助中心

    查看更多 →

  • 配置Kafka应用安全认证

    配置Kafka应用安全认证 使用Sasl Kerberos认证 使用Kafka Token认证 父主题: 准备Kafka应用开发环境

    来自:帮助中心

    查看更多 →

  • 配置Kafka网络连接

    配置Kafka网络连接 连接Kafka网络要求 配置Kafka实例的公网访问 使用VPCEP实现跨VPC访问Kafka 使用DNAT实现公网访问Kafka 父主题: 连接实例

    来自:帮助中心

    查看更多 →

  • 配置Kafka访问控制

    配置Kafka访问控制 配置Kafka实例的明文/密文接入 制作和替换Kafka JKS格式的SSL证书 获取和使用Kafka PEM格式的SSL证书 配置Kafka的SSL双向认证 配置Kafka ACL用户 父主题: 连接实例

    来自:帮助中心

    查看更多 →

  • 配置Kafka数据均衡工具

    模式不需要)。 已安装Kafka客户端。 操作步骤 以客户端安装用户,登录已安装Kafka客户端的节点。 切换到Kafka客户端安装目录,例如“/opt/client”。 cd /opt/client 执行以下命令,配置环境变量。 source bigdata_env 执行以下命

    来自:帮助中心

    查看更多 →

  • X模式功能详解

    X模式功能详解 隐私保护通话 X模式中,华为对外提供X号码呼叫和短信能力,华为侧不存储任何绑定关系,隐私保护通话平台接收到呼叫或短信后到第三方系统获取绑定关系。 X模式暂不支持申请。 X模式下具有如下关键功能: 父主题: 功能详解

    来自:帮助中心

    查看更多 →

  • 评审意见门禁详解

    评审意见门禁详解 门禁的开启/关闭 进入目标仓库,单击“设置 > 策略设置 > 合并请求”。 配置门禁。 勾选合入条件下的“评审问题全部解决才能合入”,单击“提交”保存设置,门禁开启。 取消勾选合入条件下的“评审问题全部解决才能合入”,单击“提交”保存设置,门禁关闭。 门禁触发的效果

    来自:帮助中心

    查看更多 →

  • DMS Kafka到OBS参数调优

    DMS Kafka到OBS参数调优 源端优化 Kafka抽取优化。 可通过在源端配置中单击“Kafka源端属性配置”来添加Kafka优化配置。 图1 添加自定义属性 可使用的调优参数具体如下: 表1 全量阶段优化参数 参数名 类型 默认值 说明 properties.fetch.max

    来自:帮助中心

    查看更多 →

  • 配置Kafka日志推送策略

    Topic主题 日志要推送的目标Kafka Topic名称。 Key 填写消息的Key值,表示消息存储在Kafka的指定分区,可以当成有序消息队列使用。如果Key为空,则消息分布式存储在不同的消息分区。 失败重试分配 日志推送到Kafka失败后的重试配置。 重试次数:失败后的重试次数,范围为0-5次。

    来自:帮助中心

    查看更多 →

  • 配置Kafka客户端

    配置Kafka客户端 Kafka客户端参数配置建议 Kafka客户端使用建议 父主题: 连接实例

    来自:帮助中心

    查看更多 →

  • 配置Kafka监控告警

    在管理控制台左上角单击,选择Kafka实例所在的区域。 在管理控制台左上角单击,选择“应用中间件 > 分布式消息服务Kafka版”,进入分布式消息服务Kafka专享版页面。 在左侧导航栏单击“Kafka实例”,进入Kafka实例列表页面。 通过以下任意一种方法,进入监控页面。 在Kafka实例名称后

    来自:帮助中心

    查看更多 →

  • 配置ClickHouse对接Kafka

    配置ClickHouse对接Kafka 配置ClickHouse通过用户密码对接Kafka 配置ClickHouse通过Kerberos认证对接Kafka 配置ClickHouse对接普通模式Kafka 父主题: ClickHouse数据导入

    来自:帮助中心

    查看更多 →

  • 配置Kafka后进先出

    Driver端的“spark-defaults.conf”配置文件中进行设置。 表1 参数说明 参数 说明 默认值 spark.streaming.kafka.direct.lifo 配置是否开启Kafka后进先出功能。 false spark.streaming.kafka010.inputstream.class

    来自:帮助中心

    查看更多 →

共105条
看了本文的人还看了