FusionInsight 更多内容
  • 使用Flume服务端从Kafka采集日志保存到HDFS

    验证日志是否传输成功。 以具有HDFS组件管理权限的用户登录 FusionInsight Manager,具体请参见访问FusionInsight Manager( MRS 3.x及之后版本)。在FusionInsight Manager界面选择“集群 > 服务 > HDFS”,单击“NameNode(

    来自:帮助中心

    查看更多 →

  • 如何配置Flume定制脚本

    指定的脚本,用于执行准备工作。 本章节适用于MRS 3.x及之后版本。 未安装Flume客户端 获取软件包。 登录FusionInsight Manager,选择“集群 > 待操作集群的名称 > 服务 > Flume”进入Flume服务界面,在右上角选择“更多 > 下载客户端”,

    来自:帮助中心

    查看更多 →

  • ALM-24015 Flume MonitorServer证书文件已过期

    参数名称 参数含义 来源 产生告警的集群名称。 服务名 产生告警的服务名称。 角色名 产生告警的角色名称。 主机名 产生告警的主机名。 对系统的影响 MonitorServer证书文件已过期,功能受限,Flume客户端将无法访问Flume服务端。 可能原因 MonitorServer证书文件已过期。

    来自:帮助中心

    查看更多 →

  • 如何开发Flume第三方插件

    建立插件目录布局。 进入“Flume客户端安装目录/fusionInsight-flume-*/plugins.d”路径下,使用以下命令建立目录,可根据实际业务进行命名,无固定名称: cd /opt/flumeclient/fusioninsight-flume-1.9.0/plugins.d

    来自:帮助中心

    查看更多 →

  • 典型场景:从关系型数据库导入数据到ClickHouse

    jar包文件名 登录FusionInsight Manager系统,选择“集群 > 服务 > Loader > 更多 > 重启服务”,输入管理员密码重启Loader服务。 操作步骤 设置作业基本信息 登录“Loader WebUI”界面。 登录FusionInsight Manager

    来自:帮助中心

    查看更多 →

  • 实现Hive进程访问多ZooKeeper

    zk.port:为访问FusionInsight ZooKeeper的端口,通常保持默认,根据实际使用情况修改。 zk.quorum:为访问ZooKeeper quorumpeer的地址,请修改为集群部署有FusionInsight ZooKeeper服务的IP地址。 访问开源 ZooKeeper

    来自:帮助中心

    查看更多 →

  • 实现Hive进程访问多ZooKeeper

    zk.port:为访问FusionInsight ZooKeeper的端口,通常保持默认,根据实际使用情况修改。 zk.quorum:为访问ZooKeeper quorumpeer的地址,请修改为集群部署有FusionInsight ZooKeeper服务的IP地址。 访问开源 ZooKeeper

    来自:帮助中心

    查看更多 →

  • 准备Hive应用开发和运行环境

    客户端机器的时间与集群的时间要保持一致,时间差小于5分钟。 集群的Master节点或者Core节点使用客户端可参考集群内节点使用MRS客户端,MRS集群外客户端的安装操作可参考集群外节点使用MRS客户端。 登录FusionInsight Manager页面,下载集群客户端软件包至主

    来自:帮助中心

    查看更多 →

  • 安装MRS 3.x及之后版本Flume客户端

    操作步骤 获取软件包。 登录FusionInsight Manager,选择“集群 > 待操作集群的名称 > 服务 > Flume”进入Flume服务界面,在右上角选择“更多 > 下载客户端”,选择“选择客户端类型”为“完整客户端”,下载Flume服务客户端文件。 客户端文件名称

    来自:帮助中心

    查看更多 →

  • 导入并配置Flink SpringBoot样例工程

    文件生成后默认保存在主管理节点“/tmp/FusionInsight-Client”。 客户端软件包名称格式为:“FusionInsight_Cluster_集群ID_Services_Client.tar”。本章节仅以集群ID为1进行介绍,请以实际集群ID为准。 以客户端安装用户登录将要安装客户端的服务器。 进

    来自:帮助中心

    查看更多 →

  • 导入并配置Flink SpringBoot样例工程

    文件生成后默认保存在主管理节点“/tmp/FusionInsight-Client”。 客户端软件包名称格式为:“FusionInsight_Cluster_集群ID_Services_Client.tar”。本章节仅以集群ID为1进行介绍,请以实际集群ID为准。 以客户端安装用户登录将要安装客户端的服务器。 进

    来自:帮助中心

    查看更多 →

  • 准备MapReduce开发和运行环境

    客户端机器的时间与集群的时间要保持一致,时间差小于5分钟。 集群的Master节点或者Core节点使用客户端可参考集群内节点使用MRS客户端,MRS集群外客户端的安装操作可参考集群外节点使用MRS客户端。 登录FusionInsight Manager页面,下载集群客户端软件包至主

    来自:帮助中心

    查看更多 →

  • 准备MapReduce开发和运行环境

    客户端机器的时间与集群的时间要保持一致,时间差小于5分钟。 集群的Master节点或者Core节点使用客户端可参考集群内节点使用MRS客户端,MRS集群外客户端的安装操作可参考集群外节点使用MRS客户端。 登录FusionInsight Manager页面,下载集群客户端软件包至主

    来自:帮助中心

    查看更多 →

  • ALM-16005 Hive服务进程堆内存使用超出阈值

    影响性能。 选择“更多 > 重启服务”重启服务。 在Hive服务重启期间,正在重启的实例无法对外提供服务,且对应实例上正在执行的SQL任务可能失败。 观察界面告警是否清除。 是,处理完毕。 否,执行7。 收集故障信息。 在FusionInsight Manager首页,选择“运维

    来自:帮助中心

    查看更多 →

  • ALM-13010 配置quota的目录Znode使用率超出阈值

    信息”的“服务目录”中获取告警的Znode路径。 以集群用户登录ZooKeeper客户端,删除告警对应Znode下的无用数据。 登录FusionInsight Manager,选择“集群 > 待操作集群的名称 > 服务 > 告警对应的顶级Znode服务组件”,在该服务的“配置”页面中,单击“全部配置”,搜索“zk

    来自:帮助中心

    查看更多 →

  • Spark client CLI介绍

    textFile("hdfs://10.96.1.57:9000//wordcount_data.txt").flatMap(l => l.split(" ")).map(w => (w,1)).reduceByKey(_+_).collect() 您可以直接在命令行中指定Keytab和Principa

    来自:帮助中心

    查看更多 →

  • 生成Flume服务端和客户端的配置文件

    生成Flume服务端和客户端的配置文件 操作场景 该操作指导安装工程师在集群及Flume服务安装完成后,分别配置Flume服务服务端和客户端参数,使其可以正常工作。 本章节适用于MRS 3.x及之后版本。 本配置默认集群网络环境是安全的,数据传输过程不需要启用SSL认证。如需使

    来自:帮助中心

    查看更多 →

  • 使用Flume服务端从本地采集静态日志保存到HDFS

    使用Flume服务端从本地采集静态日志保存到HDFS 该任务指导用户使用Flume服务端从本地采集静态日志保存到HDFS上“/flume/test”目录下。 本配置默认集群网络环境是安全的,数据传输过程不需要启用SSL认证。如需使用加密方式,请参考配置Flume加密传输数据采集任务。

    来自:帮助中心

    查看更多 →

  • 使用Flume服务端从本地采集动态日志保存到HDFS

    使用Flume服务端从本地采集动态日志保存到HDFS 该任务指导用户使用Flume服务端从本地采集动态日志保存到HDFS上“/flume/test”目录下。 本配置默认集群网络环境是安全的,数据传输过程不需要启用SSL认证。如需使用加密方式,请参考配置Flume加密传输数据采集任务。

    来自:帮助中心

    查看更多 →

  • 配置MRS集群对接Syslog服务器上报告警

    配置MRS集群对接Syslog服务器上报告警 如果用户需要在统一的告警平台查看集群的告警和事件,管理员可以在FusionInsight Manager使用Syslog协议将相关数据上报到告警平台。 Syslog协议未做加密,传输数据容易被窃取,存在安全风险。 前提条件 对接服务器对

    来自:帮助中心

    查看更多 →

  • ALM-19011 RegionServer的Region数量超出阈值

    在清理过程中,请谨慎操作,确保删除数据的准确性。 在FusionInsight Manager首页,选择“集群 > 待操作集群的名称 > 服务 > HBase”,单击“HMaster(主)”,打开该HBase实例的WebUI,查看该HBase服务实例上存储的表并记录可删除的无用表。

    来自:帮助中心

    查看更多 →

共105条
看了本文的人还看了