更新时间:2024-11-06 GMT+08:00
分享

接入MRS_HIVE数据源

概述

交换数据空间支持把MRS_HIVE作为一种数据源类型,并用于数据上传和下载。在使用MRS_HIVE数据源前,需要先接入数据源。

操作步骤

  1. 登录交换数据空间官网
  2. 单击“管理控制台”,进入交换数据空间控制台界面。
  3. 单击“我的空间”,在交换数据空间实例中,选择实例,单击实例卡片上的“连接器”。
  4. 选择连接器,单击连接器卡片上的“前往”,进入连接器控制台界面。
  5. 选择界面左侧导航栏中的“连接器管理 > 数据源管理”,进入“数据源管理”界面。
  1. 单击数据源列表上方“新增数据源”,进入“新增数据源”界面,设置MRS_HIVE数据源的基本信息,具体参数如表1所示。

    表1 参数说明

    参数

    说明

    数据源类型

    MRS_HIVE:MRS_HIVE是一个基于HDFS和MapReduce架构的数据仓库,用户可以读取存放在MRS_HIVE的业务数据,将数据上传到EDS上。

    数据源名称

    自定义数据源名称,建议按照一定的命名规则填写任务名称,方便快速识别和查找。要求长度范围为2位~50位。

    数据源描述

    用户可以根据需要在文本框中输入对该数据源的描述信息。

  2. 设置完成后,配置数据源连接参数,具体参数如表2所示。

    表2 参数说明

    参数

    说明

    连接地址

    MRS_HIVE数据库的IP地址。

    端口

    MRS_HIVE数据库的端口号。

    数据库名称

    MRS_HIVE数据库服务的名称。

    域名

    MRS_HIVE数据库的域名。

    用户名

    MRS_HIVE的机机类型用户名。

    keytab

    MRS_HIVE配置文件。配置文件获取请参考下方获取MRS Hive配置文件

    krb5

    MRS_HIVE配置文件。配置文件获取请参考下方获取MRS Hive配置文件

    获取MRS Hive配置文件:

    获取“krb5.conf”和“user.keytab”文件。

    参考下载用户认证文件,在MRS Manager下载用户认证文件,解压后得到“krb5.conf”和“user.keytab”文件。

    若是客户端网络连接不通,可以将hosts文件中的私网IP替换成EDS公网IP,具体请参见:配置Windows通过EIP访问普通模式集群Hive

  3. 连接参数配置完成后,单击“测试连接”,测试数据源是否可以和EDS进行正常的连通。

    • 若测试结果为“测试连接成功”,则继续下一步。
    • 若测试结果为“测试连接失败”,则检查数据源状态和数据源连接参数配置,然后单击“测试连接”,直到连接成功为止。

  4. 测试成功后,单击“提交”,返回数据源列表界面。

相关文档