更新时间:2022-12-14 GMT+08:00

配置共部署Hive数据源

操作场景

本章节指导用户在HSConsole界面配置与HetuEngine在一个Hadoop集群的Hive类型数据源。

HetuEngine目前支持对接传统数据格式数据源类型包括:avro、text、rctext、binary、orc、parquet、sequencefile。

前提条件

已创建HetuEngine计算实例。

HetuEngine服务在安装时已经将共部署的Hive数据源默认实现对接,数据源名称为“hive”,不可删除,部分默认配置不可修改,不可修改的配置发生更新时,重启HetuEngine服务可以自动同步。

操作步骤

  1. 使用HetuEngine管理员用户登录Manager,选择“集群 > 服务 > HetuEngine”,进入HetuEngine服务页面。
  2. 在“概览”页签下的“基本信息”区域,单击“HSConsole WebUI”后的链接,进入HSConsole界面。
  3. 单击“数据源”,在hive数据源所在行的“操作”列下单击“编辑”,在页面内修改配置,可修改配置如下表。

    参数

    描述

    取值样例

    描述

    数据源的描述信息。

    只能包含汉字、英文字母、数字、中英文逗号、中英文句号、下划线(_)、空格和换行符。

    -

    开启数据源鉴权

    是否同时使用Hive数据源的权限策略进行鉴权。

    HetuEngine服务Ranger不启用时必须选“是”,Ranger启用后选“否”。

    Metastore URL

    该数据源客户端“hive-site.xml”中“hive.metastore.uris”参数值。当Hive的MetaStore的实例发生变更时,需要手动更新。

    thrift://192.168.1.1:21088,thrift://192.168.1.2:21088

    是否开启连接池

    访问hive metastore时是否开启连接池。默认“是”。

    最大连接数

    访问hive metastore时连接池的最大连接数。

    50(取值范围0~200)

  4. (可选)若用户需添加“自定义配置”,可参考6.g配置完成后单击“确定”保存配置。