更新时间:2022-12-14 GMT+08:00

配置数据源前必读

HetuEngine能够支持多种数据源的快速联合查询并提供可视化的数据源配置、管理页面,用户可通过HSConsole界面快速添加数据源。

当前版本HetuEngine支持对接的数据源如表1所示。

表1 HetuEngine对接数据源一览表

HetuEngine模式

数据源

数据源模式

支持对接的数据源版本

安全模式

Hive

安全模式

MRS 3.x、FusionInsight 6.5.1、本集群的Hive

HBase

MRS 3.x、FusionInsight 6.5.1

Elasticsearch

本集群的Elasticsearch

HetuEngine

MRS 3.x

GaussDB

GaussDB 200、GaussDB A 8.0.0

Hudi

MRS 3.1.1及以上

ClickHouse

MRS 3.1.1及以上

普通模式

Hive

普通模式

MRS 3.x、FusionInsight 6.5.1、本集群的Hive

HBase

MRS 3.x、FusionInsight 6.5.1

Elasticsearch

本集群的Elasticsearch

Hudi

MRS 3.1.1及以上

ClickHouse

MRS 3.1.1及以上

GaussDB

安全模式

GaussDB 200、GaussDB A 8.0.0

HetuEngine数据源的添加、配置、删除等操作支持动态生效,无须重启集群。

目前动态生效不支持关闭,数据源动态生效时间默认为60秒。如需修改动态生效时间,请参考创建HetuEngine计算实例3.e修改“coordinator.config.properties”“worker.config.properties”中的参数“catalog.scanner-interval”值为需要设定的动态生效时间,例如:

catalog.scanner-interval =120s
  • 数据源集群域名与HetuEngine集群域名不能相同,HetuEngine也不支持同时对接两个相同域名的数据源。
  • 数据源集群与HetuEngine集群节点网络互通。