配置数据源前必读
HetuEngine能够支持多种数据源的快速联合查询并提供可视化的数据源配置、管理页面,用户可通过HSConsole界面快速添加数据源。
当前版本HetuEngine支持对接的数据源如表1所示。
HetuEngine模式 |
数据源 |
数据源模式 |
支持对接的数据源版本 |
---|---|---|---|
安全模式 |
Hive |
安全模式 |
MRS 3.x、FusionInsight 6.5.1、本集群的Hive |
HBase |
MRS 3.x、FusionInsight 6.5.1 |
||
Elasticsearch |
本集群的Elasticsearch |
||
HetuEngine |
MRS 3.x |
||
GaussDB |
GaussDB 200、GaussDB A 8.0.0 |
||
Hudi |
MRS 3.1.1及以上 |
||
ClickHouse |
MRS 3.1.1及以上 |
||
普通模式 |
Hive |
普通模式 |
MRS 3.x、FusionInsight 6.5.1、本集群的Hive |
HBase |
MRS 3.x、FusionInsight 6.5.1 |
||
Elasticsearch |
本集群的Elasticsearch |
||
Hudi |
MRS 3.1.1及以上 |
||
ClickHouse |
MRS 3.1.1及以上 |
||
GaussDB |
安全模式 |
GaussDB 200、GaussDB A 8.0.0 |
HetuEngine数据源的添加、配置、删除等操作支持动态生效,无须重启集群。
目前动态生效不支持关闭,数据源动态生效时间默认为60秒。如需修改动态生效时间,请参考创建HetuEngine计算实例的3.e修改“coordinator.config.properties”和“worker.config.properties”中的参数“catalog.scanner-interval”值为需要设定的动态生效时间,例如:
catalog.scanner-interval =120s
- 数据源集群域名与HetuEngine集群域名不能相同,HetuEngine也不支持同时对接两个相同域名的数据源。
- 数据源集群与HetuEngine集群节点网络互通。