配置Fine BI连接AI DataLake Spark进行数据查询和分析
Fine BI是一款智能可视化工具,专注于数据分析和可视化。它支持连接多种数据源,能够将复杂的数据转换为直观的图表和仪表板,快速获得数据洞察。
本节操作介绍Fine BI连接AI DataLake,以访问和分析AI DataLake中的数据的操作步骤。
操作前准备
- 环境要求:操作系统仅支持Windows 10,Windows 11版本x64位操作系统。
- 工具包:
- AI DataLake的JDBC驱动:aidatalake-spark-jdbc-x.x.x.jar。
- Fine BI安装包:Fine BI安装包。
步骤1:安装Fine BI并配置数据连接
- 下载并安装Fine BI
- 获取Fine BI安装包。
- 找到下载的Fine BI安装程序文件。
- 双击运行安装程序。
- 按照安装向导的指示进行操作,包括接受许可协议、选择安装类型(典型安装或自定义安装)、设置安装目录等。
- 配置Fine BI支持自定义驱动
- 配置Fine BI集成JDBC驱动
- 下载数据驱动。
单击aidatalake-spark-jdbc-x.x.x.jar获取JDBC驱动。
- 获取log4j相关jar包。
从Maven官方仓库下载三个log4j依赖包:
- log4j-api-2.xx.jar
- log4j-core-2.xx.jar
- log4j-slf4j-impl-2.xx.jar
- Fine BI集成AI DataLake驱动。
- 打开Fine BI。
- 单击“Data Connection”>“Data Connection Management”。
- 单击“Create”,在驱动列表中选择AI DataLake的JDBC驱动和log4j相关jar包。 图1 Fine BI安装数据连接驱动
- 下载数据驱动。
- 配置数据库连接
- 单击“Data Connection”>“Data Connection Management”。
- 单击“Create”,选择Other JDBC。 图2 选择Other JDBC
- 配置连接信息。 图3 配置连接信息
表1 Fine BI连接AI DataLake参数说明 参数名称
说明
Username
输入用于登录到服务器的用户名。本例填写华为云账号的AK。
获取AK和SK信息,请参见获取AKSK 。
Password
输入用于登录到服务器的密码。本例填写华为云账号的SK。
获取AK和SK信息,请参见获取AKSK 。
Encoding
用于指定Fine BI与目标数据库进行交互的方式。
本例选择:UTF-8。
Data Connection URL
JDBC连接的字符串。格式如下:
jdbc:aidatalakespark://{endpointName}/{ProjectID}?aidatalake.workspaceId={workspaceId}&lakeformation.instanceId={lakeformationInstanceId}&endpointname={AIDataLake Spark Endpoint}®ionName={regionName}&catalog={catalogName}&obs.endpoint={ObsEndPoint}&fineBIDialect=CustomSparkDialectJDBC连接的字符串中涉及的参数详情如下。
表2 JDBC连接的字符串参数说明 参数
说明
配置样例
endpointName
AI DataLake服务的Url。
终端节点即调用API的请求地址,不同服务不同区域的终端节点不同,您可以从地区和终端节点中查询服务的终端节点。
https://aidatalake-test.cn-north-7.myhuaweicloud.com
ProjectID
AI DataLake资源所在的项目ID。
鼠标悬浮在AI DataLake管理控制台页面右上角账号信息位置,单击“我的凭证”,在“项目列表”区域获取的目标项目ID信息。
0b33ea2a7e******4c009bb05076d
workspaceId
AI DataLake工作空间ID。
登录AI DataLake管理控制台,在“工作空间管理”页面找到目标工作空间ID。
spark
lakeformationInstanceId
LakeFormation实例ID。
获取方法请参见如何获取LakeFormation实例ID
ae6dd098-***-*****-c02***def36d
regionName
AI DataLake的区域名称和服务名称。
cn-north-7
catalogName
数据目录名称。
假设使用名称为lfcatalog的LakeFormation catalog时,配置如下:catalog=lfcatalog
ObsEndPoint
OBS的EndPoint。
获取方法请参见终端节点(Endpoint)和访问域名
-
- 单击“Save”。
步骤2:自定义SQL查询
- 单击“公共数据(Public Data)“> “新建数据集(Add Dataset)“>“ SQL数据集(SQL Dataset)”。 图4 打开数据连接
- 选择“数据连接(Data from Data Connection)”。
- 输入自定义的SQL查询语句即可开始分析数据。 图5 自定义的SQL查询语句