步骤一:新建数据接入
本节介绍如何新建数据接入。
前提条件
需要具备AppStage指标开发者或运营管理员权限,权限申请操作请参见申请权限。
新建数据源
- 登录AppStage业务控制台。
- 在快捷入口选择“运营中心”,进入运营中心控制台。
- 在左侧导航栏选择“数据管理 > 数据源管理”,进入数据源页面。
- 单击“新建数据源”,进入新建数据源页面。
- 配置数据源基础信息,参数说明如表1所示。
表1 基础配置 参数
说明
数据源名称
必填。数据源的名称或标识符。
长度不超过20字符。
数据源类型
必填。数据源的类型。
- OBS数据源
- MySql数据源
OBS终端节点
OBS(Object Storage Service)的终端节点(Endpoint),用于连接到OBS服务并访问存储在OBS中的数据。
仅当“数据源类型”为“OBS数据源”时,该参数为必填参数。
说明:OBS终端节点的获取方法如下:
- 获取已授予OBS桶读写权限的账号。对账号授予桶的读写权限的方法,请参见对其他账号授予桶的读写权限。
- 登录控制台,选择“存储 > 对象存储服务 OBS”,进入OBS控制台。
- 鼠标移动到指定桶所在行,在弹出的基本信息中,“Endpoint”参数值即为OBS终端节点。
端口号
必填。用来标识一个网络设备上的应用程序或服务,以便其他设备可以通过端口号来访问这个应用程序或服务。
- 当“数据源类型”为“OBS数据源”时,该参数默认值为443。
- 当“数据源类型”为“MySql数据源”时,该参数一般为3306。
访问标识(AK)
Access Key,是一种身份验证凭证,用于标识访问者的身份。访问者需要提供正确的AK才能访问数据源。
仅当“数据源类型”为“OBS数据源”时,该参数为必填参数。
秘钥(SK)
Secret Key,与AK配对使用,用于加密和解密访问请求和响应。只有持有正确的AK和SK才能访问数据源。
仅当“数据源类型”为“OBS数据源”时,该参数为必填参数。
服务器地址
需要连接的服务器的IP地址,用于访问服务器的位置。
仅当“数据源类型”为“MySql数据源”时,该参数为必填参数。
数据库名称
用于唯一标识数据库的名称。
仅当“数据源类型”为“MySql数据源”时,该参数为必填参数。
用户名
连接到服务器所需的用户名,用于验证身份和授权访问权限。
仅当“数据源类型”为“MySql数据源”时,该参数为必填参数。
密码
连接到服务器所需的密码,用于验证身份和授权访问权限。
仅当“数据源类型”为“MySql数据源”时,该参数为必填参数。
- 配置完成后,单击“测试连接”。
为保证配置成功,推荐测试连接。如果测试连接不通,说明数据源配置有问题,需重新配置。
- 测试连接提示连接成功后,单击“保存”。
OBS接入
- 登录AppStage业务控制台。
- 在快捷入口选择“运营中心”,进入运营中心控制台。
- 在左侧导航栏选择“数据管理 > 通用数据接入”,进入通用数据接入页面。
- 单击“新建数据接入 > OBS接入”,进入新建数据接入页面。
- 配置数据接入基础信息和任务信息,参数说明如表2和表3所示。
表2 基础信息 参数
说明
数据接入名称
必填。数据的名称或标识符。
长度不小于3,且不大于20。
数据源
必填。参数枚举值在“数据源”页面配置。
OBS数据路径
必填。数据在OBS桶中的路径。当配置“数据源”后,该参数显示。
说明:- OBS数据路径可选择文件夹与文件。如果选择文件夹要确保该文件夹下有csv或json格式的文件。
- OBS数据路径中,如果同个文件夹里包含多个文件,请确保其文件格式一致。
- OBS数据路径中,只能包含中文、英文、数字、下划线。
数据格式
必填。数据的格式。
- JSON:表示扩展名为.json的文件。
- CSV:表示扩展名为.csv的文件。
说明:
- CSV文件支持UTF-8格式。
- CSV文件不能包含pt_d字段,需要包含时间格式的字段。
- 配置完成后,单击“下一步”。
- 在数据表结构页面,选择“分区字段”。
选择时间字段为分区字段。
- 请校验数据表结构中的字段类型,如果不匹配可能会导致后续的数据建模及分析出现异常或错误。
数据表结构中的“字段名”只能包含字母、数字、下划线。
- 校验数据表结构完成后,单击“保存并启用”。