更新时间:2024-05-17 GMT+08:00
分享

步骤一:新建数据接入

本节介绍如何新建数据接入。

前提条件

需要具备AppStage指标开发者或运营管理员权限,权限申请操作请参见申请权限

新建数据源

  1. 登录AppStage业务控制台
  2. 在快捷入口选择“运营中心”,进入运营中心控制台。
  3. 在左侧导航栏选择“数据管理 > 数据源管理”,进入数据源页面。
  4. 单击“新建数据源”,进入新建数据源页面。
  5. 配置数据源基础信息,参数说明如表1所示。

    表1 基础配置

    参数

    说明

    数据源名称

    必填。数据源的名称或标识符。

    长度不超过20字符。

    数据源类型

    必填。数据源的类型。

    • OBS数据源
    • MySql数据源

    OBS终端节点

    OBS(Object Storage Service)的终端节点(Endpoint),用于连接到OBS服务并访问存储在OBS中的数据。

    仅当“数据源类型”为“OBS数据源”时,该参数为必填参数。

    说明:

    OBS终端节点的获取方法如下:

    1. 获取已授予OBS桶读写权限的账号。对账号授予桶的读写权限的方法,请参见对其他账号授予桶的读写权限
    2. 登录控制台,选择“存储 > 对象存储服务 OBS”,进入OBS控制台。
    3. 鼠标移动到指定桶所在行,在弹出的基本信息中,“Endpoint”参数值即为OBS终端节点。

    端口号

    必填。用来标识一个网络设备上的应用程序或服务,以便其他设备可以通过端口号来访问这个应用程序或服务。

    • 当“数据源类型”为“OBS数据源”时,该参数默认值为443。
    • 当“数据源类型”为“MySql数据源”时,该参数一般为3306。

    访问标识(AK)

    Access Key,是一种身份验证凭证,用于标识访问者的身份。访问者需要提供正确的AK才能访问数据源。

    仅当“数据源类型”为“OBS数据源”时,该参数为必填参数。

    秘钥(SK)

    Secret Key,与AK配对使用,用于加密和解密访问请求和响应。只有持有正确的AK和SK才能访问数据源。

    仅当“数据源类型”为“OBS数据源”时,该参数为必填参数。

    服务器地址

    需要连接的服务器的IP地址,用于访问服务器的位置。

    仅当“数据源类型”为“MySql数据源”时,该参数为必填参数。

    数据库名称

    用于唯一标识数据库的名称。

    仅当“数据源类型”为“MySql数据源”时,该参数为必填参数。

    用户名

    连接到服务器所需的用户名,用于验证身份和授权访问权限。

    仅当“数据源类型”为“MySql数据源”时,该参数为必填参数。

    密码

    连接到服务器所需的密码,用于验证身份和授权访问权限。

    仅当“数据源类型”为“MySql数据源”时,该参数为必填参数。

  6. 配置完成后,单击“测试连接”

    为保证配置成功,推荐测试连接。如果测试连接不通,说明数据源配置有问题,需重新配置。

  7. 测试连接提示连接成功后,单击“保存”

OBS接入

  1. 登录AppStage业务控制台
  2. 在快捷入口选择“运营中心”,进入运营中心控制台。
  3. 在左侧导航栏选择“数据管理 > 通用数据接入”,进入通用数据接入页面。
  4. 单击“新建数据接入 > OBS接入”,进入新建数据接入页面。
  5. 配置数据接入基础信息和任务信息,参数说明如表2表3所示。

    表2 基础信息

    参数

    说明

    数据接入名称

    必填。数据的名称或标识符。

    长度不小于3,且不大于20。

    数据源

    必填。参数枚举值在“数据源”页面配置。

    OBS数据路径

    必填。数据在OBS桶中的路径。当配置“数据源”后,该参数显示。

    说明:
    • OBS数据路径可选择文件夹与文件。如果选择文件夹要确保该文件夹下有csv或json格式的文件。
    • OBS数据路径中,如果同个文件夹里包含多个文件,请确保其文件格式一致。
    • OBS数据路径中,只能包含中文、英文、数字、下划线。

    数据格式

    必填。数据的格式。

    • JSON:表示扩展名为.json的文件。
    • CSV:表示扩展名为.csv的文件。
      说明:
      • CSV文件支持UTF-8格式。
      • CSV文件不能包含pt_d字段,需要包含时间格式的字段。
    表3 任务配置

    参数

    说明

    任务类型

    指定配置的任务类型。

    • 周期性任务
    • 一次性任务

    是否存在历史数据

    根据实际情况选择“是”或“否”。周期性任务数据不会导入以前的数据,如果需要查看以前的数据,该参数需配置为“是”。

    仅当“任务类型”为“周期性任务”时,该参数为必填参数。

    运行周期

    指定配置任务的运行周期。仅当“任务类型”为“周期性任务”时,该参数为必填参数。

    默认值:天

  6. 配置完成后,单击“下一步”
  7. 在数据表结构页面,选择“分区字段”。

    选择时间字段为分区字段。

  8. 请校验数据表结构中的字段类型,如果不匹配可能会导致后续的数据建模及分析出现异常或错误。

    数据表结构中的“字段名”只能包含字母、数字、下划线。

  9. 校验数据表结构完成后,单击“保存并启用”
分享:

    相关文档

    相关产品