更新时间:2024-08-16 GMT+08:00

管理Loader算子的字段配置信息

操作场景

该任务指导用户在创建或编辑Loader作业时关联、导入或导出算子的字段配置信息。

  • 关联操作

    将输入算子的字段配置信息关联到输出算子中。

  • 编辑操作

    编辑算子配置参数中的字段信息。

  • 导入操作

    通过算子导出文件或算子模板文件将字段配置信息导入到算子中。

  • 导出操作

    将算子的字段配置信息以json文件导出保存到本地。

前提条件

获取登录“Loader WebUI”的账户和密码。

操作步骤

  • 关联操作
  1. 登录“Loader WebUI”界面。

    1. 登录FusionInsight Manager系统,具体请参见访问集群Manager
    2. 选择“集群 > 服务 > Loader”。
    3. 单击“LoaderServer(节点名称,主)”打开“Loader WebUI”界面。
      图1 Loader WebUI界面

  2. 编辑已有作业或者新建作业,进入“转换”界面。
  3. 双击指定的输入算子(例如CSV文件输入)进入编辑页面,在输入字段的参数表格添加相应配置信息。
  4. 双击指定的输出算子(例如文件输出)进入编辑页面,单击“关联”,并在弹出的“关联”对话框中勾选需要的字段信息。

    • 在输出算子的字段表格里面已存在名称的字段信息,不会在“关联”窗口显示。
    • 用户也可在“字段名”的列表中选择需要字段,相应配置信息会在输出字段的参数表格显示。

  5. 单击“确定”,选中字段信息将会在输出字段的参数表格显示。
  • 编辑操作
  1. 登录“Loader WebUI”界面。

    1. 登录FusionInsight Manager系统,具体请参见访问集群Manager
    2. 选择“集群 > 待操作集群名称 > 服务 > Loader”。
    3. 单击“LoaderServer(节点名称,主)”打开“Loader WebUI”界面。
      图2 Loader WebUI界面

  2. 编辑已有作业或者新建作业,进入“转换”界面。
  3. 双击指定算子(例如CSV文件输入)进入编辑页面,在输入字段的“表格编辑”页签单击添加按钮,根据算子的参数格式要求填写相应字段信息。
  4. 单击每行字段后的按钮可对字段进行上移、下移、下面插入一行以及删除等操作。

    单击“文本编辑”,可以直接以文本形式对字段列表进行编辑,不同字段属性直接使用英文逗号“,”进行分隔。

  5. 单击“确定”,保存字段信息。
  • 导入操作
  1. 登录“Loader WebUI”界面。

    1. 登录FusionInsight Manager系统,具体请参见访问集群Manager
    2. 选择“集群 > 待操作集群名称 > 服务 > Loader”。
    3. 单击“LoaderServer(节点名称,主)”打开“Loader WebUI”界面。
      图3 Loader WebUI界面

  2. 编辑已有作业或者新建作业,进入“转换”界面。
  3. 双击指定的算子进入编辑页面,在输入或输出字段的参数表格添加相应配置信息。单击“导入”
  4. 选择导入的类型。

    • 导出的文件

      通过算子导出的json文件导入字段的配置信息。

    • 指导的模板

      通过根据算子模板手动编写txt文件,将字段配置信息导入到算子中。

  5. 单击,选择上传文件对应路径。
  6. 单击“上传”,字段的配置信息将会导入到算子。
  • 导出操作
  1. 登录“Loader WebUI”界面。

    1. 登录FusionInsight Manager系统,具体请参见访问集群Manager
    2. 选择“集群 > 待操作集群名称 > 服务 > Loader”。
    3. 单击“LoaderServer(节点名称,主)”打开“Loader WebUI”界面。
      图4 Loader WebUI界面

  2. 编辑已有作业或者新建作业,进入“转换”界面。
  3. 双击指定的算子进入编辑页面,在输入或输出字段的参数表格添加相应配置信息,单击“导出”
  4. 选择导出的类型。

    • 所有

      所有的字段信息将以json文件格式导出保存到本地。

    • 指导字段

      在字段列表上勾选需要导出的字段以json文件格式导出保存到本地。

  5. 单击“确定”,完成导出操作。