更新时间:2024-08-30 GMT+08:00

分析数据

通过DLI直接对OBS数据进行贸易统计分析。

前提条件

DLI创建OBS外表,对OBS表数据存储格式有所要求:
  • 使用DataSource语法创建OBS表时,支持orc,parquet,json,csv,carbon,avro类型。
  • 使用Hive语法创建OBS表时,支持TEXTFILE, AVRO, ORC, SEQUENCEFILE, RCFILE, PARQUET, CARBON类型。

如果原始数据表存储格式不满足要求,您可以通过CDM将原始数据直接导入到DLI中进行分析,无需上传OBS。

通过DLI分析数据

  1. 进入数据湖探索DLI控制台,参考DLI用户指南中的创建数据库创建数据库。
  2. 参考创建OBS表创建OBS外表,包括贸易统计数据库、贸易详单信息表和基础信息表。
  3. 基于业务需求,在DLI控制台中开发相应的SQL脚本进行贸易统计分析。