更新时间:2024-09-27 GMT+08:00

FileSystem源表

功能描述

本节介绍FileSystem源表的定义,以及创建源表时使用的参数和示例代码。

前提条件

该场景作业需要建立增强型跨源连接,且用户可以根据实际所需设置相应安全组规则。

注意事项

  • 创建Flink OpenSource SQL作业时,在作业编辑界面的“运行参数”处,“Flink版本”需要选择“1.12”,勾选“保存作业日志”并设置保存作业日志的OBS桶,方便后续查看作业日志。
  • 数据类型的使用,请参考Format章节。

语法格式

1
2
3
4
5
6
7
create table dataGenSource(
   amount int
) with (
   'connector' = 'filesystem',
   'path' = 'obs://longyuan/source-files',
   'format' = 'csv'
);

参数说明

表1 参数说明

参数

是否必选

默认参数

数据类型

说明

connector

String

固定位filesystem。

path

String

OBS路径。

format

String

文件格式。

支持csv、parquet格式。

常见问题