OBS连接
介绍
通过OBS连接,可以对对象存储服务(Object Storage Service,简称OBS)抽取或加载文件,支持CSV、JSON和二进制格式。
连接样例
本示例为连接样例消息体。在实际使用中,AK(accessKey)和SK(securityKey)建议在配置文件或者环境变量中密文存放,使用时解密,确保安全。
{ "links": [ { "link-config-values": { "configs": [ { "inputs": [ { "name": "linkConfig.storageType", "value": "OBS" }, { "name": "linkConfig.obsBucketType", "value": "PFS" }, { "name": "linkConfig.server", "value": "10.121.16.183" }, { "name": "linkConfig.port", "value": "443" }, { "name":"linkConfig.accessKey", "value": "<YOUR AK>" }, { "name":"linkConfig.securityKey", "value":"<YOUR SK>" } ], "name": "linkConfig" } ] }, "name": "obs_link", "connector-name": "obs-connector" } ] }
连接参数
参数 |
是否必选 |
类型 |
说明 |
---|---|---|---|
linkConfig.storageType |
是 |
String |
对象存储的类型。 |
linkConfig.obsBucketType |
否 |
String |
OBS桶类型。
说明:
桶类型分为对象桶和并行文件系统,对象桶过滤文件会比较慢,建议客户使用并行文件桶。 |
linkConfig.server |
是 |
String |
OBS服务器的终端节点(Endpoint)。 |
linkConfig.port |
是 |
String |
数据传输协议端口,https是443,http是80。 |
linkConfig.accessKey |
是 |
String |
访问标识(AK)。建议在配置文件或者环境变量中密文存放,使用时解密,确保安全。 |
linkConfig.securityKey |
是 |
String |
密钥(SK)。建议在配置文件或者环境变量中密文存放,使用时解密,确保安全。 |