更新时间:2023-03-09 GMT+08:00
概述
DLI支持原生Spark的DataSource能力,并在其基础上进行了扩展,能够通过SQL语句或者Spark作业访问其他数据存储服务并导入、查询、分析处理其中的数据,目前支持的DLI跨源访问服务有:表格存储服务CloudTable,云搜索服务CSS,分布式缓存服务DCS,文档数据库服务DDS,数据仓库服务GaussDB(DWS),MapReduce服务MRS,云数据库RDS等。使用DLI的跨源能力,需要先创建跨源连接。
管理控制台界面具体操作请参考《数据湖探索用户指南》。
使用Spark作业跨源访问数据源支持使用scala,pyspark和java三种语言进行开发。
- 云搜索服务CSS相关介绍请参考《云搜索服务产品介绍》。
- 分布式缓存服务DCS相关介绍请参考《分布式缓存服务产品介绍》。
- 文档数据库服务DDS相关介绍请参考《文档数据库服务产品介绍》。
- 数据仓库服务GaussDB(DWS)相关介绍请参考《数据仓库服务产品介绍》。
- MapReduce服务MRS相关介绍请参考《MapReduce服务产品介绍》。
- 云数据库RDS相关介绍请参考《云数据库服务产品介绍》。
父主题: 使用Spark作业跨源访问数据源