通过数据开发实现数据增量迁移 DataArts Studio 服务的DLF组件提供了一站式的大数据协同开发平台，借助DLF的在线脚本编辑、周期调度 CDM 的迁移作业，也可以实现增量数据迁移。 这里以DWS导入到OBS为例，介绍DLF配合CDM实现增量迁移的流程： 获取CDM作业的JSON

查看更多 →

数据开发API（V2）概览 表1 数据开发API（V2）类型 类型 说明 作业开发 作业开发类型接口。 作业开发 表2 作业开发 API 说明 API流量限制（次/s） 用户流量限制（次/s） 创建补数据实例 创建一个补数据实例。 100 10 查询补数据实例 查询补数据实例列表，支持分页查询。

查看更多 →

数据开发API（V1）概览 表1 数据开发API（V1）类型 类型 说明 连接管理（待下线） 连接管理类型接口。 说明： 连接管理能力由管理中心统一提供，相关接口已不再维护，推荐使用管理中心API进行连接管理。 脚本开发 脚本开发类型接口。 资源管理 资源管理类型接口。 作业开发

查看更多 →

调用数据开发API报错Unknown Exception？ 问题描述 调用数据开发API报错Unknown Exception。 解决方案 DataArts Studio是项目级服务， 获取Token 的scope要选择project级别。 父主题： 数据开发

查看更多 →

GaussDB (DWS)数据开发SQL入门操作 本节主要介绍GaussDB(DWS)数据库的一些SQL基本操作。 创建、查看和删除数据库 使用CREATE DATABASE语句创建数据库。 1 CREATE DATABASE test_db ENCODING 'UTF8' template

查看更多 →

数据服务开发 数据服务共享平台（DSP）数据服务开发可分为在线开发和离线开发两种。离线开发是只通过Studio进行数据模型开发和Web服务的开发，离线开发的模型只需通过平台部署即可，此处不再赘述。本节内容主要是面向在线开发。 实时数据服务 单表服务 通过平台数据资源目录，可以关联

查看更多 →

迁移开发数据 数据导出 数据导入 通过配置数据导入模板，进行数据导入 父主题： 系统管理

查看更多 →

开发并管理数据 在监控服务创建数据表 将接入数据导流至数据表中 将数据汇聚至MPPDB表 根据表或任务类型查看数据血缘 父主题： 使用监控服务进行资源及业务监控

查看更多 →

在DataArts Studio控制台首页，选择对应工作空间的“数据开发”模块，进入数据开发页面。 在数据开发主界面的左侧导航栏，选择“数据开发 > 作业开发”。 在作业目录中，双击作业名称，进入作业开发页面。 在作业开发页面，单击画布右侧“作业基本信息”页签，展开配置页面，配置作业实例超时时间。

查看更多 →

开发数据预处理作业 数据预处理通常被用于评估/训练作业场景。本文以使用训练数据训练预处理作业，然后再将预处理方法应用于评估/预测数据为例进行说明。 训练数据预处理作业 评估/预测数据预处理 前提条件 已提前准备好训练数据，和评估/预测数据。 数据预处理作业选择的结构化数据集（包括

查看更多 →

CDM作业改名后，在数据开发中如何同步？ 问题描述 CDM作业改名后，在数据开发中不能同步。 解决方案 CDM作业改名后，需要在数据开发作业的CDM节点属性中，重新选择改名后的CDM作业名称。 父主题： 数据开发

查看更多 →

false表示关闭细粒度认证。 fgac_type 否 String 细粒度认证类型，开启细粒度认证时才生效。"0"表示开发态细粒度认证，支持数据开发细粒度脚本运行、作业测试运行，"1"表示调度态细粒度认证，支持数据开发细粒度脚本运行、作业测试运行、作业执行调度。 响应参数 状态码： 200 表5 响应Body参数

查看更多 →

开发数据服务API 购买并管理专享版集群 新建数据服务审核人 创建API 调试API 发布API 管理API 编排API 配置API调用流控策略 授权API调用 父主题： 数据服务

查看更多 →

调用数据开发接口报错“Workspace does not exists”怎么处理？ 问题描述 调用数据开发接口，报错“Workspace does not exists”。 解决方案 代码的request请求的header要添加项目Id，即header.add("X-Project-Id"，项目Id)。

查看更多 →

数据开发节点运行中报TOKEN不合法？ 问题描述 数据开发节点运行中报TOKEN不合法。 解决方案 请确认当前用户在IAM的权限管理中权限是否有变更、是否退出用户组，或者用户所在的用户组权限策略是否有变更？ 如果有变更，请重新登录即可解决。 父主题： 数据开发

查看更多 →

细粒度认证类型，开启细粒度认证时才生效。"0"表示开发态细粒度认证，支持数据开发细粒度脚本运行、作业测试运行，"1"表示调度态细粒度认证，支持数据开发细粒度脚本运行、作业测试运行、作业执行调度。 fgac_conn_status String 数据源连通性测试状态： UNKNOWN - 连通性未测试

查看更多 →

测试数据开发连接细粒度连通性 功能介绍 测试数据开发连接细粒度连通性。 调用方法 请参见如何调用API。 URI POST /v1/{project_id}/security/fgac/dlf/datawarehouses/{dw_id} 表1 路径参数 参数 是否必选 参数类型

查看更多 →

数据集成开发指导 开发说明 连接器RESTful接口规范 自定义数据源开发示例（定时任务） 自定义数据源开发示例（实时任务）

查看更多 →

Doris数据表开发规则 提前在Doris中创建表 Flink作业在Doris中找不到对应表会报错，所以需要提前在Doris中创建好对应的表。 Doris作为Sink表时需开启CheckPoint Flink作业在触发CheckPoint时才会往Doris表中写数据。 父主题： Doris数据表开发规范

查看更多 →

HBase数据表开发建议 客户端提交作业时通过with属性添加HBase配置信息 Flink客户端提交作业，如SQL client提交，在建表语句中添加如下配置： 表1 Flink作业with属性 配置 说明 'properties.hbase.rpc.protection' =

查看更多 →

数据开发创建数据连接，为什么选不到指定的周边资源？ 可能原因 数据开发创建数据连接，选不到指定的周边资源，可能是由于不在同一个Region下。 解决方案 请确认当前DataArts Studio实例与周边资源在同一个Region且在同一个IAM项目下。如果账户开通企业项目，则还需在同一个企业项目下。

查看更多 →