调试脚本 功能介绍 调试脚本，该接口是同步接口（同步接口是指调用后，会等待函数执行结束后，才返回结果）。满足输入参数条件后执行该脚本，会在控制台打印出debug日志和运行结果。 在脚本保存成功和输入参数正确的情况下，才可以成功执行该脚本。 URI POST AstroZero 域名

查看更多 →

建标注脚本，单击“创建不返回”，参照上述步骤继续创建标注脚本。 脚本管理相关操作 在标注脚本列表，还可以进行以下操作。 表1 脚本管理相关操作 任务 操作步骤 编辑标注脚本 单击操作栏内的“编辑”，即可修改标注脚本信息。 删除标注脚本 单击操作栏的“删除”，删除单个标注脚本。 勾

查看更多 →

Studio控制台首页，选择对应工作空间的“数据开发”模块，进入数据开发页面。 在数据开发主界面的左侧导航栏，选择“数据开发 > 脚本开发”。 在脚本目录中，双击已开发完成的脚本名称，进入脚本开发页面。 提交脚本后在脚本编辑器上方单击“解锁”，解除锁定，便于后续其他开发者对此脚本进行修改更新。 图2 解锁

查看更多 →

据开发页面。 在数据开发主界面的左侧导航栏，选择“数据开发 > 脚本开发”。 在脚本目录中选择需要复制的脚本，右键单击脚本名称，选择“拷贝另存为”。 图1 复制脚本 在弹出的“另存为”页面，配置如表1所示的参数。 表1 脚本目录参数 参数 说明 脚本名称 脚本的名称，只能包含字符

查看更多 →

创建脚本 功能介绍 创建作业脚本：自定义脚本 脚本有标签属性，表示是高危脚本。创建时候不需要对脚本进行是否是高危的二次校验。 进行租户隔离；北向接口创建的脚本，审批人字段不填写，默认不需要审批 约束条件： 脚本名称：同一租户下，脚本名称不能重复，最大字符64个字符，支持中文+字母+数字+下划线。

查看更多 →

删除脚本 功能介绍 此接口用以删除指定脚本。 调试 您可以在 API Explorer 中调试该接口，支持自动认证鉴权。 URI URI格式 DELETE /v1/{project_id}/scripts/{script_name} 参数说明 表1 URI参数说明 参数名 是否必选 参数类型

查看更多 →

最近一次修改脚本的时间。 操作 单击，可启用该脚本。 单击，可禁用该脚本。启用脚本后，服务编排、前端页面等才可调用该脚本。 单击，可删除脚本。当该按钮置灰时，表示不可删除。系统预置的脚本，不支持删除。 在脚本管理页签下，单击具体的脚本名称，可查看该脚本的详细信息。 表2 “脚本详情”页面说明

查看更多 →

自动订阅数据集 功能介绍 自动订阅和下载所在租户下的数据集，此接口为机机接口，需要管理token来调用。 URI URI格式 POST /softcomai/datalake/north/v1.0/subscription 参数说明 无。 请求 请求样例 POST https:/

查看更多 →

自动发布数据集 功能介绍 对请求中的数据集进行申请发布操作，申请发布后会提交给Data Owner角色用户进行审批，如果此数据集的dataFrom配置了自动发布，就会自动审批通过。 URI URI格式 PUT /softcomai/datalake/v1.0/dataSet/autoMgr/publish

查看更多 →

自动生成测试数据 在进行程序的功能测试时，通常需要在数据库中插入大量符合特定规则的测试数据。自动生成测试数据，可以高效的生成测试数据，根据生成规则可以很方便生成所需数据。 操作步骤 登录管理控制台。 单击管理控制台左上角的，选择区域和项目。 单击页面左上角的，选择“数据库 > 数据管理服务

查看更多 →

DSC支持迁移Teradata、MySQL数据库的对象有： Teradata、MySQL支持的通用对象：SQL模式，SQL查询 仅Teradata支持的对象：包含BTEQ和SQL_LANG脚本的Perl文件 迁移流程 DSC迁移sql脚本流程如下： 从Teradata或MySQL数据库导出待迁移的

查看更多 →

原因： Hudi表数据含有Decimal类型数据。 初始入库BULK_INSET方式会使用Spark内部parquet文件的写入类进行写入，Spark对不同精度的Decimal类型处理是不同的。 UPSERT操作时，Hudi使用Avro兼容的parquet文件写入类进行写入，这个和Spark的写入方式是不兼容的。

查看更多 →

写入更新数据时报错SchemaCompatabilityException 问题 数据写入时报错： org.apache.hudi.exception.SchemaCompatabilityException: Unable to validate the rewritten record

查看更多 →

原因： Hudi表数据含有Decimal类型数据。 初始入库BULK_INSET方式会使用Spark内部parquet文件的写入类进行写入，Spark对不同精度的Decimal类型处理是不同的。 UPSERT操作时，Hudi使用Avro兼容的parquet文件写入类进行写入，这个和Spark的写入方式是不兼容的。

查看更多 →

上限的char类型都将转换为TEXT数据类型。 MySQL不支持自动分区 建议配置“自动分区”解决该类问题 注释掉INTERVAL自动分区。 Oracle的float数据类型默认的最大精度为126，大于MySQL的53 建议配置“float数据类型”解决该类问题 将FLOAT类型转换为DOUBLE类型。

查看更多 →

数据库测试程序 执行测试程序，查看需要迁移的当前 服务器 资源消耗，模拟真实业务场景。 执行数据库压测脚本 使用MySQL命令登录数据库，并创建测试数据库“loadtest”，用 弹性云服务器 E CS 的私网IP替换命令中的【<mysql-ip>】命令如下： mysql -u root -h

查看更多 →

自动订阅数据集 功能介绍 自动订阅和下载所在租户下的数据集，此接口为机机接口，需要管理token来调用。 URI URI格式 POST /softcomai/datalake/north/v1.0/subscription 参数说明 无。 请求 请求样例 POST https:/

查看更多 →

自动发布数据集 功能介绍 对请求中的数据集进行申请发布操作，申请发布后会提交给Data Owner角色用户进行审批，如果此数据集的dataFrom配置了自动发布，就会自动审批通过。 URI URI格式 PUT /softcomai/datalake/v1.0/dataSet/autoMgr/publish

查看更多 →

自动生成测试数据 在进行程序的功能测试时，通常需要在数据库中插入大量符合特定规则的测试数据。自动生成测试数据，可高效的生成测试数据，根据生成规则可以很方便生成所需数据。 操作步骤 登录管理控制台。 单击管理控制台左上角的，选择区域和项目。 单击页面左上角的，选择“数据库 > 数据管理服务

查看更多 →

取值样例 名称 输入便于记忆和区分的连接名称。 mysqllink 数据库服务器 MySQL数据库的IP地址或域名。 - 端口 MySQL数据库的端口。 3306 数据库名称 MySQL数据库的名称。 sqoop 用户名 拥有MySQL数据库的读、写和删除权限的用户。 admin 密码

查看更多 →

从Kafka读取数据写入到RDS 从Kafka读取数据写入到DWS 从Kafka读取数据写入到Elasticsearch 从MySQL CDC源表读取数据写入到DWS 从PostgreSQL CDC源表读取数据写入到DWS Flink作业高可靠推荐配置指导（异常自动重启）

查看更多 →