Spark作业访问MySQL数据库的方案 通过 DLI Spark作业访问MySQL数据库中的数据有如下两种方案： 方案1：在DLI中创建队列，队列计费模式为包年/包月队列或按需专属，创建增强型跨源连接，再通过跨源表读取MySQL数据库中的数据，该方案需要用户自行编写java代码或scala代码。

查看更多 →

Agent ID Agent的ID，由系统自动生成。 安装节点类型 安装节点的类型，包括“数据库端”或“应用端”。 安装节点IP 安装Agent的节点的IP地址。 操作系统 安装Agent运行的操作系统。 审计网卡名称 安装节点的网卡名称。 CPU阈值(%) 安装节点的CPU阈值，缺省值为“80”。

查看更多 →

aegg包所在的OBS路径。 分组设置和分组名称根据情况选择。 单击“确定”完成程序包上传。 在报错的Spark作业编辑页面，“依赖python文件”处选择已上传的egg程序包，重新运行Spark作业。 pyspark作业对接MySQL，需要创建跨源链接，打通DLI和RDS之间的网络。

查看更多 →

标任务的执行进度和结果。 图2 定时任务 您可以通过实例名称/ID确定目标任务，或通过右上角的搜索框输入实例ID来确定目标任务，查看任务的创建时间和变更时间段。 您可以通过在上方搜索框输入实例ID或任务状态来确定目标任务，查看任务的创建时间和变更时间段。 任务状态：执行中、完成、失败、取消、待执行、待授权

查看更多 →

查询慢日志统计信息 功能介绍 查询实例慢日志的统计数据。 调用接口前，您需要了解API 认证鉴权。 调试 您可以在 API Explorer 中调试该接口。 接口约束 该接口仅支持MySQL和PostgreSQL数据库引擎。 URI URI格式 POST /v3.1/{project

查看更多 →

同步对象中是否存在包含bytea、text类型字段的表 PostgreSQL为源同步场景 表1 同步对象中是否存在包含bytea、text类型字段的表 预检查项 同步对象中是否存在包含bytea、text类型字段的表。 描述 bytea、text类型的字段在同步过程中可能会导致DRS任务OOM。

查看更多 →

t String 转换后的SQL语句。 unsupported_items Array of 表5 objects 不支持SQL语句转换的详情。 表5 UnSupportedItem 参数 参数类型 描述 reason String SQL语句不支持转换的原因。 suggestion

查看更多 →

如何查看 GaussDB (for MySQL)数据库的连接情况 您可以通过以下任意一种方式查看GaussDB(for MySQL)数据库的连接情况： 在GaussDB(for MySQL)实例上以管理员账户root执行以下命令，查看当前实例上正在运行的线程。 show full processlist;

查看更多 →

如何查看GaussDB(for MySQL)数据库的死锁日志 数据库的死锁日志不会记录在错误日志中，您可以通过数据管理服务（Data Admin Service，简称DAS）这款可视化的专业数据库管理工具，快速执行SQL语句查看。 操作步骤 登录管理控制台。 单击管理控制台左上角的，选择区域和项目。 在页面左上角单击，选择“数据库

查看更多 →

可选参数，指定每次请求获取的行数，根据数据源端和作业数据规模的大小配置该参数。如果配置过大或过小，可能影响作业的时长。默认1000。 单次提交行数 否 指定每次批量提交的行数，根据数据目的端和作业数据规模的大小配置该参数。如果配置过大或过小，可能影响作业的时长。默认10000。 单次写入行数

查看更多 →

workspace 是 String 工作空间ID，获取方法请参见实例ID和工作空间ID。 X-Project-Id 否 String 项目ID，获取方法请参见项目ID和账号ID。 多project场景采用AK/SK认证的接口请求，则该字段必选。 Content-Type 否 String 默认值

查看更多 →

函数计费中的调用次数，是某一账号下在不同region的所有函数的调用次数总和吗？ 是的，每个region都有一套函数，如果是同一个账号在不同的region都有函数，则函数计费中的调用次数为调用次数总和。 父主题： 其他问题

查看更多 →

--check-column 增量判断的字段 --incremental append或lastmodified 增量导入参数 append：追加，比如对大于last-value指定的值之后的记录进行追加导入。 lastmodified：最后的修改时间，追加last-value指定的日期之后的记录。 --last-value

查看更多 →

默认值为“READ_UNCOMMITTED”。 注意事项 创建RDS关联表时，不需要指定关联表的Schema。DLI会自动获取RDS中对应参数"dbtable"中的表的Schema。 示例 访问MySQL 1 2 3 4 5 6 7 CREATE TABLE IF NOT EXISTS dli_to_rds

查看更多 →

封装字段 此重构允许您限制类字段的可见性，并提供用于访问它们的getter和setter方法。 执行重构 在代码编辑器中，将光标放置在要封装字段的声明上。 在主菜单或编辑器上下文菜单中，选择Refactor>Encapsulate Fields。 在打开的Encapsulate Fields对话框中，提供重构选项。

查看更多 →

在左侧导航栏选择“字段授权 > 添加字段”，参数说明如表1所示，编辑完成后单击“确定”。 表1 参数说明 参数 说明 字段编码 选填，需要添加的字段编码，最大不超过64个字符，要求输入字母数字的组合编码，保存后不可再次编辑。 字段名称 必填，需要添加的字段名称，最大不超过15个字符，支持汉字、字母、数字、特殊字符。

查看更多 →

型和VARCHAR(n)是同一数据类型的不同表达形式。 10MB VARCHAR2(n) 变长字符串，n描述了可以存储的最大字节长度，此数据类型是为兼容Oracle类型新增的，行为和VARCHAR(n)一致。 10MB NVARCHAR2(n) 变长字符串，n描述了可以存储的最大字节长度。

查看更多 →

冻结字段 使用说明 冻结当前表单中的列，冻结后支持解冻。 操作步骤 参考登录零代码工作台中操作，登录AstroZero零代码工作台。 在全部应用中，单击对应的应用。 在表单页面，单击待冻结字段后的，选择“冻结”。 设置后，该列及该列前的所有列，均会被冻结。 单击已冻结列后的，选择“解冻”，可解冻已冻结的列。

查看更多 →

字段类型 在“框选识别区”页面，可以给每个字段指定字段类型来提高识别准确率，或是将 文字识别 结果处理成业务需要的格式。勾选字段类型后，后台会对文字识别结果进行相应的处理后再输出。每个识别区可选择多个字段类型，多个字段类型会按照勾选顺序执行。自定义OCR控制台提供了默认字段类型和自定义字段类型两种功能。

查看更多 →

字段设计 选择数据类型 在字段设计时，基于查询效率的考虑，一般需要遵循以下原则： 尽量使用高效数据类型。 选择数值类型时，在满足业务精度的情况下，选择数据类型的优先级从高到低依次为整数、浮点数、NUMERIC。 当多个表存在逻辑关系时，表示同一含义的字段应该使用相同的数据类型。

查看更多 →

字段设计 选择数据类型 在字段设计时，基于查询效率的考虑，一般需要遵循以下原则： 尽量使用高效数据类型。 选择数值类型时，在满足业务精度的情况下，选择数据类型的优先级从高到低依次为整数、浮点数、NUMERIC。 当多个表存在逻辑关系时，表示同一含义的字段应该使用相同的数据类型。

查看更多 →