库级同步情况下，Binlog中权限类DDL除外，所有库内对象相关DDL将会同步至目标，常见的DDL有CREATE_TABLE，RENAME_TABLE等。 表级同步情况下，已选定的同步表相关在Binlog中DDL将全部同步，与同步表无关的对象DDL将不同步。常见的DDL有ADD_COL

查看更多 →

当前集群同一虚拟私有云和子网的RDS服务中的PostgresDB或MySQL数据库或云数据库 GaussDB (for MySQL)、也可以选择与当前集群同一虚拟私有云和子网的LakeFormation实例，元数据将存储于关联的数据库或LakeFormation实例中，不会随当前集群

查看更多 →

典型场景：从Hive导出数据到关系型数据库 操作场景 该任务指导用户使用Loader将数据从Hive导出到关系型数据库。 前提条件 创建或获取该任务中创建Loader作业的业务用户和密码。 确保用户已授权访问作业执行时操作的Hive表。 获取关系型数据库使用的用户和密码。 检查磁

查看更多 →

GaussDB(for MySQL)能够保存多长时间的备份 云数据库GaussDB(for MySQL)实例的自动备份有效期根据用户设置的备份天数而定。详情请参见设置自动备份策略。 手动备份没有时间限制，用户可根据需要进行手动删除。详情请参见删除手动备份。 备份存储在 对象存储服务 上，不占用您购买的数据库空间。

查看更多 →

当前集群同一虚拟私有云和子网的RDS服务中的PostgresDB或MySQL数据库或云数据库GaussDB(for MySQL)、也可以选择与当前集群同一虚拟私有云和子网的LakeFormation实例，元数据将存储于关联的数据库或LakeFormation实例中，不会随当前集群

查看更多 →

成目标端数据库的初始化后，增量同步阶段通过解析日志等技术，将源端和目标端数据保持数据持续一致。 全量： 该模式为数据库一次性同步，适用于可中断业务的数据库同步场景，全量同步将非系统数据库的全部数据库对象和数据一次性同步至目标端数据库。 指定公网IP 网络类型选择“公网网络”时可见

查看更多 →

将GaussDB(for MySQL)同步到 CSS /ES 支持的源和目标数据库 表1 支持的数据库 源数据库 目标数据库 GaussDB(for MySQL)主备实例 ElasticSearch 5.5、6.2、6.5、7.1、7.6、7.9、7.10版本 使用建议 DRS任务启

查看更多 →

thriftServer.useHdfsCollect 是否将结果数据保存到HDFS中而不是内存中。 优点：由于查询结果保存在hdfs端，因此基本不会造成JD BCS erver的OOM。 缺点：速度慢。 true：保存至HDFS中 false：不使用该功能 须知： spark.sql

查看更多 →

thriftServer.useHdfsCollect 是否将结果数据保存到HDFS中而不是内存中。 优点：由于查询结果保存在hdfs端，因此基本不会造成JDB CS erver的OOM。 缺点：速度慢。 true：保存至HDFS中 false：不使用该功能 须知： spark.sql

查看更多 →

将Spark作业结果存储在MySQL数据库中，缺少pymysql模块，如何使用python脚本访问MySQL数据库？ 缺少pymysql模块，可以查看是否有对应的egg包，如果没有，在“程序包管理”页面上传pyFile。具体步骤参考如下： 将egg包上传到指定的OBS桶路径下。 登录 DLI 管理控制台，单击“数据管理

查看更多 →

CTS 如何长期保存事件文件——转储至OBS桶 云审计 服务仅保存近7天的事件，可以对追踪器增加OBS转储的相关配置，将事件同步、长期保存至OBS桶。具体操作请参考配置追踪器。

查看更多 →

列举接口是否支持保存结果到本地文件 obsutil工具本身的列举相关操作不支持直接将结果保存在本地文件，但是可以通过操作系统提供的重定向操作实现将列举结果从屏显的标准输出重定向到指定的本地结果文件中；以列举桶内对象为例： Windows操作系统（在命令行cmd下执行该重定向操作）

查看更多 →

志等技术，将源端和目标端数据保持数据持续一致。 说明： 选择“全量+增量”同步模式，增量同步可以在全量同步完成的基础上实现数据的持续同步，无需中断业务，实现同步过程中源业务和数据库继续对外提供访问。 “全量”： 该模式为数据库一次性同步，全量同步将源库数据一次性同步至目标端数据库。

查看更多 →

志等技术，将源端和目标端数据保持数据持续一致。 说明： 选择“全量+增量”同步模式，增量同步可以在全量同步完成的基础上实现数据的持续同步，无需中断业务，实现同步过程中源业务和数据库继续对外提供访问。 “全量”： 该模式为数据库一次性同步，全量同步将源库数据一次性同步至目标端数据库。

查看更多 →

间（单位ms），避免超时导致失败。 tinyInt1isBit=false或mysql.bool.type.transform=false：MySQL默认开启配置tinyInt1isBit=true，将TINYINT(1)当作BIT也就是Types.BOOLEAN来处理，会将1或

查看更多 →

间（单位ms），避免超时导致失败。 tinyInt1isBit=false或mysql.bool.type.transform=false：MySQL默认开启配置tinyInt1isBit=true，将TINYINT(1)当作BIT也就是Types.BOOLEAN来处理，会将1或

查看更多 →

“全量”： 该模式为数据库一次性同步，适用于可中断业务的数据库同步场景，全量同步将非系统数据库的全部数据库对象和数据一次性同步至目标端数据库。 “增量”： 增量同步通过解析日志等技术，将源端产生的增量数据同步至目标端。 指定公网IP 网络类型选择“公网网络”时可见，选择为DRS实例绑定

查看更多 →

“全量”： 该模式为数据库一次性同步，适用于可中断业务的数据库同步场景，全量同步将非系统数据库的全部数据库对象和数据一次性同步至目标端数据库。 “增量”： 增量同步通过解析日志等技术，将源端产生的增量数据同步至目标端。 指定公网IP 网络类型选择“公网网络”时可见，选择为DRS实例绑定

查看更多 →

创建FlinkServer作业写入数据至Hive表 本章节适用于 MRS 3.1.2及之后的版本。 操作场景 目前FlinkServer对接Hive使用对接metaStore的方式，所以需要Hive开启MetaStore功能。Hive可以作为source，sink和维表。 本示例以安全模式Kafka为例。

查看更多 →

保存parquet数据 概述 保存parquet格式的数据到本地文件系统。 输入 参数 子参数 参数说明 inputs dataframe inputs为字典类型，dataframe为pyspark中的DataFrame类型对象 输出 无 参数说明 参数 子参数 参数说明 output_file_path

查看更多 →

保存SQL模板 功能介绍 该接口用于存储指定的SQL语句，后续可以重复使用。 调试 您可以在 API Explorer 中调试该接口。 URI URI格式： POST /v1.0/{project_id}/sqls 参数说明 表1 URI参数说明 参数 是否必选 参数类型 描述 project_id

查看更多 →