配置SparkSQL业务用户权限 操作场景 SparkSQL业务还可能需要关联使用其他组件，例如Spark on HBase需要HBase权限。以下介绍SparkSQL关联HBase服务的操作。 前提条件 完成Spark客户端的安装，例如安装目录为“/opt/client”。 获

查看更多 →

配置Spark SQL开启Adaptive Execution特性 配置场景 Spark SQL Adaptive Execution特性用于使Spark SQL在运行过程中，根据中间结果优化后续执行流程，提高整体执行效率。当前已实现的特性如下： 自动设置shuffle partition数。

查看更多 →

配置SQLServer源端参数 支持从云端的数据库服务导出数据。 这些非云服务的数据库，既可以是用户在本地数据中心自建的数据库，也可以是用户在E CS 上部署的，还可以是第三方云上的数据库服务。 表1 SQLServer作为源端时的作业参数 参数类型 参数名 说明 取值样例 基本参数

查看更多 →

配置以windows环境为例进行说明。 开启CDC。 使用S SMS 客户端连接到SQL Server数据库所在 服务器 ，以sa用户登录数据库。 其中，密码为数据库用户sa的密码，可向数据库管理员获取。 单击“新建查询”，选择您需要开启CDC的数据库。执行以下命令，开启SQL Server数据库CDC。

查看更多 →

discarded 例如，SparkSQL运行TPCDS 500G的测试时，使用默认配置出现错误。所以当数据量较大时需要适当的调整该参数。 配置参数 参数入口： 在Manager系统中，选择“集群 > 待操作集群的名称 > 服务 > Spark2x > 配置”，单击“全部配置”。在搜索框中输入参数名称。

查看更多 →

MySQL同步到DWS作业配置 支持的源端和目的端数据库版本 表1 支持的数据库版本 源端数据库 目的端数据库 MySQL数据库（5.6、5.7、8.x版本） DWS集群（8.1.3、8.2.0及以上版本（除DWS 3.0）） 数据库账号权限要求 在使用Migration进行同步

查看更多 →

导入前准备语句 执行任务之前率先执行的SQL语句。目前向导模式仅允许执行一条SQL语句。 create temp table 导入后完成语句 执行任务之后执行的SQL语句，目前仅允许执行一条SQL语句。 merge into 父主题： 配置作业目的端参数

查看更多 →

GaussDB (for MySQL)日志配置管理 GaussDB(for MySQL)的日志管理功能支持查看数据库级别的日志，包括数据库运行的错误信息，以及运行较慢的SQL查询语句，有助于您分析系统中存在的问题。 操作场景 配置访问日志后，GaussDB(for MySQL)实例新生成的日志记录会上传到云日志服务（Log

查看更多 →

开启Binlog。 使用命令行工具连接到MySQL数据库所在服务器，执行以下命令以root用户登录数据库。 mysql -uroot -ppassword 其中，password为数据库root用户的密码，可向数据库管理员获取。 执行以下命令，查询MySQL数据库是否开启了Binlog。 show

查看更多 →

discarded 例如，SparkSQL运行TPCDS 500G的测试时，使用默认配置出现错误。所以当数据量较大时需要适当的调整该参数。 配置参数 参数入口： 在Manager系统中，选择“集群 > 服务 > Spark2x > 配置”，单击“全部配置”。在搜索框中输入参数名称。 表1

查看更多 →

MySQL同步到Kafka作业配置 支持的源端和目的端数据库版本 表1 支持的数据库版本 源端数据库 目的端数据库 MySQL数据库（5.6、5.7、8.x版本） Kafka集群（2.7、3.x版本） 数据库账号权限要求 在使用Migration进行同步时，源端和目的端所使用的数

查看更多 →

基于SQL配置图表 配置oapdruid、oapclickhouse、oapmppdb、oapinfluxdb、oaptsdb数据源后，可以使用druid、clickhouse等数据源基于SQL配置图表，本章节介绍如何基于SQL配置图表并将图表添加至业务报表中。 前提条件 已完成对于数据源的数据开发。

查看更多 →

Spark SQL常用配置项说明 本章节为您介绍 DLI 批作业SQL语法的常用配置项。 表1 常用配置项 名称 默认值 描述 spark.sql.files.maxRecordsPerFile 0 要写入单个文件的最大记录数。如果该值为零或为负，则没有限制。 spark.sql.shuffle

查看更多 →

将Spark作业结果存储在MySQL数据库中，缺少pymysql模块，如何使用python脚本访问MySQL数据库？ 缺少pymysql模块，可以查看是否有对应的egg包，如果没有，在“程序包管理”页面上传pyFile。具体步骤参考如下： 将egg包上传到指定的OBS桶路径下。 登录DLI管理控制台，单击“数据管理

查看更多 →

/opt source gsql_env.sh 进入gsql的bin目录下，执行gsql命令进行数据库连接。 cd bin gsql -d gaussdb -h 数据库IP -p 8000 -U dbadmin -W 数据库用户密码 -r; 父主题： 数据库连接管理

查看更多 →

查看GaussDB(for MySQL)数据库代理监控指标 本章节介绍查看GaussDB(for MySQL)数据库代理监控指标的方法。 前提条件 GaussDB(for MySQL)实例正常运行。 GaussDB(for MySQL)实例已开启读写分离功能，详情请参见使用GaussDB(for

查看更多 →

重置GaussDB(for MySQL)数据库账号密码 操作场景 您可重置自己创建的数据库账号密码，安全考虑，请定期（如三个月或六个月）修改密码，防止出现密码被暴力破解等安全风险。 使用须知 处于变更中的实例，不可进行该操作。 重置密码后实例不会重启，权限不会发生变化。 重置密码

查看更多 →

GaussDB（MySQL兼容模式）数据库GUC参数 当使用MySQL兼容模式，可以设置GUC参数提高GaussDB的兼容性，迁移涉及的GUC参数和影响范围可参见表1 GaussDB（MySQL兼容模式）的GUC参数。 GaussDB数据库提供了许多运行参数，配置这些参数可以影响数据库系统的行

查看更多 →

MySQL数据库迁移后无法启动 问题描述 迁移后MySQL数据库无法正常启动或短暂启动后又退出。 问题分析 该问题是因为源端MySQL数据库没有停止服务，导致目的端数据库相关文件不匹配所引起的。 解决方案 适当时间，停止源端MySql数据库服务的所有业务，再重新同步一次。 父主题：

查看更多 →

管理数据库和用户（SQL Server） 查询SQL Server可用字符集 创建数据库 查询数据库列表 创建数据库用户 设置数据库账号密码 查询数据库用户列表 查询指定数据库的已授权用户 删除数据库用户 授权数据库账号 解除数据库账号权限 添加MSDTC 查询MSDTC的hosts信息

查看更多 →

图解云数据库 GaussDB(for MySQL)

查看更多 →