配置Spark SQL开启Adaptive Execution特性 配置场景 Spark SQL Adaptive Execution特性用于使Spark SQL在运行过程中，根据中间结果优化后续执行流程，提高整体执行效率。当前已实现的特性如下： 自动设置shuffle partition数。

查看更多 →

配置SparkSQL业务用户权限 操作场景 SparkSQL业务还可能需要关联使用其他组件，例如Spark on HBase需要HBase权限。以下介绍SparkSQL关联HBase服务的操作。 前提条件 完成Spark客户端的安装，例如安装目录为“/opt/client”。 获

查看更多 →

配置只读延迟库（PostgreSQL） 获取wal日志延迟回放状态 中止/恢复wal日志回放 父主题： API v3（推荐）

查看更多 →

配置SparkSQL业务用户权限 操作场景 SparkSQL业务还可能需要关联使用其他组件，例如spark on HBase需要HBase权限。以下介绍SparkSQL关联HBase服务的操作。 前提条件 完成Spark客户端的安装，例如安装目录为“/opt/client”。 获

查看更多 →

配置Spark SQL开启Adaptive Execution特性 配置场景 Spark SQL Adaptive Execution特性用于使Spark SQL在运行过程中，根据中间结果优化后续执行流程，提高整体执行效率。当前已实现的特性如下： 自动设置shuffle partition数

查看更多 →

基本参数 使用SQL语句 导出关系型数据库的数据时，您可以选择使用自定义SQL语句导出。 否 SQL语句 “使用SQL语句”选择“是”时，您可以在这里输入自定义的SQL语句， CDM 将根据该语句导出数据。 说明： SQL语句只能查询数据，支持join和嵌套写法，但不能有多条查询语句，比如 select

查看更多 →

相应的修改。 线程池调整 该参数在管理控制台里的“ 服务器 →应用程序服务器→server1→线程池”的“WebContainer”中进行设置，不要勾选“允许线程分配超过最大线程大小”。此处建议根据压力测试实际情况进行调整。 图7 线程池调整1 “服务器→应用程序服务器→server

查看更多 →

能否在函数代码中使用线程和进程？ 用户可使用编程语言和操作系统的功能，在函数中创建额外的线程和进程。 父主题： 创建函数

查看更多 →

Kafka 多线程Consumer API 使用样例 功能介绍 在Kafka Consumer API使用样例基础上，实现了多线程并发消费，可根据Topic的Partition数目起相应个数的Consumer线程来对应消费消息。 下面代码片段在com.huawei.bigdata

查看更多 →

同，且均为线程id时，功能和pg_cancel_backend相同。 pg_reload_conf() 描述：导致所有服务器线程重新装载它们的配置文件。 返回值类型：Boolean 备注：pg_reload_conf给服务器发送一个SIGHUP信号，导致所有服务器线程重新装载配置文件。

查看更多 →

GaussDB (for MySQL) timeout相关参数简介 MySQL中有多种timeout参数，GaussDB(for MySQL)也将相关参数提供给用户设置，如下表： 表1 参数说明 参数名称 修改是否需要重启 参数含义 connect_timeout 否 控制客户端和MySQL服务端在建

查看更多 →

已下载S SMS 客户端，下载地址参考SSMS客户端下载。 操作步骤 建议由数据库管理员进行CDC功能的配置操作，以下配置以windows环境为例进行说明。 开启CDC。 使用SSMS客户端连接到SQL Server数据库所在服务器，以sa用户登录数据库。 其中，密码为数据库用户sa的密码，可向数据库管理员获取。

查看更多 →

discarded 例如，SparkSQL运行TPCDS 500G的测试时，使用默认配置出现错误。所以当数据量较大时需要适当的调整该参数。 配置参数 参数入口： 在Manager系统中，选择“集群 > 待操作集群的名称 > 服务 > Spark2x > 配置”，单击“全部配置”。在搜索框中输入参数名称。

查看更多 →

允许执行一条SQL语句。 create temp table 导入后完成语句 执行任务之后执行的SQL语句，目前仅允许执行一条SQL语句。 merge into 父主题： 配置作业目的端参数

查看更多 →

thread_name text 线程名称。 query_id bigint 查询语句的id。 tid bigint 当前线程的线程号。 lwtid integer 当前线程的轻量级线程号。 ptid integer streaming线程的父线程。 tlevel integer streaming线程的层级。

查看更多 →

BLOB。 操作步骤 建议由数据库管理员进行CDC功能的配置操作，以下配置以Linux环境为例进行说明。 开启Binlog。 使用命令行工具连接到MySQL数据库所在服务器，执行以下命令以root用户登录数据库。 mysql -uroot -ppassword 其中，passwo

查看更多 →

Spark SQL常用配置项说明 本章节为您介绍 DLI 批作业SQL语法的常用配置项。 表1 常用配置项 名称 默认值 描述 spark.sql.files.maxRecordsPerFile 0 要写入单个文件的最大记录数。如果该值为零或为负，则没有限制。 spark.sql.shuffle

查看更多 →

discarded 例如，SparkSQL运行TPCDS 500G的测试时，使用默认配置出现错误。所以当数据量较大时需要适当的调整该参数。 配置参数 参数入口： 在Manager系统中，选择“集群 > 服务 > Spark2x > 配置”，单击“全部配置”。在搜索框中输入参数名称。 表1

查看更多 →

GaussDB(for MySQL)日志配置管理 GaussDB(for MySQL)的日志管理功能支持查看数据库级别的日志，包括数据库运行的错误信息，以及运行较慢的SQL查询语句，有助于您分析系统中存在的问题。 操作场景 配置访问日志后，GaussDB(for MySQL)实例新生成的日志记录会上传到云日志服务（Log

查看更多 →

CRL管理”页面，选择“CRL发布服务器”页签，单击CRL发布服务器右侧的“修改”，可修改该CRL发布服务器的配置信息。 删除CRL发布服务器： 在“PKI管理 > CRL管理”页面，选择“CRL发布服务器”页签，单击CRL发布服务器右侧的“删除”，可删除该CRL发布服务器。 导入CRL： 在“PKI管理

查看更多 →

击“确定”。 5. 为云服务器配置上一步创建的代理。 在左侧导航栏，单击，选择“计算>弹性云服务器”，弹出界面。 点击需要配置委托的云服务器，进入云服务器“基本信息”。 在“管理信息>委托”点击编辑按钮，选择之前创建的委托，点击“保存”。 父主题： 配置Backint Agent

查看更多 →