配置内存 操作场景 Spark是内存计算框架，计算过程中内存不够对Spark的执行效率影响很大。可以通过监控GC（Garbage Collection），评估内存中RDD的大小来判断内存是否变成性能瓶颈，并根据情况优化。 监控节点进程的GC情况（在客户端的conf/spark-defaults

查看更多 →

MySQL配置 设置MySQL配置参数可在迁移MySQL数据库脚本时自定义迁移工具的行为。 打开config文件夹中的features-mysql.properties文件，并根据实际需要设置features-mysql.properties文件中的配置参数中的参数。 表1 features-mysql

查看更多 →

如何配置knox内存？ 以root用户登录集群Master节点。 在Master节点执行如下命令打开gateway.sh文件。 su omm vim /opt/knox/bin/gateway.sh 将“APP_MEM_OPTS=""” 修改为 “APP_MEM_OPTS="-Xms256m

查看更多 →

”。 图2 添加请求头并调用 未开启动态内存，调用接口时默认取创建函数时设置的内存大小； 若配置了动态内存，未设置value值，调用同步执行接口或异步执行接口时仍默认取创建函数设置的内存大小，调用成功返回“200”。 若配置了动态内存，内存值设置错误，未包含在128、256、51

查看更多 →

t”参数的值。 建议您的实例预留内存值至少配置为30%，2021年之后创建的实例预留内存默认值已经修改为30%。 预留内存百分比是以实例规格的最大可用内存为基数，而不是以内存规格为基数的，最大可用内存可参考实例规格中实例产品规格表中“实例可使用内存”列的值。 父主题： Redis使用

查看更多 →

华为云帮助中心，为用户提供产品简介、价格说明、购买指南、用户指南、API参考、最佳实践、常见问题、视频帮助等技术文档，帮助您快速上手使用华为云服务。

查看更多 →

Mysql配置示例 结合配置项说明，在配置文件或配置信息添加故障注入相关配置。 配置文件示例config_mysql_chaos.yaml props: version: v1 appId: xxx monitorId: xxxx databaseName: xxxx

查看更多 →

useUnicode=true&characterEncoding=UTF-8，输入RDS密码，测试连接； 图4 基础配置 单击保存，完成数据库配置（可单击备份配置文档，备份后，后续升级不需要再进行配置）。 父主题： 实施步骤

查看更多 →

配置NameNode内存参数 配置场景 在HDFS中，每个文件对象都需要在NameNode中注册相应的信息，并占用一定的存储空间。随着文件数的增加，当原有的内存空间无法存储相应的信息时，需要修改内存大小的设置。 配置描述 参数入口： 请参考修改集群服务配置参数，进入HDFS“全部配置”页面。

查看更多 →

配置NameNode内存参数 配置场景 在HDFS中，每个文件对象都需要在NameNode中注册相应的信息，并占用一定的存储空间。随着文件数的增加，当原有的内存空间无法存储相应的信息时，需要修改内存大小的设置。 配置描述 参数入口： 请参考修改集群服务配置参数，进入HDFS“全部配置”页面。

查看更多 →

自建MySQL 服务器 创建VPC和安全组 创建E CS （MySQL服务器） 安装社区版MySQL 创建ECS并安装MySQL客户端 父主题： 实施步骤

查看更多 →

自建MySQL服务器 创建VPC和安全组 创建ECS（MySQL服务器） 安装社区版MySQL 创建ECS并安装MySQL客户端 测试自建MySQL性能 父主题： 实施步骤

查看更多 →

配置MySQL源端参数 作业中源连接为云数据库MySQL/MySQL数据库连接时，源端作业参数如表1所示。 表1 MySQL作为源端时的作业参数 参数名 说明 取值样例 使用SQL语句 导出关系型数据库的数据时，您可以选择使用自定义SQL语句导出。 否 SQL语句 “使用SQL语

查看更多 →

配置Mysql监控项 在“编辑【Mysql数据库】监控配置”页面配置以下参数： 采集间隔：默认60s，此处不支持修改。 是否采集原始sql：默认配置为否，只采集不带参数的sql，如select name from user where id=?当配置为是时，调用链中会采集包含实际参数的sql，如select

查看更多 →

配置MySQL源端参数 作业中源连接为云数据库MySQL/MySQL数据库连接时，源端作业参数如表1所示。 表1 MySQL作为源端时的作业参数 参数名 说明 取值样例 使用SQL语句 导出关系型数据库的数据时，您可以选择使用自定义SQL语句导出。 否 SQL语句 “使用SQL语

查看更多 →

配置AM自动调整分配内存 配置场景 启动该配置的过程中，ApplicationMaster在创建container时，分配的内存会根据任务总数的浮动自动调整，资源利用更加灵活，提高了客户端应用运行的容错性。 配置描述 参数入口： 在Manager系统中，选择“集群 > 待操作集群的名称

查看更多 →

配置Spark Executor堆内存参数 配置场景 当分配的内存太小或者被更高优先级的进程抢占资源时，会出现物理内存超限的情况。调整如下参数，可以防止物理内存超限。 配置描述 参数入口： 在应用提交时通过“--conf”设置这些参数，或者在客户端的“spark-defaults

查看更多 →

配置Spark Executor堆内存参数 配置场景 当分配的内存太小或者被更高优先级的进程抢占资源时，会出现物理内存超限的情况。调整如下参数，可以防止物理内存超限。 配置描述 参数入口： 在应用提交时通过“--conf”设置这些参数，或者在客户端的“spark-defaults

查看更多 →

创建ECS（MySQL服务器） 购买弹性云服务器，用于安装MySQL社区版。 登录华为云管理控制台。 单击管理控制台左上角的，选择区域“华南-广州”。 单击页面左上角，选择“计算 > 弹性云服务器 ECS”。 单击“购买云服务器”。 配置弹性云服务器参数。 选择通用计算型s6.xlarge

查看更多 →

创建ECS（MySQL服务器） 购买弹性云服务器，用于安装MySQL社区版。 登录华为云管理控制台。 单击管理控制台左上角的，选择区域“华南-广州”。 单击页面左上角，选择“计算 > 弹性云服务器 ECS”。 单击“购买云服务器”。 配置弹性云服务器参数。 选择通用计算型s6.xlarge

查看更多 →

配置AM自动调整分配内存 本章节适用于 MRS 3.x及后续版本集群。 配置场景 启动该配置的过程中，ApplicationMaster在创建container时，分配的内存会根据任务总数的浮动自动调整，资源利用更加灵活，提高了客户端应用运行的容错性。 配置描述 参数入口： 在Manager系统中，选择“集群

查看更多 →