调整Spark日志级别 配置场景 在某些场景下，当任务已经启动后，用户想要修改日志级别以定位问题或者查看想要的信息。 用户可以在进程启动前，在进程的JVM参数中增加参数“-Dlog4j.configuration.watch=true”来打开动态设置日志级别的功能。进程启动后，就

查看更多 →

案例：调整分布键 现象描述 某局点测试过程中EXPLAIN ANALYZE后有如下情况： 从执行信息上比较明确的可以看出HashJoin是整个计划的性能瓶颈点，并且从HashJoin的执行时间信息[2657.406,93339.924](数值的具体含义请参见SQL执行计划详解)，

查看更多 →

Size）进行调整。 dataSize如果只有几个G，推荐跑单节点运行spark，或者yarn模式但是只分配一个container。 入湖程序的并行度p设置：建议 p = （dataSize）/128M, 程序分配core的数量保持和p一致即可。内存设置建议内存大小和core的比例大于1

查看更多 →

aSize）进行调整。 dataSize如果只有几个G，推荐跑单节点运行spark，或者yarn模式但是只分配一个container。 入湖程序的并行度p设置：建议p = (dataSize)/128M，程序分配core的数量保持和p一致即可。内存设置建议内存大小和core的比例大于1

查看更多 →

（可选）调整部门 管理员可根据部门人员变动或者公司部门调整，及时同步调整人员部门和公司部门。 调整员工所属部门 单击左侧部门列表切换到对应部门。选择某个员工，单击“成员调动”。 左侧勾选要调整到的部门，右侧“已选”表示员工所在的所有部门，单击可置顶某个部门，单击可删除某个部门。 导航树快捷菜单调整部门

查看更多 →

调整HetuEngine动态过滤 HetuEngine提供了动态过滤的功能，在Join场景中开启动态过滤往往有较大的性能提升。本章节介绍如何开启动态过滤功能。 使用可访问HetuEngine WebUI界面的用户登录 FusionInsight Manager，选择“集群 > 服务

查看更多 →

案例：调整分布键 现象描述 某局点测试过程中EXPLAIN ANALYZE后有如下情况： 从执行信息上比较明确的可以看出HashJoin是整个计划的性能瓶颈点，并且从HashJoin的执行时间信息[2657.406,93339.924](数值的具体含义请参见SQL执行计划详解)，

查看更多 →

使用free命令查看 弹性云服务器 的内存，为什么与实际不符？ 问题描述 弹性 云服务器 创建成功后，使用free -m命令查询内存大小，查询结果与实际配置不符，较之创建时的配置要小一些。 示例： 假设创建该弹性云 服务器 时，配置的实际内存大小为4194304KB（即4096MB）。创建完成后，使用free

查看更多 →

设置的方式来动态调整；同时，新增max_process_memory_auto_adjust参数，当出现集群状态不均衡的情况下，CM会根据集群状态来动态调整max_process_memory，调整max_process_memory的计算公式为：（物理内存大小 – vm.min_free_kbytes）*

查看更多 →

报错提示2 解决方案：调整分配给永洪jvm的内存 用文本编辑器打开Yonghong\tomcat\bin下有个catlina.sh文件（Windows环境修改catlina.bat)，修改以下红色文字的内存大小，建议是服务器剩余可用内存的一半。 图6 调整分配内存 访问问题 永洪

查看更多 →

上面运行，一般的情况是这个丢失的task异常退出导致的。 处理步骤 问题1： 对于数据量过大，需要调整executor的内存大小的，使用--executor-memory指定内存大小； 对于同时运行的task太多，主要看--executor-cores设置的vcore数量。 问题2：

查看更多 →

调整Yarn任务抢占机制 操作场景 抢占任务可精简队列中的job运行并提高资源利用率，由ResourceManager的capacity scheduler实现，其简易流程如下： 假设存在两个队列A和B。其中队列A的capacity为25%，队列B的capacity为75%。 初

查看更多 →

调整Spark Core进程参数 操作场景 Spark on Yarn模式下，有Driver、ApplicationMaster、Executor三种进程。在任务调度和运行的过程中，Driver和Executor承担了很大的责任，而ApplicationMaster主要负责container的启停。

查看更多 →

调整HetuEngine元数据缓存 HetuEngine元数据缓存介绍 当HetuEngine访问Hive数据源时，需要访问Hive metastore获取元数据信息。HetuEngine提供了元数据缓存的功能，当首次访问Hive数据源的库或表时，会将该库或表的元数据信息（数据库

查看更多 →

调整Spark Core进程参数 操作场景 Spark on Yarn模式下，有Driver、ApplicationMaster、Executor三种进程。在任务调度和运行的过程中，Driver和Executor承担了很大的责任，而ApplicationMaster主要负责container的启停。

查看更多 →

调整CoreDNS部署状态 CCE集群默认安装CoreDNS插件，CoreDNS应用默认情况下与您的业务容器运行在同样的集群节点上，部署时的注意事项如下： 合理调整CoreDNS副本数 合理分配CoreDNS所在位置 使用自定义参数完成CoreDNS隔离部署 基于HPA自动扩容CoreDNS

查看更多 →

如何批量调整部门？ 管理员在管理后台点击通讯录>部门管理，勾选要调整的部门，点击“导入/导出”。 导出部门，批量填写部门信息。上传填写好的表格，完成部门信息更新。 父主题： 通讯录

查看更多 →

如何调整封堵阈值？ 华为云为普通用户免费提供2Gbps的DDoS攻击防护，最高可达5Gbps（视华为云可用带宽情况），当攻击超过限定的阈值时，华为云会采取黑洞策略封堵IP，对于可能会遭受超过5Gbps流量攻击的应用，建议您购买华为云 DDoS高防服务 ，提升防护能力。 父主题： 阈值及黑洞类

查看更多 →

案例：调整GUC参数best_agg_plan 现象描述 agg_t1的表定义为： 1 create table agg_t1(a int, b int, c int) distribute by hash(a); 假设agg下层算子所输出结果集的分布列为setA，agg操作的group

查看更多 →

-Xmx”的值根据实际情况调大，并保存配置。 出现此告警时，说明当前Router实例设置的堆内存大小无法满足当前进程所需的堆内存，建议调整“GC_OPTS”参数中“-Xms”、“ -Xmx”的值为当前堆内存使用量的两倍（或根据实际情况进行调整）。 重启受影响的服务或实例，观察界面告警是否清除。 是，处理完毕。

查看更多 →

调整Hive元数据超时 大分区表包含过多分区，导致任务超时，同时大量分区可能需要更多时间来加载与元存储缓存同步。因此，为了在更大规模存储中获得更好的性能，建议相应地调整加载元数据缓存最大超时时间和加载元数据连接池最大等待时间。 使用HetuEngine管理员用户登录FusionInsight

查看更多 →