在任务调度和运行的过程中，Driver和Executor承担了很大的责任，而ApplicationMaster主要负责container的启停。 因而Driver和Executor的参数配置对Spark应用的执行有着很大的影响意义。用户可通过如下操作对Spark集群性能做优化。 操作步骤

查看更多 →

在任务调度和运行的过程中，Driver和Executor承担了很大的责任，而ApplicationMaster主要负责container的启停。 因而Driver和Executor的参数配置对Spark应用的执行有着很大的影响意义。用户可通过如下操作对Spark集群性能做优化。 操作步骤

查看更多 →

threadpool_oversubscribe 是 integer [1,50] 每个线程组中最多能创建的额外线程数。 threadpool_size 是 integer [1,512] 线程组数量。 查询线程池状态 通过show status命令查询线程池状态。 show status like 'threadpool%';

查看更多 →

创建HDFS多线程任务 功能简介 建立多线程任务，同时启动多个实例执行文件操作。 代码样例 如下是删除文件的代码片段，详细代码请参考com.huawei.bigdata.hdfs.examples中的HdfsExample类。 // 业务示例2：多线程 final int THREAD_COUNT

查看更多 →

创建HDFS多线程任务 功能简介 建立多线程任务，同时启动多个实例执行文件操作。 代码样例 如下是删除文件的代码片段，详细代码请参考com.huawei.bigdata.hdfs.examples中的HdfsExample类。 // 业务示例2：多线程 final int THREAD_COUNT

查看更多 →

案例：选择合适的分布列 现象描述 表定义如下： 1 2 CREATE TABLE t1 (a int, b int); CREATE TABLE t2 (a int, b int); 执行如下查询： 1 SELECT * FROM t1, t2 WHERE t1.a = t2.b;

查看更多 →

案例：选择合适的分布列 分布列用于将数据分布到不同的节点上，划分均衡可以避免数据倾斜。 在进行关联查询时，尽量选择查询中的关联条件作为分布键。当关联条件作为分布键时，相关数据都分布在DN本地，将减少DN之间的数据流动代价，提升查询速度。 优化前 将a作为t1和t2的分布列，表定义如下：

查看更多 →

创建HDFS多线程任务 功能简介 建立多线程任务，同时启动多个实例执行文件操作。 代码样例 如下是删除文件的代码片段，详细代码请参考com.huawei.bigdata.hdfs.examples中的HdfsExample类。 // 业务示例2：多线程 final int THREAD_COUNT

查看更多 →

创建HDFS多线程任务 功能简介 建立多线程任务，同时启动多个实例执行文件操作。 代码样例 如下是删除文件的代码片段，详细代码请参考com.huawei.bigdata.hdfs.examples中的HdfsExample类。 // 业务示例2：多线程 final int THREAD_COUNT

查看更多 →

JVM监控界面线程监控处为何没有tomcat线程指标？ 当服务使用springboot2.1.x及以上版本时，需在配置文件中配置server.tomcat.mbeanregistry.enabled=true，启用Tomcat的MBean注册表以便APM探针获取到tomcat指标。

查看更多 →

在任务调度和运行的过程中，Driver和Executor承担了很大的责任，而ApplicationMaster主要负责container的启停。 因而Driver和Executor的参数配置对spark应用的执行有着很大的影响意义。用户可通过如下操作对Spark集群性能做优化。 操作步骤

查看更多 →

裸金属 服务器 配置超线程会影响业务吗？ 裸金属服务器配置超线程需要在BIOS中配置，服务器需要重启，因此会影响业务。 父主题： 通用类

查看更多 →

选择合适的存储云服务 了解数据特征（如可共享、大小、访问模式、延迟、吞吐量和数据持久性），以便为您的工作负载选择合适的专用数据存储。 PERF03-05 选择合适类型的存储云服务 父主题： PERF03 性能建模

查看更多 →

选择合适网络服务资源 选择合适的网络服务资源是一个复杂的过程，需要考虑许多因素。以下提供了一些主要因素： 评估合适网络云服务，主要考虑如下性能指标： 网络流量：评估工作负载的预期网络流量，了解数据传输需求和网络请求的频率。 带宽要求：确定工作负载的带宽要求，考虑通过网络传输和接收的数据量。

查看更多 →

案例：选择合适的分布列 现象描述 表定义如下： 1 2 CREATE TABLE t1 (a int, b int); CREATE TABLE t2 (a int, b int); 执行如下查询： 1 SELECT * FROM t1, t2 WHERE t1.a = t2.b;

查看更多 →

案例：选择合适的分布列 现象描述 表定义如下： 1 2 CREATE TABLE t1 (a int, b int); CREATE TABLE t2 (a int, b int); 执行如下查询： 1 SELECT * FROM t1, t2 WHERE t1.a = t2.b;

查看更多 →

力可弹性伸缩的云服务器。 部署web环境 什么是E CS 创建容器应用基本流程 快速创建一个kubernetes集群 3分钟创建一个游戏类容器应用 3分钟创建一个游戏类容器应用 3分钟创建一个游戏类容器应用 3分钟创建一个游戏类容器应用 06 API 弹性云服务器（Elastic Cloud

查看更多 →

为开启/关闭ECS超线程 操作场景 购买x86架构弹性云服务器时，您可以通过设置“CPU选项”，开启或关闭超线程。若不设置，则默认开启超线程。 对于支持超线程的x86架构弹性云服务器实例： 开启超线程：适用于需要CPU内核在同一时间并行处理更多的信息和后台任务的场景，开启多线程可以大幅提升计算体验。

查看更多 →

工作量颗粒度大小合适 超过10人天工作量的工作项，要分解描述具体工作内容和占用工作量； 只有一句话描述，工作量几十人天情况不合理。 父主题： SOW（项目工作说明书）注意事项

查看更多 →

选择合适的数据库资源 华为云提供了多款数据库服务，不同服务的优化方式和注意事项均有差异，可以通过以下四个不同考虑因素入手，选择合适的数据库资源： 兼容性：一般原则是平替迁移，选择云上数据库，是为了利用云上服务使得生产工作更聚焦到应用层，上云前系统中数据库的选型已经过业务实践的检验

查看更多 →

3分钟创建一个游戏类容器应用 3分钟创建一个游戏类容器应用 06 API 弹性云服务器（Elastic Cloud Server）是一种可随时自动获取、计算能力可弹性伸缩的云服务器。 API文档 什么是ECS 创建容器应用基本流程 快速创建一个kubernetes集群 3分钟创建一个游戏类容器应用

查看更多 →