Spark Spark基本原理 Spark HA方案介绍 Spark与其他组件的关系 Spark开源增强特性 父主题： 组件介绍

查看更多 →

然后进入作业开发页面，拖动 DLI Spark节点到画布并单击，配置节点的属性。 图3 配置节点属性 关键属性说明： DLI队列：DLI中创建的DLI队列。 作业运行资源：DLI Spark节点运行时，限制最大可以使用的CPU、内存资源。 作业主类：DLI Spark节点的主类，本例的主类是“org.apache

查看更多 →

用户节点组件健康检查异常处理 检查项内容 检查用户节点的容器运行时组件和网络组件等是否健康。 解决方案 检测到用户节点存在组件异常时，请登录节点查看异常组件状态并处理。 父主题： 升级前检查异常问题排查

查看更多 →

Hive负载均衡 配置Hive任务的最大map数 配置用户租约隔离访问指定节点的HiveServer 父主题： Hive企业级能力增强

查看更多 →

Hive负载均衡 配置Hive任务的最大map数 配置用户租约隔离访问指定节点的HiveServer 配置组件隔离访问Hive MetaStore 配置HiveMetaStore客户端连接负载均衡 父主题： Hive企业级能力增强

查看更多 →

Flexus负载均衡 创建Flexus负载均衡后，选择不到 云服务器 是什么原因？ 父主题： Flexus L实例 及X实例

查看更多 →

过载。 负载均衡分发时需检查后端节点的负载状态，并根据各节点的负载进行业务分发。 在后端节点故障的情况下，需要自动将业务分发给其他健康节点处理，以避免业务失败。 相关云服务和工具 弹性负载均衡 ELB：支持业务负载均衡处理，还支持后端 服务器 健康状态检测，自动隔离异常状态的E CS 。

查看更多 →

色名称的描述和操作请以实际版本为准。 告警属性 告警ID 告警级别 是否自动清除 43001 紧急 是 告警参数 参数名称 参数含义 来源 产生告警的集群名称。 服务名 产生告警的服务名称。 角色名 产生告警的角色名称。 主机名 产生告警的主机名。 对系统的影响 用户提交的Spark任务执行失败。

查看更多 →

Spark作业访问OBS报错“requestId=XXX”如何处理？ 问题现象 Spark作业访问OBS报错：requestId=4971883851071737250 解决方法 登录Spark客户端节点，进入conf目录，修改配置文件“core-site.xml”中的“fs.obs

查看更多 →

Spark作业报错“UnknownScannerExeception”如何处理？ 问题现象 Spark作业运行查看日志有些WARN日志，作业运行很慢，Caused by显示：UnknownScannerExeception。 解决方法 运行Spark作业前，调整hbase.client

查看更多 →

30秒内的连接闪断，建议您的应用程序添加自动重连机制。 推荐您使用Connection String URI进行连接，请勿直接连接副本集的Primary节点。当使用Connection String URI进行连接时，如果某个节点出现故障，不会因为节点的切换而影响应用的读写操作。连接命令示例：

查看更多 →

节点CPU使用率检查异常处理 检查项内容 检查节点CPU使用情况，是否超过90%。 解决方案 请在业务低峰时进行集群升级。 请检查该节点的Pod部署数量是否过多，适当驱逐该节点上Pod到其他空闲节点。 父主题： 升级前检查异常问题排查

查看更多 →

有登录权限，需要先恢复paas用户的登录权限命令。 执行以下命令恢复paas用户权限之后重新检查： usermod -s /bin/bash paas 父主题： 升级前检查异常问题排查

查看更多 →

务和数据更均匀的分布在各个节点。增加任务的并行度，充分利用集群机器的计算能力，一般并行度设置为集群CPU总和的2-3倍。 操作步骤 并行度可以通过如下三种方式来设置，用户可以根据实际的内存、CPU、数据以及应用程序逻辑的情况调整并行度参数。 在会产生shuffle的操作函数内设置并行度参数，优先级最高。

查看更多 →

否 Integer 删除的节点数量。 node_list 否 Array of strings 指定删除节点的ID列表。 num与node_list必须有一个字段传值。 如果num与node_list同时传值时，则以node_list的值为准。 删除的节点角色不能是Primary，以及Hidden。

查看更多 →

object metadata是节点对象的元数据定义，是集合类的元素类型，包含一组由不同名称定义的属性。 spec NodeSpec object spec是集合类的元素类型，用户对需要管理的节点对象进行详细描述的主体部分都在spec中给出。系统通过spec的描述来创建或更新对象。 status

查看更多 →

CCE使用/var/paas目录进行基本的节点管理活动并存储属主和属组均为paas的文件数据。 当前集群升级流程会将/var/paas路径下的文件的属主和属组均重置为paas。 请您参考下述命令排查当前业务Pod中是否将文件数据存储在/var/paas路径下，修改避免使用该路径，并移除该路径下的异常文件后重试检查，通过后可继续升级。

查看更多 →

控制节点组件健康检查异常处理 检查项内容 检查控制节点的Kubernetes组件、容器运行时组件、网络组件等是否健康。 解决方案 检测到控制节点存在组件异常时，请联系技术支持人员进行处理。 父主题： 升级前检查异常问题排查

查看更多 →

自建数据中心的负载均衡 LVS负载均衡方式 控制台配置 配置准备 配置指导 验证测试 父主题： CloudPond自建数据中心负载均衡最佳实践

查看更多 →

步骤七：验证业务 负载均衡器配置完成后，可通过访问ELB实例对应的 域名 以及指定的URL，验证是否实现访问到不同的后端服务器。 修改本地PC的“C:\Windows\System32\drivers\etc\hosts”文件，将域名映射到创建的ELB实例的EIP上。 ELB实例的EIP请在负载均衡器的基本信息界面查看。

查看更多 →

修改本地PC的“C:\Windows\System32\drivers\etc\hosts”文件，将域名映射到创建的ELB实例的EIP上。 ELB实例的EIP请在负载均衡器的基本信息界面查看。 图10 本地PC的hosts文件 在本地PC的命令行窗口，执行以下命令测试域名映射ELB实例的EIP是否成功。

查看更多 →