调整Spark Core进程参数 操作场景 Spark on Yarn模式下，有Driver、ApplicationMaster、Executor三种进程。在任务调度和运行的过程中，Driver和Executor承担了很大的责任，而ApplicationMaster主要负责container的启停。

查看更多 →

查看主机进程及资源 总览 登录 FusionInsight Manager页面，单击“主机”，在主机列表中选择指定的主机名称，进入主机详情页面，单击“进程”和“资源”页签进入相关页面。 主机进程 进程页面显示了当前主机上已部署服务实例的角色进程信息，例如进程状态、PID、进程运行时间

查看更多 →

启动成功之后进入控制台，确保节点管理器状态为可访问 图1 操作1 后台查看进程，NodeManager确实已经启动成功，但是控制台查看状态为非活动，如下所示： 图2 操作2 需要修改2个地方： 图3 操作3 编辑nodemanager.properties文件 图4 编辑1 图5 编辑2 辅节点操作如下：（辅节点只需要启动Node

查看更多 →

NodeManager关闭导致Executor(s)未移除 问题 在Executor动态分配打开的情况下，如果在任务执行过程中，执行NodeManager关闭动作，NodeManager关闭节点上的Executor(s)在空闲超时之后，在driver页面上未被移除。 回答 这是因

查看更多 →

Yarn服务不可用（2.x及以前版本） ALM-18002 NodeManager心跳丢失（2.x及以前版本） ALM-18003 NodeManager不健康（2.x及以前版本） ALM-18004 NodeManager磁盘可用率低于阈值（2.x及以前版本） ALM-18006

查看更多 →

ALM-18017 NodeManager非堆内存使用率超过阈值 告警解释 系统每30秒周期性检测Yarn NodeManager非堆内存使用率，并把实际的Yarn NodeManager非堆内存使用率和阈值相比较。当Yarn NodeManager非堆内存使用率超出阈值（默认为最大非堆内存的90%）时产生该告警。

查看更多 →

资源 NodeManager直接内存使用百分比统计 NodeManager直接内存使用百分比统计。 90% NodeManager堆内存使用百分比统计 NodeManager堆内存使用百分比统计。 95% NodeManager非堆内存使用百分比统计 NodeManager非堆内存使用百分比统计。

查看更多 →

参数描述 参数 描述 默认值 yarn.nodemanager.linux-container-executor.user 运行任务的用户。 默认为空。 说明： 默认为空，实际以提交任务的用户来运行任务。 yarn.nodemanager.container-executor.class

查看更多 →

避免工作内容的丢失。 当启用NodeManager Restart时，NodeManager在本地保存当前节点上运行的container信息，重启NodeManager服务后通过恢复此前保存的状态信息，就不会丢失在此节点上运行的container进度。 配置描述 参考修改集群服务

查看更多 →

参数描述 参数 描述 默认值 yarn.nodemanager.linux-container-executor.user 运行任务的用户。 默认为空。 说明： 默认为空，实际以提交任务的用户来运行任务。 yarn.nodemanager.container-executor.class

查看更多 →

区域右上角的下拉菜单，选择“定制 > 资源”，勾选“NodeManager内存使用率”。查看直接内存使用情况。 图1 定制NodeManager内存使用率 查看NodeManager使用的直接内存是否已达到NodeManager设定的最大直接内存的90%(默认阈值)。 是，执行4。

查看更多 →

避免工作内容的丢失。 当启用NodeManager Restart时，NodeManager在本地保存当前节点上运行的container信息，重启NodeManager服务后通过恢复此前保存的状态信息，就不会丢失在此节点上运行的container进度。 配置描述 参考修改集群服务

查看更多 →

1/hadoop-yarn/hadoop-yarn-site/NodeManager.html#NodeManager_Restart 可以参考修改集群服务配置参数，进入Yarn“全部配置”页面。需将NodeManager的“yarn.nodemanager.recovery.enabled”配置项

查看更多 →

辅助进程发送视频数据 [self->_dataBufferController sendVideoBuffer:sampleBuffer]; 接口描述 APP调用DataBufferController实例对象的sendVideoBuffer方法。 注意事项 在辅助进程中调用，用来发送采集到的视频数据

查看更多 →

训练作业进程异常退出 问题现象 训练作业运行失败，日志中出现如下类似报错： [Modelarts Service Log]Training end with return code: 137 原因分析 日志显示训练进程的退出码为137。训练进程表示用户的代码启动后的进程，所以这里

查看更多 →

表区域右上角的下拉菜单，选择“定制 > 资源”，勾选“NodeManager内存使用率”。查看堆内存使用情况。 图1 定制NodeManager内存使用率 查看NodeManager使用的堆内存是否已达到NodeManager设定的最大堆内存的95%(默认阈值)。 是，执行4。 否，执行6。

查看更多 →

辅助进程发送音频数据 [self-> dataBufferController sendAudioBuffer：sampleBuffer]; 接口描述 APP调用DataBufferController实例对象的sendAudioBuffer方法。 注意事项 在辅助进程中调用，用来发送采集到的音频数据。

查看更多 →

训练作业进程被kill 问题现象 用户进程被Kill表示用户进程因外部因素被Kill或者中断，表现为日志中断。 原因分析 CPU软锁 在解压大量文件可能会出现此情况并造成节点重启。可以适当在解压大量文件时，加入sleep。比如每解压1w个文件，就停止1s。 存储限制 根据规格情况

查看更多 →

在“特权进程设置”页面，单击“添加特权进程”。 图2 添加特权进程 在弹出的“添加特权进程”对话框中，添加特权进程文件所在的路径。 特权进程文件所在的路径需包含进程的名称和格式，如“C:/Path/Software.type”，若进程无格式，请确保进程名称的唯一性。 特权进程添加完

查看更多 →

开启应用进程控制防护 应用进程控制功能支持分类控制 服务器 中的应用进程运行，允许可疑、可信进程运行，告警恶意进程运行，为服务器进程运行提供安全防护，防止服务器遭受恶意进程的破坏。 开启应用进程控制防护的方式在创建白名单策略时可设置： “策略生效方式”选择“学习完成后自动开启”：系统

查看更多 →

在左侧导航栏，选择“主机防御 > 应用进程控制”，进入“应用进程控制”界面。 选择“白名单策略”页签。 关闭应用进程防护 关闭防护，但保留HSS学习到的服务器应用进程特征。 在目标策略所在行的操作列，单击“关闭防护”。或者批量选中所有目标策略，并在策略列表左上方单击“关闭防护”，批量为多个策略关闭防护。

查看更多 →