ALM-14014 El tiempo de GC de NameNode supera el umbral
Descripción
El sistema comprueba la duración de la recolección de basura (GC) del proceso NameNode cada 60 segundos. Esta alarma se genera cuando la duración de GC excede el umbral (12 segundos por defecto).
Esta alarma se borra cuando la duración de GC es menor que el umbral.
Atributo
ID de alarma |
Gravedad de la alarma |
Borrado automáticamente |
---|---|---|
14014 |
Importante |
Sí |
Parámetros
Nombre |
Significado |
---|---|
Source |
Especifica el clúster para el que se genera la alarma. |
ServiceName |
Especifica el servicio para el que se genera la alarma. |
RoleName |
Especifica el rol para el que se genera la alarma. |
HostName |
Especifica el host para el que se genera la alarma. |
Trigger Condition |
Especifica el umbral que activa la alarma. Si el valor del indicador actual excede este umbral, se genera la alarma. |
Impacto en el sistema
Una larga duración de GC del proceso NameNode puede interrumpir los servicios.
Causas posibles
La memoria heap de la instancia NameNode se utiliza en exceso o la memoria heap se asigna de forma inadecuada. Como resultado, los GC ocurren con frecuencia.
Procedimiento
Compruebe la duración del GC.
- En el portal del FusionInsight Manager, elija O&M > Alarm > Alarms. En la interfaz mostrada, haga clic en el botón desplegable de ALM-14014 NameNode GC Time Exceeds the Threshold. Luego compruebe el nombre del rol de Location y confirme la dirección IP de la instancia.
- En el portal del FusionInsight Manager, seleccione Cluster > Name of the desired cluster > Services > HDFS > Instance > NameNode (IP address for which the alarm is generated). Haga clic en el menú desplegable en la esquina superior derecha del Chart, seleccione Customize > Garbage Collection, y seleccione NameNode Garbage Collection (GC) para comprobar las estadísticas de duración de GC del proceso NameNode recopilados cada minuto.
Figura 1 NameNode Garbage Collection (GC)
- Compruebe si la duración GC del proceso NameNode recopilado cada minuto supera el umbral (12 segundos por defecto).
- En el portal de FusionInsight Manager, elija Cluster > Name of the desired cluster > Services > HDFS > Configurations > All Configurations > NameNode > System para aumentar el valor del parámetro GC_OPTS según sea necesario.
La asignación recomendada entre el número de objetos de archivo HDFS (objetos de sistema de archivos = archivos + bloques) y los parámetros JVM configurados para NameNode es la siguiente:
- Si el número de objetos de archivo llega a 10,000,000, se recomienda establecer los parámetros de JVM de la siguiente manera: -Xms6G -Xmx6G -XX:NewSize=512M -XX:MaxNewSize=512M
- Si el número de objetos de archivo llega a 20,000,000, se recomienda establecer los parámetros JVM de la siguiente manera: -Xms12G -Xmx12G -XX:NewSize=1G -XX:MaxNewSize=1G
- Si el número de objetos de archivo llega a 50,000,000, se recomienda establecer los parámetros JVM de la siguiente manera: -Xms32G -Xmx32G -XX:NewSize=3G -XX:MaxNewSize=3G
- Si el número de objetos de archivo llega a 100,000,000, se recomienda establecer los parámetros JVM de la siguiente manera: -Xms64G -Xmx64G -XX:NewSize=6G -XX:MaxNewSize=6G
- Si el número de objetos de archivo llega a 200,000,000, se recomienda establecer los parámetros JVM de la siguiente manera: -Xms96G -Xmx96G -XX:NewSize=9G -XX:MaxNewSize=9G
- Si el número de objetos de archivo llega a 300,000,000, se recomienda establecer los parámetros JVM de la siguiente manera: -Xms164G -Xmx164G -XX:NewSize=12G -XX:MaxNewSize=12G
- Guarde la configuración y reinicie la instancia NameNode.
- Verifique si la alarma se ha borrado.
- De ser así, no se requiere ninguna acción adicional.
- Si no, vaya a 7.
Recopilar información de fallas.
- En el portal del FusionInsight Manager, elija O&M > Log > Download.
- Seleccione NameNode en el clúster requerido en el Service.
- Haga clic en en la esquina superior derecha y establezca Start Date y End Date para la recopilación de registros en 10 minutos antes y después del tiempo de generación de alarmas, respectivamente. A continuación, haga clic en Download.
- Póngase en contacto con el y envíe los registros recopilados.
Eliminación de alarmas
Después de rectificar la falla, el sistema borra automáticamente esta alarma.
Información relacionada
Ninguna