Estos contenidos se han traducido de forma automática para su comodidad, pero Huawei Cloud no garantiza la exactitud de estos. Para consultar los contenidos originales, acceda a la versión en inglés.

En esta página

Mostrar todo

Centro de ayuda/ MapReduce Service/ Guía del usuario/ Referencia de alarma (aplicable a MRS 3.x)/ ALM-14021 El tiempo promedio de procesamiento de RPC de NameNode supera el umbral

ALM-14021 El tiempo promedio de procesamiento de RPC de NameNode supera el umbral

Actualización más reciente 2023-11-20 GMT+08:00

Ver PDF

Descripción

El sistema comprueba el tiempo promedio de procesamiento RPC de NameNode cada 30 segundos, y compara el tiempo promedio real de procesamiento RPC con el umbral (valor predeterminado: 100 ms). Esta alarma se genera cuando el sistema detecta que el tiempo promedio de procesamiento de RPC excede el umbral durante varias veces consecutivas (10 veces por defecto).

Puede elegir O&M > Alarm > Thresholds > Name of the desired cluster > HDFS para cambiar el umbral.

Cuando el Trigger Count es 1, esta alarma se borra cuando el tiempo promedio de procesamiento de RPC de NameNode es menor o igual que el umbral. Cuando el Trigger Count es mayor que 1, esta alarma se borra cuando el tiempo promedio de procesamiento de RPC de NameNode es menor que o igual al 90% del umbral.

Atributo

ID de alarma	Gravedad de la alarma	Borrado automáticamente
14021	Importante	Sí

Parámetros

Nombre	Significado
Source	Especifica el clúster para el que se genera la alarma.
ServiceName	Especifica el servicio para el que se genera la alarma.
RoleName	Especifica el rol para el que se genera la alarma.
HostName	Especifica el host para el que se genera la alarma.
NameServiceName	Especifica el servicio NameService para el que se genera la alarma.
Trigger condition	Especifica el umbral que activa la alarma. Si el valor del indicador actual excede este umbral, se genera la alarma.

Impacto en el sistema

NameNode no puede procesar las solicitudes RPC de clientes HDFS, servicios de capa superior que dependen de HDFS y DataNode de manera oportuna. Específicamente, los servicios que acceden a HDFS se ejecutan lentamente o el servicio HDFS no está disponible.

Causas posibles

El rendimiento de la CPU de los nodos NameNode es insuficiente y, por lo tanto, los nodos NameNode no pueden procesar mensajes de manera oportuna.
La memoria NameNode configurada es demasiado pequeña y se produce la congelación de fotogramas en la JVM debido a la recolección de basura completa frecuente.

Los parámetros de NameNode no están configurados correctamente, por lo que NameNode no puede aprovechar al máximo el rendimiento del sistema.

Procedimiento

Obtener información de alarma.

En el portal del FusionInsight Manager, seleccione O&M > Alarm > Alarms. En la lista de alarmas, haga clic en la alarma.
Comprueba la alarma. Obtenga el nombre de host del nodo NameNode involucrado en esta alarma a partir de la información HostName de Location. A continuación, obtenga el nombre del nodo NameService involucrado en esta alarma a partir de la información NameServiceName de Location.

Comprobar si el umbral es demasiado pequeño.

Compruebe el estado de los servicios que dependen de HDFS. Compruebe si los servicios se ejecutan lentamente o si se agota el tiempo de ejecución de la tarea.
- En caso afirmativo, vaya a 8.
- Si no, vaya a 4.
En el portal del FusionInsight Manager, elija Cluster > Name of the desired cluster > Services > HDFS. Haga clic en el menú desplegable en la esquina superior derecha del Chart, elija Customize > RPC, y seleccione Average Time of Active NameNode RPC Processing y haga clic en OK.

Figura 1 Tiempo promedio de procesamiento de RPC de NameNode activo
En la página de monitorización Average Time of Active NameNode RPC Processing , obtenga el valor del nodo de NameService involucrado en esta alarma.
En el portal del FusionInsight Manager, seleccione O&M > Alarm > Thresholds > Name of the desired cluster > HDFS. Busque Average Time of Active NameNode RPC Processing y haga clic en el Modify en la columna Operation de la regla predeterminada. Se muestra la página Modify Rule. Cambie el Threshold al 150% del valor máximo dentro de un día antes y después de que se genere la alarma. Haga clic en OK para guardar el nuevo umbral.

Figura 2 Modificar regla
Espere 5 minutos y luego compruebe si la alarma se borra automáticamente.
- De ser así, no se requiere ninguna acción adicional.
- Si no, vaya a 8.

Comprobar si el rendimiento de la CPU del nodo NameNode es suficiente.

En el portal de FusionInsight Manager, haga clic en O&M > Alarm >Alarms y compruebe si se genera ALM-12016 El uso de CPU excede el umbral para el nodo de NameNode.
- En caso afirmativo, vaya a 9.
- Si no, vaya a 11.
Maneje el ALM-12016 El uso de la CPU supera el umbral tomando las medidas recomendadas.
Espere 10 minutos y compruebe si la alarma 14021 se borra automáticamente.
- De ser así, no se requiere ninguna acción adicional.
- Si no, vaya a 11.

Comprobar si la memoria del nodo NameNode es demasiado pequeña.

En el portal de FusionInsight Manager, haga clic en O&M > Alarm >Alarms y compruebe si se genera ALM-14007 El uso de la memoria en montón de NameNode de HDFS supera el umbral para el nodo de NameNode.
- En caso afirmativo, vaya a 12.
- Si no, vaya a 14.
Maneje el ALM-14007 El uso de la memoria en montón de NameNode de HDFS supera el umbral tomando las medidas recomendadas.
Espere 10 minutos y compruebe si la alarma 14021 se borra automáticamente.
- De ser así, no se requiere ninguna acción adicional.
- Si no, vaya a 14.

Comprobar si los parámetros de NameNode están configurados correctamente.

En el portal del FusionInsight Manager, elija Cluster > Name of the desired cluster > Services > HDFS > Configurations > All Configurations. Busque el parámetro dfs.namenode.handler.count y vea su valor. Si el valor es menor o igual a 128, cámbielo a 128. Si el valor es mayor que 128 pero menor que 192, cámbielo a 192.
Busque el parámetro ipc.server.read.threadpool.size y vea su valor. Si el valor es menor que 5, cámbielo a 5.
Haga clic en Save y haga clic en OK.
En la página Instance de HDFS, seleccione el NameNode en espera de NameService involucrado en esta alarma y elija More > Restart Instance. Ingrese la contraseña y haga clic en OK. Espere hasta que se inicie el NameNode en espera.
En la página Instance de HDFS, seleccione el NameNode activo de NameService involucrado en esta alarma y elija More > Restart Instance. Ingrese la contraseña y haga clic en OK. Espere hasta que se inicie el NameNode activo.
Espere 1 hora y luego compruebe si la alarma se borra automáticamente.
- De ser así, no se requiere ninguna acción adicional.
- Si no, vaya a 20.

Recopilar información de fallas.

En el portal del FusionInsight Manager, elija O&M > Log > Download.
Seleccione el nodo siguiente en el clúster requerido desde el Service.
- HDFS
Haga clic en en la esquina superior derecha y establezca Start Date y End Date para la recopilación de registros en 10 minutos antes y después del tiempo de generación de alarmas, respectivamente. A continuación, haga clic en Download.
Póngase en contacto con el y envíe los registros recopilados.

Eliminación de alarmas

Después de rectificar la falla, el sistema borra automáticamente esta alarma.

Información relacionada

Ninguna

Tema principal: Referencia de alarma (aplicable a MRS 3.x)

Tema anterior: ALM-14020 Número de entradas en el directorio de HDFS supera el umbral

Tema siguiente: ALM-14022 El tiempo medio de cola de RPC de NameNode supera el umbral

Comentarios

¿Le pareció útil esta página?

Sí No

Deje algún comentario

Muchas gracias por sus comentarios. Seguiremos trabajando para mejorar la documentación.

El sistema está ocupado. Vuelva a intentarlo más tarde.

¿Cuáles de los siguientes problemas se presentaron?

Contenido diferente a la de la IU del producto

Descripciones poco claras

Falta de ejemplos o código

Pasos incorrectos

No puedo encontrar lo que necesito

Falta de prácticas recomendadas

Comentarios (opcional)

0/500

Seleccione al menos un tipo de problema e ingrese sus comentarios o sugerencias.

Ingrese 500 caracteres como máximo.

Enviar Cancelar