ALM-16005 El uso de memoria heap del proceso Hive supera el umbral
Descripción
El sistema comprueba el estado del servicio Hive cada 30 segundos. La alarma se genera cuando el uso de memoria heap de un servicio Hive supera el umbral (95% de la memoria máxima).
Los usuarios pueden elegir O&M > Alarm > Thresholds > Name of the desired cluster > Hive para cambiar el umbral.
La alarma se borra cuando el uso de memoria heap es menor o igual que el umbral.
Atributo
ID de alarma |
Gravedad de la alarma |
Borrado automáticamente |
---|---|---|
16005 |
Importante |
Sí |
Parámetros
Nombre |
Significado |
---|---|
Source |
Especifica el clúster para el que se genera la alarma. |
ServiceName |
Especifica el nombre del servicio para el que se genera la alarma. |
RoleName |
Especifica el nombre del rol para el que se genera la alarma. |
HostName |
Especifica el objeto (ID de host) para el que se genera la alarma. |
Impacto en el sistema
Cuando el uso de memoria heap de Hive es excesivo, el rendimiento de la operación de tarea de Hive se ve afectado. Además, puede producirse un desbordamiento de memoria para que el servicio Hive no esté disponible.
Causas posibles
La memoria heap de la instancia de Hive en el nodo se utiliza en exceso o la memoria heap se asigna de forma inadecuada. Como resultado, el uso excede el umbral.
Procedimiento
Comprobar el uso de memoria heap.
- En el portal del Administrador FusionInsight, haga clic en O&M > Alarm > Alarms y seleccione la alarma cuyo Alarm ID es 16005. A continuación, compruebe el nombre del rol de Location y confirme la dirección IP de la instancia.
- En el portal del FusionInsight Manager, elija Cluster > Name of the desired cluster > Services > Hive > Instance y haga clic en el HiveServer para el que se genera la alarma para ir a la página Dashboard. Haga clic en el menú desplegable en el área Chart y elija Customize > CPU and Memory y seleccione HiveServer Memory Usage Statistics y haga clic en OK y compruebe si la memoria heap usada del servicio HiveServer alcanza el umbral(valor predeterminado: 95%) de la memoria heap máxima especificada para HiveServer.
Figura 1 Estadísticas de uso de memoria de HiveServer
- En el portal del FusionInsight Manager, elija Cluster > Name of the desired cluster > Services > Hive > Instance y haga clic en el MetaStore para el que se genera la alarma para ir a la página Dashboard. Haga clic en el menú desplegable en el área Chart y elija Customize > CPU and Memory y seleccione MetaStore Memory Usage Statistics y haga clic en OK y compruebe si la memoria heap usada del servicio MetaStore alcanza el umbral(valor predeterminado: 95%) de la memoria heap máxima especificada para MetaStore.
Figura 2 Estadísticas de uso de memoria de MetaStore
- En el portal del FusionInsight Manager, seleccione Cluster > Name of the desired cluster > Services > Hive > Configurations > All Configurations. Seleccione HiveServer/MetaStore > JVM. Ajuste el valor de -Xmx en HIVE_GC_OPTS/METASTORE_GC_OPTS como las siguientes reglas. Haga clic en Save.
Sugerencias para la configuración de los parámetros de GC para el HiveServer:
- Cuando la memoria heap utilizada por el proceso HiveServer alcanza el umbral (valor predeterminado: 95%) de la memoria heap máxima establecida por el proceso HiveServer, cambie el valor de -Xmx al doble del valor predeterminado. Por ejemplo, si -Xmx está establecido en 2GB de forma predeterminada, cambie el valor de -Xmx a 4GB. Se recomienda cambiar el valor de -Xms para establecer la relación de -Xms y -Xmx a 1:2 para evitar problemas de rendimiento cuando JVM es dinámica. En la página de inicio de FusionInsight Manager, elija O&M> Alarm> Thresholds > Name of the desired cluster > Hive > CPU and Memory > HiveServer Heap Memory Usage Statistics (HiveServer) para ve Threshold.
Sugerencias para la configuración de los parámetros de GC para el MetaServer:- Cuando la memoria heap utilizada por el proceso MetaStore alcanza el umbral (valor predeterminado: 95%) de la memoria heap máxima establecida por el proceso MetaStore, cambie el valor de -Xmx al doble del valor predeterminado. Por ejemplo, si -Xmx está establecido en 2GB de forma predeterminada, cambie el valor de -Xmx a 4GB. En la página de inicio de FusionInsight Manager, elija O&M> Alarm> Thresholds > Name of the desired cluster > Hive > CPU and Memory > MetaStore Heap Memory Usage Statistics (MetaStore) para ver Threshold.
- Se recomienda cambiar el valor de -Xms para establecer la relación de -Xms y -Xmx a 1:2 para evitar problemas de rendimiento cuando JVM es dinámica.
- Haga clic en More > Restart Service para reiniciar el servicio.
- Verifique si la alarma se ha borrado.
- De ser así, no se requiere ninguna acción adicional.
- Si no, vaya a 7.
Recopilar información de fallas.
- En el portal del FusionInsight Manager, elija O&M > Log > Download.
- Seleccione Hive en el clúster requerido en el Service.
- Haga clic en en la esquina superior derecha y establezca Start Date y End Date para la recopilación de registros en 10 minutos antes y después del tiempo de generación de alarmas, respectivamente. A continuación, haga clic en Download.
- Póngase en contacto con el y envíe los registros recopilados.
Eliminación de alarmas
Después de rectificar la falla, el sistema borra automáticamente esta alarma.
Información relacionada
Ninguna