¿Cómo manejo las excepciones del servicio Kudu generadas durante la creación de clústeres?
Consulta de los registros de excepciones del servicio Kudu
- Inicie sesión en la consola de MRS.
- Haga clic en el nombre del clúster.
- En la página mostrada, elija Components > Kudu > Instances y busque la dirección IP de la instancia anormal.
Si la pestaña Components no está disponible, primero complete la sincronización del usuario de IAM. (En la página Dashboard, haga clic en Synchronize en el lado derecho de IAM User Sync para sincronizar usuarios de IAM.)
- Inicie sesión en el nodo donde reside la instancia anormal y vea el registro de Kudu.
cd /var/log/Bigdata/Kudu [root@node-master1AERu kudu]# ls healthchecklog runninglog startlog
Puede encontrar los registros de comprobación de estado de Kudu en el directorio healthchecklog, los registros de inicio en el directorio startlog y los registros de ejecución del proceso Kudu en el directorio runninglog.[root@node-master1AERu logs]# pwd /var/log/Bigdata/kudu/runninglog/master/logs [root@node-master1AERu logs]# ls -al kudu-master.ERROR kudu-master.INFO kudu-master.WARNING
Los registros de ejecución se clasifican en tres tipos: ERROR, INFO, y WARNING. Cada tipo de registros de ejecución se registra en el archivo correspondiente. Puede ejecutar el comando cat para ver los registros de ejecución de cada tipo.
Manejo de excepciones de servicio Kudu
"Unable to init master catalog manager: not found: Unable to initialize catalog manager: Failed to initialize sys tables async: Unable to load consensus metadata for tablet 0000000000000000000000: xxx"
Si esta excepción ocurre cuando el servicio Kudu se instala por primera vez, el servicio KuduMaster no se inicia. La incoherencia de datos provoca el error de inicio. Para resolver el problema, realice los siguientes pasos para borrar los directorios de datos y reinicie el servicio Kudu. Si el servicio Kudu no se instala por primera vez, borrar los directorios de datos provocará la pérdida de datos. En este caso, migre datos y borre el directorio de datos.
- Busque los directorios de datos fs_data_dir, fs_wal_dir y fs_meta_dir.
find /opt -name master.gflagfile
cat /opt/Bigdata/FusionInsight_Kudu_*/*_KuduMaster/etc/master.gflagfile | grep fs_
- En la página de detalles del clúster, elija Components > Kudu y haga clic en Stop Service.
- Borre los directorios de datos Kudu en todos los nodos KuduMaster y KuduTserver. El siguiente comando utiliza dos discos de datos como ejemplo.
rm -Rvf /srv/Bigdata/data1/kudu, rm -Rvf /srv/Bigdata/data2/kudu
- En la página de detalles del clúster, elija Components > Kudu y elija More > Restart Service.
- Compruebe el estado del servicio Kudu y los registros.
Desarrollo de servicios de big data Preguntas frecuentes
- ¿Puede MRS ejecutar múltiples tareas de Flume a la vez?
- ¿Cómo cambio los registros de FlumeClient a los registros estándar?
- ¿Dónde se almacenan los archivos JAR y las variables de entorno de Hadoop?
- ¿Qué algoritmos de compresión admite HBase?
- ¿Puede MRS escribir datos en HBase a través de la tabla externa de HBase de Hive?
- ¿Cómo veo los registros de HBase?
- ¿Cómo configuro el TTL para una tabla HBase?
- ¿Cómo me conecto a HBase de MRS a través de HappyBase?
- ¿Cómo cambio el número de réplicas HDFS?
- ¿Cómo modifico la clase de conmutación HDFS activo y en espera?
- ¿Cuál es el tipo de número recomendado de DynamoDB en las tablas Hive?
- ¿Se puede interconectar el controlador Hive con DBCP2?
- ¿Cómo puedo ver la tabla Hive creada por otro usuario?
- ¿Dónde puedo descargar el paquete de dependencias (com.huawei.gaussc10) en el proyecto de ejemplo de Hive?
- ¿Puedo exportar el resultado de la consulta de datos de Hive?
- ¿Cómo lo hago si ocurre un error cuando Hive ejecuta el comando beeline -e para ejecutar varias sentencias?
- ¿Cómo lo hago si un trabajo "hivesql/hivescript" no se envía después de agregar Hive?
- ¿Qué pasa si un archivo de Excel descargado en Hue no se puede abrir?
- ¿Cómo lo hago si las sesiones no se liberan después de que Hue se conecta a HiveServer y se muestra el mensaje de error "ver max user connections"?
- ¿Cómo se restablecen los datos de Kafka?
- ¿Cómo obtengo la versión de cliente de MRS Kafka?
- ¿Qué protocolos de acceso son compatibles con Kafka?
- ¿Cómo lo hago si se muestra un mensaje de error "Not Authorized to access group xxx" cuando se consume un Kafka topic?
- ¿Qué algoritmos de compresión soporta Kudu?
- ¿Cómo puedo ver los registros de Kudu?
- ¿Cómo manejo las excepciones del servicio Kudu generadas durante la creación de clústeres?
- ¿Cuáles son las diferencias entre la construcción de proyectos de ejemplo y el desarrollo de aplicaciones? ¿Es compatible el código Python?
- ¿OpenTSDB soporta las API de Python?
- ¿Cómo configuro otras fuentes de datos en Presto?
- ¿Cómo actualizo el certificado Ranger?
- ¿Cómo me conecto a Spark Shell desde MRS?
- ¿Cómo me conecto a Spark Beeline desde MRS?
- ¿Dónde se almacenan los registros de ejecución de los trabajos de Spark?
- ¿Cómo especifico una ruta de acceso de registro al enviar una tarea en un clúster MRS Storm?
- ¿Cómo puedo comprobar si la configuración ResourceManager de Yarn es correcta?
- ¿Cómo modifico el parámetro allow_drop_detached de ClickHouse?
- ¿Cómo lo hago si se informa de una alarma que indica memoria insuficiente durante la ejecución de la tarea de Spark?
- ¿Cómo agrego una política de eliminación periódica para evitar registros de tabla de sistema ClickHouse de gran tamaño?
- ¿Cómo obtengo un archivo Spark JAR?
- ¿Por qué se genera una alarma cuando el proceso NameNode no se reinicia después de modificar el archivo hdfs-site.xml?
- Se necesita mucho tiempo para que Spark SQL acceda a las tablas particionadas de Hive antes del inicio de Job
- ¿Qué debo hacer si spark.yarn.executor.memoryOverhead no tiene efecto?
- ¿Cómo cambio la zona horaria del servicio ClickHouse?
- ¿Qué debo hacer si falla la conexión con el servidor ClickHouse? Código de error: 516
Comentarios
¿Le pareció útil esta página?
Deje algún comentariomore