Estos contenidos se han traducido de forma automática para su comodidad, pero Huawei Cloud no garantiza la exactitud de estos. Para consultar los contenidos originales, acceda a la versión en inglés.
Centro de ayuda> MapReduce Service> Preguntas frecuentes> Desarrollo de servicios de big data> ¿Cómo me conecto a Spark Beeline desde MRS?
Actualización más reciente 2023-11-20 GMT+08:00
Ver PDF

¿Cómo me conecto a Spark Beeline desde MRS?

  1. Inicie sesión en el nodo master del clúster como usuario root.
  2. Ejecute el siguiente comando para configurar las variables de entorno:

    source Client installation directory/bigdata_env

  3. Si la autenticación de Kerberos está habilitada para el clúster, autentifique al usuario. Si la autenticación Kerberos está deshabilitada, omita este paso.

    Comando: kinit MRS cluster user

    Ejemplo:

    • Si el usuario es un usuario máquina-máquina, ejecute kinit -kt user.keytab sparkuser.
    • Si el usuario es un usuario hombre-máquina, ejecute kinit sparkuser.
  4. Ejecute el siguiente comando para conectarse a Spark Beeline:

    spark-beeline

  5. Ejecute comandos en Spark Beeline. Por ejemplo, cree la tabla test en el directorio obs://mrs-word001/table/.

    create table test(id int) location 'obs://mrs-word001/table/';

  6. Consultar todas las tablas.

    show tables;

    Si se muestra el test de tabla en la salida del comando, se accede a OBS correctamente.

    Figura 1 Nombre de tabla devuelto
  7. Presione Ctrl+C para salir de Spark beeline.

Desarrollo de servicios de big data Preguntas frecuentes

more