Estos contenidos se han traducido de forma automática para su comodidad, pero Huawei Cloud no garantiza la exactitud de estos. Para consultar los contenidos originales, acceda a la versión en inglés.
Actualización más reciente 2023-11-20 GMT+08:00

Configuración del cliente MRS

Vaya a /opt/client/Spark2x/spark/conf (directorio de instalación del cliente Spark) y configure los siguientes parámetros en el archivo spark-defaults.conf:

spark.pyspark.driver.python=/usr/bin/python3
spark.yarn.dist.archives=hdfs://hacluster/user/python/python36.zip#Python