更新时间:2024-08-06 GMT+08:00
如何使用PySpark连接MRS Spark?
问:如何在ECS服务器上用PySpark连接内网开启Kerberos认证的MRS Spark集群?
答:将Spark的“spark-defaults.conf”文件中“spark.yarn.security.credentials.hbase.enabled”修改为“true”,然后使用spark-submit --master yarn --keytab keytabfile --principal principal指定Kerberos认证文件。
父主题: 周边生态对接类