文档首页/ MapReduce服务 MRS/ 常见问题/ 周边生态对接类/ 如何使用PySpark连接MRS Spark?
更新时间:2024-07-31 GMT+08:00
分享

如何使用PySpark连接MRS Spark?

:如何在ECS服务器上用PySpark连接内网开启Kerberos认证的MRS Spark集群?

:将Spark的“spark-defaults.conf”文件中“spark.yarn.security.credentials.hbase.enabled”修改为“true”,然后使用spark-submit --master yarn --keytab keytabfile --principal principal指定Kerberos认证文件。

相关文档