keytab、krb5.conf为示例，实际操作时请联系管理员获取相应权限的账号以及对应账号的keytab文件和krb5文件。 用户可登录 FusionInsight Manager，选择“系统 > 权限 > 域和互信”，查看“本端域”参数，即为当前系统 域名 。 “zookeeper/hadoop

查看更多 →

在缓存中找不到HDFS_DELEGATION_TOKEN如何处理 问题 安全模式下，为什么在缓存中找不到HDFS_DELEGATION_TOKEN？ 回答 在MapReduce中，默认情况下，任务完成之后，HDFS_DELEGATION_TOKEN将会被删除。因此如果在下一个任务

查看更多 →

使用 自定义镜像 创建训练作业找不到启动文件 问题现象 使用自定义镜像创建训练作业，出现如下报错，提示找不到运行的主文件：no such file or directory。 原因分析 根据报错提示可以判断是运行命令的启动文件目录不正确导致运行失败。 处理方法 需要排查执行命令的启动文件目录是否正确，具体操作如下：

查看更多 →

原因4： 云服务器 DNS配置错误，导致解析不到文件系统的域名，挂载失败。 确认租户DNS的配置，执行cat /etc/resolv.conf命令。 如果没有配置DNS，需配置DNS。配置DNS请参见配置DNS。 如果配置了DNS，需确认DNS的正确性，执行如下命令： nslookup 文件系统域名 如果解析出来

查看更多 →

配置场景 使用Spark提交任务时，Driver默认会去HBase 获取Token ，访问HBase则需要配置文件“jaas.conf”进行安全认证。此时如果用户未配置“jaas.conf”文件，会导致应用运行失败。 因此，根据应用是否涉及HBase进行以下处理： 当应用不涉及HBase时，即无需获取HBase

查看更多 →

ain.csr”文件，具体文件说明如表所示。 表1 域名类型说明 文件夹/文件名称 文件夹内容 Tomcat keystorePass.txt：证书密码。 server.jks：证书文件。 Nginx server.crt：证书文件，包含两段证书代码，分别为 服务器 证书和CA中间证书。

查看更多 →

下载样例工程的Maven工程源码和配置文件，请参见获取代码样例工程。 将样例代码导入IDEA中。 获取配置文件。 从集群的客户端中获取文件。在“$SPARK_HOME/conf”中下载hive-site.xml与spark-defaults.conf文件到本地。 在集群的FusionInsight

查看更多 →

配置场景 使用Spark提交任务时，Driver默认会去HBase获取Token，访问HBase则需要配置文件“jaas.conf”进行安全认证。此时若用户未配置“jaas.conf”文件，会导致应用运行失败。 因此，根据应用是否涉及HBase进行以下处理： 当应用不涉及HBase时，即无需获取HBase

查看更多 →

DNS地址 配置错误，DNS无法解析域名obs.myhuaweicloud.com。 解决方案 配置DNS完成后，重新执行安装脚本。操作步骤如下所示： 执行以下命令，查看“resolv.conf”文件。 cat /etc/resolv.conf 执行以下命令，ping域名，若回显如图2所示，请进行步骤

查看更多 →

Flume向Spark Streaming提交作业后报类找不到错误 用户问题 Flume向Spark Streaming提交作业，提交到集群后报类找不到的错误。 问题现象 Spark Streaming代码打成jar包提交到集群后报类找不到错误，通过以下两种方式依然不生效。 在提交Spark作业的时候使用--jars

查看更多 →

Redis客户端。 前提条件 已成功申请Redis实例，且状态为“运行中”。 已创建弹性云服务器，创建弹性云服务器的方法，请参见创建弹性云服务器。 如果弹性云服务器为Linux系统，该弹性云服务器必须已经安装gcc编译环境。 连接实例前确保客户端与Redis实例之间网络互通，具体请参考连接Redis网络要求。

查看更多 →

，因此MapReduce会报类找不到。 处理步骤 方案一： 如果文件较小，则可以将默认长度设置得大于文件最大长度，例如最大的文件是95 MB，则设置： hive.exec.copyfile.maxsize=104857600 方案二： 如果确实文件较大，需要使用distcp任务来

查看更多 →

安全和认证（postgresql.conf） 介绍设置客户端和服务器的安全认证方式的相关参数。 authentication_timeout 参数说明：完成客户端认证的最长时间。如果一个客户端没有在这段时间里完成与服务器端的认证，则服务器自动中断与客户端的连接，这样就避免了出问题的客户端无限制地占用连接数。

查看更多 →

.keytab，然后使用--keytab又指定了同一个文件，导致一个文件多次被上传。 处理步骤 问题1： 重新kinit一个用户并修改相应的配置参数。 问题2： 查看hadoop相关的配置项是否正确，查看spark的conf目录下的core-site.xml，hdfs-site.xml，yarn-site

查看更多 →

keytab、krb5.conf 两个文件上传客户端所在服务器上。 通过IDEA自带的Maven工具，打包项目，生成jar包。具体操作请参考在Linux环境中调测Spark应用。 编译打包前，样例代码中的user.keytab、krb5.conf文件路径需要修改为该文件所在客户端服务器的实际路

查看更多 →

keytab、krb5.conf 两个文件上传客户端所在服务器上。 通过IDEA自带的Maven工具，打包项目，生成jar包。具体操作请参考在Linux环境中编包并运行Spark程序。 编译打包前，样例代码中的user.keytab、krb5.conf文件路径需要修改为该文件所在客户端服务器的实际

查看更多 →

使用Windows下生成的文本文件时报错找不到路径？ 问题现象 当在Notebook中使用Windows下生成的文本文件时，文本内容无法正确读取，可能报错找不到路径。 原因分析 Notebook是Linux环境，和Windows环境下的换行格式不同，Windows下是CRLF，而Linux下是LF。

查看更多 →

使用Windows下生成的文本文件时报错找不到路径？ 问题现象 当在Notebook中使用Windows下生成的文本文件时，文本内容无法正确读取，可能报错找不到路径。 原因分析 Notebook是Linux环境，和Windows环境下的换行格式不同，Windows下是CRLF，而Linux下是LF。

查看更多 →

setProperty("java.security.krb5.conf", confDirPath + "krb5.conf"); // set the keytab file name conf.set("username.client.keytab

查看更多 →

已获取样例工程运行所需的配置文件及认证文件，详细操作请参见准备连接HBase集群配置文件。 配置样例代码 以下为“src/main/resources”目录下提供的与认证相关的配置文件。 zoo.cfg # The configuration in jaas.conf used to connect

查看更多 →

2-准备开发用户中下载的user.keytab和krb5.conf文件拷贝到Linux环境的“/opt/conf”目录下，可参考5.4.1-编译并运行程序。 在二次开发过程中，PRINCIPAL需要用到的用户名，应该填写为带域名的用户名，例如创建的用户为test，域名为HADOOP.COM，则其PRIN

查看更多 →