mrs
- 开发指南(适用于2.x及之前)
- 简介
- MapReduce服务样例工程构建方式
- HBase应用开发
- Hive应用开发
- MapReduce应用开发
- HDFS应用开发
- Spark应用开发
- 概述
- 环境准备
- 开发程序
- 调测程序
- 调优程序
- Spark接口
- FAQ
- 如何添加自定义代码的依赖包
- 如何处理自动加载的依赖包
- 运行SparkStreamingKafka样例工程时报“类不存在”问题
- 执行Spark Core应用,尝试收集大量数据到Driver端,当Driver端内存不足时,应用挂起不退出
- Spark应用名在使用yarn-cluster模式提交时不生效
- 如何采用Java命令提交Spark应用
- SparkSQL UDF功能的权限控制机制
- 由于kafka配置的限制,导致Spark Streaming应用运行失败
- 如何使用IDEA远程调试
- 使用IBM JDK产生异常,提示“Problem performing GSS wrap”信息
- Structured Streaming的cluster模式,在数据处理过程中终止ApplicationManager,应用失败
- Spark on Yarn的client模式下spark-submit提交任务出现FileNotFoundException异常
- Spark任务读取HBase报错“had a not serializable result”
- 开发规范
- Storm应用开发
- Kafka应用开发
- Presto应用开发
- OpenTSDB应用开发
- Flink应用开发
- Impala应用开发
- Alluxio应用开发
- 附录
准备开发用户
链接复制成功!
更新时间:2020/12/15 GMT+08:00
开发用户用于运行样例工程。用户需要有HBase权限,才能运行HBase样例工程。
前提条件
MRS服务集群开启了Kerberos认证,没有开启Kerberos认证的集群忽略该步骤。
操作步骤
- 登录MRS Manager,请参考登录MRS Manager。
- 在MRS Manager界面选择“系统设置 > 角色管理 > 添加角色”,如图 1 添加角色所示。
- 填写角色的名称,例如hbaserole。
- 编辑角色,在“权限”的表格中选择“HBase> HBase Scope”,勾选“Admin”、“Create”、“Read”、“Write”和“Execute”,单击“确定”保存,如图2所示。
- 单击“系统设置 > 用户管理 > 添加用户”,为样例工程创建一个用户。
- 填写用户名,例如hbaseuser,用户类型为“机机”用户,加入用户组supergroup,设置其“主组”为supergroup,并绑定角色hbaserole取得权限,单击“确定”,如图3所示。
- 在MRS Manager界面选择“系统设置 > 用户管理”,在用户名中选择hbaseuser,然后在右侧“操作”列中选择“更多 >下载认证凭据”,保存后解压得到用户的user.keytab文件与krb5.conf文件,用于在样例工程中进行安全认证,如图4所示。
参考信息
如果修改了组件的配置参数,需重新下载客户端配置文件并更新运行调测环境上的客户端。
父主题: 环境准备
