用户管理”，在新增用户的操作列单击“更多 > 下载认证凭据”。 将待运行的jar程序上传到集群中，本示例使用Spark自带的样例程序。 上传2创建的用户认证凭据到集群客户端节点的“/opt”目录下，并执行如下命令解压。 tar -xvf XXX_keytab.tar 您将会得到“user

查看更多 →

执行SQL提交任务到指定队列时报错 问题现象 执行SQL提交任务到Yarn报如下错误： Failed to submit application_1475400939788_0033 to YARN : org.apache.hadoop.security.AccessControlException:

查看更多 →

提交效果评估任务 功能介绍 该接口用于提交推荐效果评估任务。 URI POST /v1/{project_id}/evaluate 参数说明请参见表1。 表1 URI参数说明 名称 是否必选 类型 说明 project_id 是 String 项目编号，用于资源隔离。获取方法请参见获取项目ID。

查看更多 →

提交任务类请求结果 响应（任务类） 返回值 父主题： 公共参数

查看更多 →

将生成的Jar包（如CollectFemaleInfo.jar）拷贝到Spark运行环境下（即Spark客户端），如“/opt/female”。开启Kerberos认证的安全集群下把从准备Spark应用开发用户中获取的user.keytab和krb5.conf文件拷贝到Spark客户端conf目录下，如：/opt

查看更多 →

JD BCS erver长时间运行导致磁盘空间不足 用户问题 连接Spark的JDB CS erver服务提交spark-sql任务到yarn集群上，在运行一段时间以后会出现Core节点的数据盘被占满的情况。 问题现象 客户连接Spark的JDBCServer服务提交spark-sql任务到yarn集群上，在运行一段时间以后会出现Core节点的数据盘被占满的情况。

查看更多 →

提交批量创建异步任务 功能介绍 提交批量创建异步任务，当批量异步任务创建或更新参数后，系统会自动开始进行参数校验，待所有任务成功完成参数校验后并且无报错时，可调用此接口开始创建DRS任务实例。 调试 您可以在 API Explorer 中调试该接口，支持自动认证鉴权。API Expl

查看更多 →

viewaccesscontrol.enable=true到客户端目录下“Spark2x/spark/conf/spark-defaults.conf”配置文件中，重启JDBCServer实例。 MRS _3.2.0-LTS.1.6以及之后补丁，Spark支持子查询字段不带聚合函数语法，开启方法（

查看更多 →

1.0/analysis/task/sparkid { "taskId":"xxxx", "sparkId":"xxx" } 参数说明 参数名 类型 备注 taskId String 任务ID。 sparkId String Spark任务ID。 响应 响应样例 { "success":

查看更多 →

下载认证凭据”。 登录Spark客户端所在节点，上传2创建的用户认证凭据到集群的“/opt”目录下，并执行如下命令解压： tar -xvf MRSTest _xxxxxx_keytab.tar 得到user.keytab和krb5.conf两个文件。 在对集群操作之前首先需要执行：

查看更多 →

MRS自定义类型集群可以通过增加Task节点，提升计算能力。集群Task节点主要用于处理数据，不存放持久数据。 通过租户资源绑定新增的Task节点，可实现提交Spark任务到新增的Task节点。 配置MRS集群阈值类告警 MRS集群提供可视化、便捷的监控告警功能。用户可以快速获取集群关键性能指标，并评测集群健康状态。

查看更多 →

MRS集群管理 配置MRS集群阈值类告警 提交Spark任务到新增Task节点 配置MRS集群弹性伸缩 MRS集群数据备份与恢复

查看更多 →

spark-examples/sparknormal-examples”。 SparkHbasetoCarbonJavaExample Spark同步HBase数据到CarbonData的Java示例程序。 本示例工程中，应用将数据实时写入HBase，用于点查业务。数据每隔一段时

查看更多 →

如何采用Java命令提交Spark应用 问题 除了spark-submit命令提交应用外，如何采用Java命令提交Spark应用？ 回答 您可以通过org.apache.spark.launcher.SparkLauncher类采用java命令方式提交Spark应用。详细步骤如下：

查看更多 →

如何采用Java命令提交Spark应用 问题 除了spark-submit命令提交应用外，如何采用Java命令提交Spark应用？ 回答 您可以通过org.apache.spark.launcher.SparkLauncher类采用java命令方式提交Spark应用。详细步骤如下：

查看更多 →

MRS集群支持提交哪些形式的Spark作业？ MRS集群的租户资源最小值改为0后，只能同时运行一个Spark任务吗？ 作业提交参数间用空格隔开导致参数信息不被识别如何处理？ Spark作业的Client模式和Cluster模式有什么区别？ 如何查看MRS作业的日志？ 提交作业时系

查看更多 →

--clusterrole=edit --serviceaccount=default:spark --namespace=default 以提交Spark-Pi的作业到CCE为例： spark-submit \ --master k8s://https://**.**.**.**:5443 \

查看更多 →

直接重启 直接重启期间，不可新提交任务，正在运行Spark、Flink任务有重试机制不受影响。 直接重启耗时约5分钟。 滚动重启 依赖NodeManager的remote shuffle Spark任务受影响，Flink任务有概率失败，Hive任务有概率失败。 滚动重启10节点耗时约25分钟。

查看更多 →

直接重启 直接重启期间，不可新提交任务，正在运行Spark、Flink任务有重试机制不受影响。 直接重启耗时约5分钟。 滚动重启 依赖NodeManager的remote shuffle Spark任务受影响，Flink任务有概率失败，Hive任务有概率失败。 滚动重启10节点耗时约25分钟。

查看更多 →

结果：单击“结果”，查看SparkSql和SparkScript类型的“状态”为“已完成”且“执行结果”为“成功”的作业执行结果。 删除：单击“删除”，删除一个作业。操作方法，请参见删除作业。 说明： 作业删除后不可恢复，请谨慎操作。 当选择保留作业日志到OBS或HDFS时，系统

查看更多 →

如何采用Java命令提交Spark应用 问题 除了spark-submit命令提交应用外，如何采用Java命令提交Spark应用？ 回答 您可以通过org.apache.spark.launcher.SparkLauncher类采用java命令方式提交Spark应用。详细步骤如下：

查看更多 →