对于Shell客户端方式执行的任务 先执行kinit命令认证用户。 通过操作系统定时任务或者其他定时任务方式定时执行kinit命令认证用户。 提交作业执行大数据任务。 对于Spark作业 通过spark-shell、spark-submit、spark-sql方式提交作业，可以直接在命令行中指定Keytab和

查看更多 →

足时，应用挂起不退出 Spark应用名在使用yarn-cluster模式提交时不生效 如何采用Java命令提交Spark应用 SparkSQL UDF功能的权限控制机制 由于kafka配置的限制，导致Spark Streaming应用运行失败 如何使用IDEA远程调试 使用IBM

查看更多 →

Spark应用名在使用yarn-cluster模式提交时不生效 问题 Spark应用名在使用yarn-cluster模式提交时不生效，在使用yarn-client模式提交时生效，如图1所示，第一个应用是使用yarn-client模式提交的，正确显示代码里设置的应用名Spark P

查看更多 →

r”，提交任务需要增加--conf spark.driver.extraClassPath=/opt/client/Spark2x/spark/conf/:/opt/client/Spark2x/spark/jars/*:/opt/client/Spark2x/spark/x86/*:/kafkadir/*。

查看更多 →

配置。 在提交应用程序运行时，在命令中添加如下参数即可，详细示例可参考在Linux环境中调测Spark应用。 --jars $SPARK_CLIENT_HOME/jars/streamingClient010/kafka-client-2.4.0.jar,$SPARK_CLIEN

查看更多 →

由于Kafka配置的限制，导致Spark Streaming应用运行失败 执行Spark Core应用，尝试收集大量数据到Driver端，当Driver端内存不足时，应用挂起不退出 Spark应用名在使用yarn-cluster模式提交时不生效 如何使用IDEA远程调试 如何采用Java命令提交Spark应用

查看更多 →

为什么在Spark Shell中不能执行更新命令？ 问题 为什么在Spark Shell中不能执行更新命令？ 回答 本文档中给出的语法和示例是关于Beeline的命令，而不是Spark Shell中的命令。 若要在Spark Shell中使用更新命令，可以使用以下语法。 语法1 <carbon_context>

查看更多 →

r”，提交任务需要增加--conf spark.driver.extraClassPath=/opt/client/Spark2x/spark/conf/:/opt/client/Spark2x/spark/jars/*:/opt/client/Spark2x/spark/x86/*:/kafkadir/*。

查看更多 →

为什么在Spark Shell中不能执行更新命令？ 问题 为什么在Spark Shell中不能执行更新命令？ 回答 本文档中给出的语法和示例是关于Beeline的命令，而不是Spark Shell中的命令。 如果要在Spark Shell中使用更新命令，可以使用以下语法。 语法1

查看更多 →

test，输入密码完成认证（首次登录需要修改密码） 使用Spark的beeline命令提交任务，创建Spark表： spark-beeline create table sparktest(a int, b string); insert into sparktest values (1,"test01")

查看更多 →

普通模式，执行5。 配置Hue。 spark2x环境配置（如果不涉及spark2x任务，可以跳过此步骤）： hdfs dfs -put /opt/client/Spark2x/spark/jars/*.jar /user/oozie/share/lib/spark2x/ 当HDFS目录“/

查看更多 →

边缘运维工具edgectl是一个帮助用户在边缘侧诊断故障问题的工具，支持定位节点IEF软件安装、IEF软件故障、应用程序故障等常见问题。该工具还支持一键式收集节点全量IEF数据进行远程故障诊断。同时，为应对节点损坏问题，支持节点上IEF软件进行数据无损迁移。diagnose（诊断）：即对特定的故障场景进行全方位的诊断，定位故障原因。col

查看更多 →

删除命令 功能介绍 删除命令。 调试 您可以在 API Explorer 中调试该接口，支持自动认证鉴权。API Explorer可以自动生成SDK代码示例，并提供SDK代码示例调试功能。 URI DELETE /v2/{project_id}/link/instances/{ins

查看更多 →

service_id Integer 命令所属服务ID。 最小值：0 最大值：99999999999999999 command_id Integer 命令ID。 最小值：0 最大值：99999999999999999 command_name String 命令名称。 最小长度：0 最大长度：255

查看更多 →

设备命令 设备同步命令 设备异步命令 父主题： API

查看更多 →

命令解析 当执行命令alias -h/alias --help时，可以获取帮助文档。 在该命令中，包括了三个子命令： alias get命令 alias list命令 remove alias命令 父主题： 别名alias

查看更多 →

命令参考 详细的gsql参数请参见表1、表2、表3和表4。 表1 常用参数 参数 参数说明 取值范围 -c, --command=COMMAND 声明gsql要执行一条字符串命令然后退出。 - -d, --dbname=DBNAME 指定想要连接的数据库名称。 另外，gsql允许

查看更多 →

命令参考 详细的gsql参数请参见表1、表2、表3和表4。 表1 常用参数 参数 参数说明 取值范围 -c, --command=COMMAND 声明gsql要执行一条字符串命令然后退出。 - -d, --dbname=DBNAME 指定想要连接的数据库名称。 另外，gsql允许

查看更多 →

置。 在提交应用程序运行时，在命令中添加如下参数即可，详细示例可参考在Linux环境中编包并运行Spark程序。 --jars $SPARK_CLIENT_HOME/jars/streamingClient010/kafka-client-2.4.0.jar,$SPARK_CLI

查看更多 →

置。 在提交应用程序运行时，在命令中添加如下参数即可，详细示例可参考在Linux环境中编包并运行Spark程序。 --jars $SPARK_CLIENT_HOME/jars/streamingClient010/kafka-client-2.4.0.jar,$SPARK_CLI

查看更多 →

Streaming应用运行失败 执行Spark Core应用，尝试收集大量数据到Driver端，当Driver端内存不足时，应用挂起不退出 Spark应用名在使用yarn-cluster模式提交时不生效 如何使用IDEA远程调试 如何采用Java命令提交Spark应用 使用IBM JDK产生异常，提示“Problem

查看更多 →