.jpg)
.jpg)
.jpg)
.jpg)
-
Spark应用开发常见问题
![]()
，应用挂起不退出 Spark应用名在使用yarn-cluster模式提交时不生效 如何采用Java命令提交Spark应用 SparkSQL UDF功能的权限控制机制 由于kafka配置的限制，导致Spark Streaming应用运行失败 如何使用IDEA远程调试 使用IBM JDK产生异常，提示“Problem
来自：帮助中心 -
Spark应用开发常见问题
![]()
Streaming应用运行失败 执行Spark Core应用，尝试收集大量数据到Driver端，当Driver端内存不足时，应用挂起不退出 Spark应用名在使用yarn-cluster模式提交时不生效 如何使用IDEA远程调试 如何采用Java命令提交Spark应用 使用IBM JDK产生异常，提示“Problem
来自：帮助中心 -
Spark应用开发常见问题
![]()
Streaming应用运行失败 执行Spark Core应用，尝试收集大量数据到Driver端，当Driver端内存不足时，应用挂起不退出 Spark应用名在使用yarn-cluster模式提交时不生效 如何使用IDEA远程调试 如何采用Java命令提交Spark应用 使用IBM JDK产生异常，提示“Problem
来自：帮助中心 -
Spark应用开发常见问题
![]()
由于Kafka配置的限制，导致Spark Streaming应用运行失败 执行Spark Core应用，尝试收集大量数据到Driver端，当Driver端内存不足时，应用挂起不退出 Spark应用名在使用yarn-cluster模式提交时不生效 如何使用IDEA远程调试 如何采用Java命令提交Spark应用
来自：帮助中心 -
Spark应用开发常见问题
![]()
由于Kafka配置的限制，导致Spark Streaming应用运行失败 执行Spark Core应用，尝试收集大量数据到Driver端，当Driver端内存不足时，应用挂起不退出 Spark应用名在使用yarn-cluster模式提交时不生效 如何使用IDEA远程调试 如何采用Java命令提交Spark应用
来自：帮助中心 -
IntelliJ IDEA等平台
![]()
IntelliJ IDEA等平台 API检索 打开插件左侧主面板：点击IDEA左侧工具框中的"Huawei Cloud Toolkit"工具按钮、点击插件主面板中的API主页，则可打开华为云API插件主面板 。 在搜索框中搜索华为云发布的所有云服务、API、SDK、错误码等。同时
来自：帮助中心 -
IntelliJ IDEA等平台
![]()
IntelliJ IDEA等平台 补全操作 在IntelliJ IDEA的编辑中输入代码时会，提供代码补全功能，这时会提示API联想，选择想要插入的API，插入SDK代码，API调用的SDK代码一键生成。同时在右下角弹出气泡可以根据提示查看插入API的详情。 图1 完成补全后，在
来自：帮助中心 -
IntelliJ IDEA等平台
![]()
IntelliJ IDEA等平台 安装方式 请参考IntelliJ平台上API插件的安装。 安装验证 在IntelliJ系列平台上安装插件成功后在左侧的导航栏中可以看到Huawei Cloud Toolkit图标，则说明安装成功。 父主题： 底座插件安装
来自：帮助中心 -
IntelliJ IDEA等平台
![]()
释器。 这里以IDEA为例介绍IntelliJ平台插件的安装流程，其他IntelliJ系列的IDE请参考IDEA。 开始安装 您可以在直接在IDE插件市场或者直接在JetBrains插件市场下载离线包安装。 IDE安装 在IntelliJ IDEA顶部菜单栏中选择File > S
来自：帮助中心 -
IntelliJ IDEA等平台
![]()
IntelliJ IDEA等平台 示例代码参考 打开插件左侧主面板：点击IDEA左侧工具框中的"Huawei Cloud Toolkit"工具按钮、点击插件主面板中的API主页，则可打开华为云API插件主面板 。 在搜索框中搜索示例代码。同时下面的热门推荐会为您展示最近有哪些常用的示例代码。
来自：帮助中心 -
IntelliJ IDEA等平台
-
新建Spark样例工程（可选）
![]()
新建Spark样例工程（可选） 操作场景 除了导入Spark样例工程，您还可以使用IDEA新建一个Spark工程。如下步骤以创建一个Scala工程为例进行说明。 操作步骤 打开IDEA工具，选择“Create New Project”。 图1 创建工程 在“New Project
来自：帮助中心 -
新建Spark样例工程（可选）
![]()
新建Spark样例工程（可选） 操作场景 除了导入Spark样例工程，您还可以使用IDEA新建一个Spark工程。如下步骤以创建一个Scala工程为例进行说明。 操作步骤 打开IDEA工具，选择“Create New Project”。 图1 创建工程 在“New Project
来自：帮助中心 -
新建Spark样例工程（可选）
![]()
新建Spark样例工程（可选） 操作场景 除了导入Spark样例工程，您还可以使用IDEA新建一个Spark工程。如下步骤以创建一个Scala工程为例进行说明。 操作步骤 打开IDEA工具，选择“Create New Project”。 图1 创建工程 在“New Project
来自：帮助中心 -
导入并配置Spark样例工程
![]()
样例代码项目 样例名称 样例语言 SparkJavaExample Spark Core程序 Java SparkScalaExample Spark Core程序 Scala SparkPyhtonExample Spark Core程序 Python SparkSQLJavaExample
来自：帮助中心 -
导入并配置Spark样例工程
![]()
样例代码项目 样例名称 样例语言 SparkJavaExample Spark Core程序 Java SparkScalaExample Spark Core程序 Scala SparkPyhtonExample Spark Core程序 Python SparkSQLJavaExample
来自：帮助中心 -
导入并配置Spark样例工程
![]()
样例代码项目 样例名称 样例语言 SparkJavaExample Spark Core程序 Java SparkScalaExample Spark Core程序 Scala SparkPythonExample Spark Core程序 Python SparkSQLJavaExample
来自：帮助中心 -
导入并配置Spark样例工程
![]()
样例代码项目 样例名称 样例语言 SparkJavaExample Spark Core程序 Java SparkScalaExample Spark Core程序 Scala SparkPythonExample Spark Core程序 Python SparkSQLJavaExample
来自：帮助中心 -
IntelliJ IDEA中远程提交拓扑执行Main时报错：Command line is too long
![]()
IntelliJ IDEA中远程提交拓扑执行Main时报错：Command line is too long 问题 IntelliJ IDEA中远程提交拓扑，执行Main方法时IntelliJ IDEA报如下错 ： Command line is too long. Shorten
来自：帮助中心 -
准备Spark应用Java开发环境
![]()
Windows：JDK安装目录\jre\lib\ext\ 安装IntelliJ IDEA和JDK工具，并进行相应的配置。 安装JDK。 安装IntelliJ IDEA工具。 在IntelliJ IDEA中配置JDK。 打开IntelliJ IDEA，选择“Configure”。 图1 Quick Start
来自：帮助中心 -
新建Spark样例工程（可选）
![]()
新建Spark样例工程（可选） 操作场景 除了导入Spark样例工程，您还可以使用IDEA新建一个Spark工程。如下步骤以创建一个Scala工程为例进行说明。 操作步骤 打开IDEA工具，选择“Create New Project”。 图1 创建工程 在“New Project
来自：帮助中心
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
