JAVA开发 场景说明 代码样例 父主题： 开发程序

查看更多 →

JAVA开发 场景说明 代码样例 父主题： 开发程序

查看更多 →

JAVA开发 场景说明 代码样例 父主题： 开发程序

查看更多 →

JAVA开发 场景说明 代码样例 父主题： 开发程序

查看更多 →

Spark应用开发 概述 环境准备 开发程序 调测程序 调优程序 Spark接口 FAQ 开发规范

查看更多 →

基于Java开发 驱动包、环境依赖 连接数据库 访问数据库 完整示例 父主题： 应用程序开发教程

查看更多 →

JAVA合约开发 SDK配置 SDK接口 合约结构 合约示例 合约安装 父主题： 合约开发

查看更多 →

非常低下；但是如果用foreachPartitions算子一次性处理一个partition的数据，那么对于每个 partition，只要创建一个数据库连接即可，然后执行批量插入操作，此时性能是比较高的。 RDD共享变量 在应用开发中，一个函数被传递给Spark操作（例如map和r

查看更多 →

Spark应用开发规则 Spark应用中，需引入Spark的类 对于Java开发语言，正确示例： // 创建SparkContext时所需引入的类。 import org.apache.spark.api.java.JavaSparkContext // RDD操作时引入的类。 import

查看更多 →

2.2/。 图1 Spark架构 Spark开发接口简介 Spark支持使用Scala、Java和Python语言进行程序开发，由于Spark本身是由Scala语言开发出来的，且Scala语言具有简洁易懂的特性，推荐用户使用Scala语言进行Spark应用程序开发。 按不同的语言分，Spark的API接口如表1所示。

查看更多 →

Spark应用开发规范 Spark应用开发规则 Spark应用开发建议

查看更多 →

Spark on Hudi开发规范 Spark读写Hudi开发规范 Spark读写Hudi资源配置建议 Spark On Hudi性能调优 父主题： Hudi应用开发规范

查看更多 →

Python和Spark开发平台 创建特征工程 数据采样 列筛选 数据准备 特征操作 Notebook开发 全量数据应用 发布服务 父主题： 特征工程

查看更多 →

式读取数据有一定的数据时延。 SparkSQL建表参数规范 Spark增量读取Hudi参数规范 Spark异步任务执行表compaction参数设置规范 Spark表数据维护规范 Spark并发写Hudi建议 父主题： Spark on Hudi开发规范

查看更多 →

8.0_131。 配置Java环境变量：右键“计算机>属性>高级系统设置>环境变量”，进行如下操作。 新建系统变量JAVA_HOME，变量值为实际JDK安装位置。 在Path中添加%JAVA_HOME%\bin;%JAVA_HOME%\jre\bin （注意用英文分号分隔）。 新建

查看更多 →

准备Java开发环境 操作场景 Java开发环境可以搭建在Windows环境下，而运行环境（即客户端）只能部署在Linux环境下。 操作步骤 对于Java开发环境，推荐使用IDEA工具，安装要求如下。 JDK使用1.7版本（或1.8版本） IntelliJ IDEA（版本：13.1

查看更多 →

Demo文件清单 文件名 路径 说明 DmsConsumer.java .\src\main\java\com\dms\consumer 消费消息的API。 DmsProducer.java .\src\main\java\com\dms\producer 生产消息的API。 dms

查看更多 →

Java开发环境配置 操作场景 在安装和使用Java SDK前，确保您已经完成开发环境的基本配置。 Java SDK要求使用JDK1.8或更高版本。考虑到后续版本的兼容性，推荐使用1.8版本。 在Java运行环境配置好的情况下，打开windows的命令行，执行命令Java -version，可以检查版本信息。

查看更多 →

Java应用程序开发 windows环境：java客户端仅支持64位操作系统与64位Java SDK。 SDK客户端配置 SDK客户端调用 示例Demo 父主题： 应用程序开发

查看更多 →

// 通过Spark接口获取表中的数据。 SparkConf conf = new SparkConf().setAppName("SparkHivetoHbase"); JavaSparkContext jsc = new JavaSparkContext(conf);

查看更多 →

查询合适的缩容数 功能介绍 该接口用于查询合适的缩容数。 调用方法 请参见如何调用API。 URI GET /v1.0/{project_id}/clusters/{cluster_id}/shrink-numbers 表1 路径参数 参数 是否必选 参数类型 描述 project_id

查看更多 →