开发者学习中心

开发者一站式学习、体验中心,学有所得、学有所乐!

 

    java spark项目案例代码 更多内容
  • Spark Core样例程序(Java)

    Spark Core样例程序(Java) 功能简介 统计日志文件中本周末网购停留总时间超过2个小时的女性网民信息。 代码样例 下面代码片段仅为演示,具体代码参见com.huawei.bigdata.spark.examples.FemaleInfoCollection类:

    来自:帮助中心

    查看更多 →

  • 完成一次Scrum项目下的JAVA代码开发

    单击“新建项目”,选择项目模板为“Scrum”,填写项目的基本信息,完成项目的创建,跳转到项目首页。 在左侧导航栏选择“代码” > “代码托管”,单击“新建仓库”,选择“模板仓库” > “Java Maven Demo”,填写“代码仓库名称”,勾选上初始化设置,设置代码库的可见范围为“私有”。

    来自:帮助中心

    查看更多 →

  • 多项目管理实践案例

    项目管理实践案例 实践场景 实践步骤 父主题: 项目管理

    来自:帮助中心

    查看更多 →

  • Spark SQL样例程序(Java)

    Spark SQL样例程序(Java) 功能简介 统计日志文件中本周末网购停留总时间超过2个小时的女性网民信息。 代码样例 下面代码片段仅为演示,具体代码参见com.huawei.bigdata.spark.examples.FemaleInfoCollection: public

    来自:帮助中心

    查看更多 →

  • Flink DataStream Java样例代码

    Flink DataStream Java样例代码 功能简介 统计连续网购时间超过2个小时的女性网民信息,将统计结果直接打印。 代码样例 下面代码片段仅为演示,具体代码参见com.huawei.flink.example.stream.FlinkStreamJavaExample:

    来自:帮助中心

    查看更多 →

  • Flink异步Checkpoint Java样例代码

    += count; collector.collect(total); } } 应用代码 该段代码是流图定义代码,具体实现业务流程,另外,代码中窗口的触发时间使用了processing time。 1 2 3 4 5 6 7 8 9 10

    来自:帮助中心

    查看更多 →

  • 准备Spark应用Java开发环境

    准备Spark应用Java开发环境 操作场景 Java开发环境可以搭建在Windows环境下,而运行环境(即客户端)只能部署在Linux环境下。 操作步骤 对于Java开发环境,推荐使用IDEA工具,安装要求如下。 JDK使用1.7版本(或1.8版本) IntelliJ IDEA(版本:13

    来自:帮助中心

    查看更多 →

  • 如何采用Java命令提交Spark应用

    如何采用Java命令提交Spark应用 问题 除了spark-submit命令提交应用外,如何采用Java命令提交Spark应用? 回答 您可以通过org.apache.spark.launcher.SparkLauncher类采用java命令方式提交Spark应用。详细步骤如下:

    来自:帮助中心

    查看更多 →

  • 如何采用Java命令提交Spark应用

    如何采用Java命令提交Spark应用 问题 除了spark-submit命令提交应用外,如何采用Java命令提交Spark应用? 回答 您可以通过org.apache.spark.launcher.SparkLauncher类采用java命令方式提交Spark应用。详细步骤如下:

    来自:帮助中心

    查看更多 →

  • 如何采用Java命令提交Spark应用

    如何采用Java命令提交Spark应用 问题 除了spark-submit命令提交应用外,如何采用Java命令提交Spark应用? 回答 您可以通过org.apache.spark.launcher.SparkLauncher类采用java命令方式提交Spark应用。详细步骤如下:

    来自:帮助中心

    查看更多 →

  • Spark同步HBase数据到CarbonData(Java)

    Spark同步HBase数据到CarbonData(Java) 以下为Spark同步HBase数据到CarbonData的Java示例。 下面代码片段仅为演示。 具体代码参见:com.huawei.spark.examples.HBaseExternalHivetoCarbon。

    来自:帮助中心

    查看更多 →

  • Spark同步HBase数据到CarbonData(Java)

    Spark同步HBase数据到CarbonData(Java) 以下为Spark同步HBase数据到CarbonData的Java示例。 下面代码片段仅为演示。 具体代码参见:com.huawei.spark.examples.HBaseExternalHivetoCarbon。

    来自:帮助中心

    查看更多 →

  • 使用Spark执行Hudi样例程序开发思路

    使用Spark执行Hudi样例程序开发思路 场景说明 本章节介绍如何使用Spark操作Hudi执行插入数据、查询数据、更新数据、增量查询、特定时间点查询、删除数据等操作。 详细代码请参考样例代码。 打包项目 通过IDEA自带的Maven工具,打包项目,生成jar包。具体操作请参考

    来自:帮助中心

    查看更多 →

  • 使用Spark执行Hudi样例程序开发思路

    使用Spark执行Hudi样例程序开发思路 场景说明 本章节介绍如何使用Spark操作Hudi执行插入数据、查询数据、更新数据、增量查询、特定时间点查询、删除数据等操作。 详细代码请参考样例代码。 打包项目 通过IDEA自带的Maven工具,打包项目,生成jar包。具体操作请参考在Linux环境中调测Spark应用。

    来自:帮助中心

    查看更多 →

  • 分布式Scan HBase表

    均在$SPARK_HOME目录执行,Java接口对应的类名前有Java字样,请参考具体样例代码进行书写。 yarn-client模式: java/scala版本(类名等请与实际代码保持一致,此处仅为示例) bin/spark-submit --master yarn --deploy-mode

    来自:帮助中心

    查看更多 →

  • 分布式Scan HBase表

    均在$SPARK_HOME目录执行,Java接口对应的类名前有Java字样,请参考具体样例代码进行书写。 yarn-client模式: java/scala版本(类名等请与实际代码保持一致,此处仅为示例) bin/spark-submit --master yarn --deploy-mode

    来自:帮助中心

    查看更多 →

  • BulkDelete接口使用

    令均在“$SPARK_HOME”目录执行,Java接口对应的类名前有Java字样,请参考具体样例代码进行书写。 yarn-client模式: java/scala 版本(类名等请与实际代码保持一致,此处仅为示例) bin/spark-submit --master yarn --deploy-mode

    来自:帮助中心

    查看更多 →

  • 分布式Scan HBase表

    令均在“$SPARK_HOME”目录执行,Java接口对应的类名前有Java字样,请参考具体样例代码进行书写。 yarn-client模式: java/scala版本(类名等请与实际代码保持一致,此处仅为示例) bin/spark-submit --master yarn --deploy-mode

    来自:帮助中心

    查看更多 →

  • BulkDelete接口使用

    令均在“$SPARK_HOME”目录执行,Java接口对应的类名前有Java字样,请参考具体样例代码进行书写。 yarn-client模式: java/scala 版本(类名等请与实际代码保持一致,此处仅为示例) bin/spark-submit --master yarn --deploy-mode

    来自:帮助中心

    查看更多 →

  • 分布式Scan HBase表

    令均在“$SPARK_HOME”目录执行,Java接口对应的类名前有Java字样,请参考具体样例代码进行书写。 yarn-client模式: java/scala版本(类名等请与实际代码保持一致,此处仅为示例) bin/spark-submit --master yarn --deploy-mode

    来自:帮助中心

    查看更多 →

  • BulkDelete接口使用

    令均在“$SPARK_HOME”目录执行,Java接口对应的类名前有Java字样,请参考具体样例代码进行书写。 yarn-client模式: java/scala 版本(类名等请与实际代码保持一致,此处仅为示例) bin/spark-submit --master yarn --deploy-mode

    来自:帮助中心

    查看更多 →

共105条
看了本文的人还看了