start_time 否 String 对比任务启动时间，时间戳格式，取值为空代表立即启动。 compare_mode 否 String 数据级对比模式，取值为空时需要在compare_object或者compare_object_with_token传对象信息，quick_comparison-快速对比。

查看更多 →

6-c18fea6jb502/compare-policy { "action" : "open", "begin_time" : "00:00:00", "compare_policy" : "normal", "compare_type" : [ "lines"

查看更多 →

MapReduce应用开发流程介绍 开发流程中各阶段的说明如图1和表1所示。 图1 MapReduce应用程序开发流程 表1 MapReduce应用开发的流程说明 阶段 说明 参考文档 了解基本概念 在开始开发应用前，需要了解MapReduce的基本概念。 MapReduce应用开发简介

查看更多 →

MapReduce统计样例程序 MapReduce统计样例程序开发思路 MapReduce统计样例代码 父主题： 开发MapReduce应用

查看更多 →

educer抽象类实现。 main方法提供建立一个MapReduce job，并提交MapReduce作业到hadoop集群。 代码样例 下面代码片段仅为演示，具体代码参见com.huawei.bigdata.mapreduce.examples.FemaleInfoCollector类：

查看更多 →

MapReduce Java API接口介绍 关于MapReduce的详细API可以直接参考官方网站上的描述：http://hadoop.apache.org/docs/r3.1.1/api/index.html 常用接口 MapReduce中常见的类如下： org.apache

查看更多 →

配置MapReduce shuffle address 配置场景 当MapReduce shuffle服务启动时，它尝试基于localhost绑定IP。如果需要MapReduce shuffle服务连接特定IP，可以参考该章节进行配置。 配置描述 当需要MapReduce shu

查看更多 →

MapReduce应用开发流程介绍 开发流程中各阶段的说明如图1和表1所示。 图1 MapReduce应用程序开发流程 表1 MapReduce应用开发的流程说明 阶段 说明 参考文档 了解基本概念 在开始开发应用前，需要了解MapReduce的基本概念。 MapReduce应用开发常用概念

查看更多 →

准备MapReduce应用开发用户 开发用户用于运行样例工程。用户需要有组件权限，才能运行样例工程。 前提条件 MRS 服务集群开启了Kerberos认证，没有开启Kerberos认证的集群忽略该步骤。 操作步骤 登录MRS Manager，在MRS Manager界面选择“系统设置

查看更多 →

MapReduce Java API接口介绍 关于MapReduce的详细API可以直接参考官方网站上的描述： http://hadoop.apache.org/docs/r3.1.1/api/index.html 常用接口 MapReduce中常见的类如下： org.apache

查看更多 →

MapReduce应用开发流程介绍 开发流程中各阶段的说明如图1和表1所示。 图1 MapReduce应用程序开发流程 表1 MapReduce应用开发的流程说明 阶段 说明 参考文档 了解基本概念 在开始开发应用前，需要了解MapReduce的基本概念。 MapReduce应用开发简介

查看更多 →

据它们的键缩小键/值对列表。MapReduce起到了将大事务分散到不同设备处理的能力，这样原来必须用单台较强 服务器 才能运行的任务，在分布式环境下也能完成。 更多信息，请参阅MapReduce教程。 MapReduce结构 如图2所示，MapReduce通过实现YARN的Clien

查看更多 →

取消对比任务 功能介绍 取消对比任务。 URI DELETE /v3/{project_id}/jobs/{job_id}/compare/{compare_job_id} 表1 路径参数 参数 是否必选 参数类型 描述 project_id 是 String 租户在某一Region下的Project

查看更多 →

下文菜单中选择所需的操作。 Compare with File（与文件比较）：将文件内容与文件的当前状态进行比较。 Compare with Previous（与上一个比较）：比较此事件和上一个事件之间的文件内容。 Select for Compare（选择比较）：选择要进行比较

查看更多 →

69e7ddef0/jobs/a2b4999c-0acf-45eb-843d-5c1cdb2jb201/object/compare { "compare_task_num" : 2 } 响应示例 状态码： 202 OK { } 状态码： 400 Bad Request {

查看更多 →

查询行数对比总览 功能介绍 查询行数对比总览。 URI GET /v3/{project_id}/jobs/{job_id}/compare/{compare_job_id}/line-overview 表1 路径参数 参数 是否必选 参数类型 描述 project_id 是 String

查看更多 →

params Array of objects 数据参数信息体。 详情请参见表6。 表6 params字段数据结构说明 参数 参数类型 描述 compare_result String 参数对比结果。取值： true false data_type String 参数类型 group String

查看更多 →

进行分页控制。 compare_type 否 String 对比任务类型，type参数是compare时必填。取值： object_compare：对象对比。 line_compare：行对比。 content_compare：内容对比。 data_compare：数据对比。 枚举值：

查看更多 →

Query参数 参数 是否必选 参数类型 描述 compare_type 否 String 对比任务类型： contents： 内容对比。 lines：行数对比。 random：抽样对比。 objects_comparison：对象对比。 compare_job_id 否 String 对比

查看更多 →

准备MapReduce应用开发环境 准备MapReduce开发和运行环境 导入并配置MapReduce样例工程 （可选）创建MapReduce样例工程 父主题： MapReduce开发指南（普通模式）

查看更多 →

MapReduce应用开发常用概念 Hadoop shell命令 Hadoop基本shell命令，包括提交MapReduce作业，kill MapReduce作业，进行HDFS文件系统各项操作等。 MapReduce输入输出(InputFormat，OutputFormat) M

查看更多 →