MapReduce MapReduce基本原理 MapReduce与其他组件的关系 MapReduce开源增强特性 父主题： 组件介绍

查看更多 →

合并本地上传文件 功能介绍 合并本地上传文件。 URI URI格式 GET /softcomai/datalake/collection/v1.0/upload/complete 参数说明 参数名 是否必选 参数类型 备注 uploadId 是 String 文件唯一标识。 请求

查看更多 →

数据集列合并 概述 将两个包含相同行数的数据集，按照列拼接，形成一个新的数据集。 输入 两个行数相同的数据集 参数 子参数 参数说明 inputs left_dataframe 数据集一，列合并后将在左边 right_dataframe 数据集二，列合并后将在右边 输出 数据集 参数说明

查看更多 →

数据集行合并 概述 多个数据集按照行合并为一个数据集。 输入 参数 子参数 参数说明 inputs dataframe_1 被合并的数据集一 dataframe_2 被合并的数据集二 dataframe_3 被合并的数据集三（可缺省） dataframe_4 被合并的数据集四（可缺省）

查看更多 →

合并请求模板 该功能支持“专业版套餐”及“铂金版套餐”用户。 合并请求模板位于仓库详情中的 “设置 > 模板管理 > 合并请求模板”。当创建合并请求时，您可以选择一个合并请求模板，模板内容将会自动应用到合并请求上。 此设置只针对被设置的仓库生效。 仓库内的仓库成员可以查看该页面，

查看更多 →

送货批次打印【合并】（PDA） 【功能说明】 用于PDA合并启动送货批号并打印，支持补印和删除； 【操作步骤】 送货单查询：输入查询条件：开始日期和结束日期必输，默认当前日期的前一个月，选择业务类型和工厂名称 -> 单击“获取单据列表”按钮，查询出符合条件的送货单列表； 图1 送货单查询

查看更多 →

在左上方有新建合并请求入口。 开启中：代表该请求已进入检视或合并阶段，分支未合并。 已合并：代表该请求已经完成审核，并完成分支合并的动作。 已关闭：代表该请求被取消，分支未产生实际合并。 所有：显示所有状态的合并请求。 新建合并请求 假设管理员已经设置好了分支合并规则，当您在开发

查看更多 →

merge”，每次数据加载都可触发Minor合并。如果任意segment均可合并，那么合并将于数据加载时并行进行。 Minor合并有两个级别。 Level 1：合并未合并的segment。 Level 2：合并已合并的segment，以形成更大的segment。 Major合并： 在Major合并中，许多seg

查看更多 →

merge”，每次数据加载都可触发Minor合并。如果任意segment均可合并，那么合并将于数据加载时并行进行。 Minor合并有两个级别。 Level 1：合并未合并的segment。 Level 2：合并已合并的segment，以形成更大的segment。 Major合并： 在Major合并中，许多seg

查看更多 →

管理合并请求 合并请求管理 解决合并请求的代码冲突 评审意见门禁详解 流水线门禁详解 E2E单号关联门禁详解 星级评价门禁详解 检视门禁详解 审核门禁详解 父主题： 使用代码托管仓库

查看更多 →

支持扩容减容、实例迁移、升级、健康检查等。 MapReduce开源增强特性：特定场景优化MapReduce的Merge/Sort流程提升MapReduce性能 下图展示了MapReduce任务的工作流程。 图2 MapReduce 作业 图3 MapReduce作业执行流程 Reduce过程分

查看更多 →

MapReduce Action 功能描述 MapReduce任务节点，负责执行一个map-reduce任务。 参数解释 MapReduce Action节点中包含的各参数及其含义，请参见表1。 表1 参数含义 参数 含义 name map-reduce action的名称 resourceManager

查看更多 →

使用MapReduce 配置使用分布式缓存执行MapReduce任务 配置MapReduce shuffle address 配置MapReduce集群管理员列表 通过Windows系统提交MapReduce任务 配置MapReduce任务日志归档和清理机制 MapReduce性能调优

查看更多 →

MapReduce Action 功能描述 MapReduce任务节点，负责执行一个map-reduce任务。 参数解释 MapReduce Action节点中包含的各参数及其含义，请参见表1。 表1 参数含义 参数 含义 name map-reduce action的名称 resourceManager

查看更多 →

使用MapReduce 配置使用分布式缓存执行MapReduce任务 配置MapReduce shuffle address 配置MapReduce集群管理员列表 通过Windows系统提交MapReduce任务 配置MapReduce任务日志归档和清理机制 MapReduce性能调优

查看更多 →

MRS MapReduce 功能 通过MRS MapReduce节点实现在MRS中执行预先定义的MapReduce程序。 参数 用户可参考表1和表2配置MRS MapReduce节点的参数。 表1 属性参数 参数 是否必选 说明 节点名称 是 节点名称，可以包含中文、英文字母、数

查看更多 →

Linux系统迁移，如何合并磁盘？ 场景描述 源端Linux系统迁移，想要将源端多个磁盘分区迁移到目的端后合并到一个磁盘内。 解决方案 通过在源端修改 SMS -Agent的配置文件，即可实现将源端多个磁盘中的分区迁移到目的端同一个磁盘内。 该方案对配置文件所做出的改动，仅涉及迁移后的目的端，不会对源端有影响。

查看更多 →

合并前请确保HDFS上有足够的存储空间，至少需要被合并表大小的一倍以上。 合并表数据的操作需要单独进行，在此过程中读表，可能临时出现找不到文件的问题，合并完成后会恢复正常；另外在合并过程中请注意不要对相应的表进行写操作，否则可能会产生数据一致性问题。 如果合并完成后，在一直处于连接状态的spark-beeline/spark-sql

查看更多 →

开发MapReduce应用 MapReduce统计样例程序 MapReduce访问多组件样例程序 父主题： MapReduce开发指南（普通模式）

查看更多 →

MapReduce接口介绍 MapReduce Java API接口介绍 MapReduce REST API接口介绍 父主题： MapReduce应用开发常见问题

查看更多 →

开发MapReduce应用 MapReduce统计样例程序 MapReduce访问多组件样例程序 父主题： MapReduce开发指南（安全模式）

查看更多 →