程序类名：由用户程序内的函数指定， MRS 只负责参数的传入。 数据输入路径：通过单击“HDFS”或者“OBS”选择或者直接手动输入正确路径。 数据输出路径：输出路径请手动输入一个不存在的目录。 最多为150000字符，可以包含;|&'$特殊字符，不能包含><，但可为空。 注意： 若输入带有敏感信息（如

查看更多 →

of TaskInputData objects 作业的输入详情，必填。针对不同的输入类型有不同的配置。创建时允许填写多路输入，但更新时只允许填写一路输入。 vcn TaskInputVcn object VCN 服务器 信息，仅输入类型为vcn时需填且必填。 表2 input data

查看更多 →

TaskInputData objects 作业的输入详情，必填。针对不同的输入类型有不同的配置。创建时允许填写多路输入，但更新时只允许填写一路输入。 vcn 否 TaskInputVcn object VCN服务器信息，仅输入类型为vcn时需填且必填。 表2 input data

查看更多 →

输入变量 输入变量可以理解为模块的参数，通过关键字 "variable" 进行声明。通过定义输入变量，我们可以无需变更模块的源代码就能灵活修改配置。输入变量的值可以使用默认值，CLI 选项，环境变量等方式来设置。 定义输入变量 按照约定，输入变量通常在名为 variables.tf

查看更多 →

输入变量 输入变量可以理解为模块的参数，通过关键字 "variable" 进行声明。通过定义输入变量，您可以无需变更模块的源代码就能灵活修改配置。输入变量的值可以使用默认值，CLI 选项，环境变量等方式来设置。 定义输入变量 按照约定，输入变量通常在名为 variables.tf

查看更多 →

Spark输入 概述 “Spark输入”算子，将SparkSQL表的指定列转换成同等数量的输入字段。 输入与输出 输入：SparkSQL表列 输出：字段 参数说明 表1 算子参数说明 参数 含义 类型 是否必填 默认值 Spark数据库 SparkSQL的数据库名称。 String

查看更多 →

表输入 概述 “表输入”算子，将关系型数据库表的指定列按顺序转换成同等数量的输入字段。 输入与输出 输入：表列 输出：字段 参数说明 表1 算子参数说明 参数 含义 类型 是否必填 默认值 输入字段 配置关系型数据库输入字段的相关信息： 位置：配置输入字段的位置。 字段名：配置输入字段名。

查看更多 →

Hive输入 概述 “Hive输入”算子，将Hive表的指定列转换成同等数量的输入字段。 输入与输出 输入：Hive表列 输出：字段 参数说明 表1 算子参数说明 参数 含义 类型 是否必填 默认值 Hive数据库 Hive的数据库名称。 String 否 default Hive表名

查看更多 →

HBase输入 概述 “HBase输入”算子，将HBase表的指定列转换成同等数量的输入字段。 输入与输出 输入：HBase表列 输出：字段 参数说明 表1 算子参数说明 参数 含义 类型 是否必填 默认值 HBase表类型 配置HBase表类型，可选项为normal（普通表）和phoenix表。

查看更多 →

MRS Kafka输入流 功能描述 创建source流从Kafka获取数据，作为作业的输入数据。 Apache Kafka是一个快速、可扩展的、高吞吐、可容错的分布式发布订阅消息系统，具有高吞吐量、内置分区、支持数据副本和容错的特性，适合在大规模消息处理场景中使用。MRS基于Apache

查看更多 →

程序类名：由用户程序内的函数指定，MRS只负责参数的传入。 数据输入路径：通过单击“HDFS”或者“OBS”选择或者直接手动输入正确路径。 数据输出路径：输出路径请手动输入一个不存在的目录。 最多为150000字符，不能包含;|&><'$特殊字符，可为空。 注意： 用户输入带有敏感信息（如登录

查看更多 →

填写 FTP服务器 支持的文件名、文件路径编码格式，不填写时使用系统默认格式UTF-8。 UTF-8 配置多个FTP服务器，多个服务器指定目录的数据将导入到HBase。 设置数据源信息 单击“下一步”，进入“输入设置”界面，设置数据源信息。 表2 输入设置参数 参数名 说明 示例 输入路径 FTP服务器

查看更多 →

MapReduce MapReduce基本原理 MapReduce与其他组件的关系 MapReduce开源增强特性 父主题： 组件介绍

查看更多 →

从HDFS/OBS导出时的输入路径。 说明： 路径参数可以使用宏定义，具体请参考配置项中使用宏定义。 /user/test 路径过滤器 配置通配符对源文件的输入路径包含的目录进行过滤。“输入目录”不参与过滤。配置多个过滤条件时使用“,”隔开，配置为空时表示不过滤目录。不支持正则表达式过滤。 “

查看更多 →

资源将Jar包添加到资源管理列表中，具体操作请参考新建资源。 Jar包参数 否 Jar包的参数。 输入数据路径 否 选择输入数据所在的路径。 输出数据路径 否 选择输出数据存储的路径。 表2 高级参数 参数 是否必选 说明 节点状态轮询时间（秒） 是 设置轮询时间（1~60秒），每隔x秒查询一次节点是否执行完成。

查看更多 →

HDFS客户端配置文件路径：客户端安装目录/HDFS/hadoop/etc/hadoop/hdfs-site.xml。 Yarn客户端配置文件路径：客户端安装目录/HDFS/hadoop/etc/hadoop/yarn-site.xml。 MapReduce客户端配置文件路径：客户端安装目

查看更多 →

HDFS客户端配置文件路径：客户端安装目录/HDFS/hadoop/etc/hadoop/hdfs-site.xml。 Yarn客户端配置文件路径：客户端安装目录/HDFS/hadoop/etc/hadoop/yarn-site.xml。 MapReduce客户端配置文件路径：客户端安装目

查看更多 →

OdDt/yn...etM 配置多个SFTP服务器，多个服务器指定目录的数据将导入到HBase。 设置数据源信息 单击“下一步”，进入“输入设置”界面，设置数据源信息。 表2 输入设置参数 参数名 说明 示例 输入路径 SFTP服务器中源文件的输入路径，如果连接器配置多个地址此处可对应使用“

查看更多 →

OdDt/yn...etM 配置多个SFTP服务器，多个服务器指定目录的数据将导入到HBase。 设置数据源信息 单击“下一步”，进入“输入设置”界面，设置数据源信息。 表2 输入设置参数 参数名 说明 示例 输入路径 SFTP服务器中源文件的输入路径，如果连接器配置多个地址此处可对应使用“

查看更多 →

切换到上一级路径。 health cd .. 切换到指定的路径，如切换到src1。 health cd /src1 回到本项目根路径。 health cd / 回到本项目下DataSet路径。 health cd gene-assent:/DataSet/ 切换到引用数据的路径，例如引

查看更多 →

发展路径 华为云为伙伴量身定制了学习、成长、业务开展的路径，伙伴可以根据公司自身业务方向选择以下一个或几个发展路径，助力伙伴业务持续高速发展。 伙伴发展路径简介 软件合作伙伴发展路径 服务合作伙伴发展路径 数字化转型咨询与系统集成伙伴发展路径 学习与赋能合作伙伴发展路径 总经销商合作伙伴发展路径

查看更多 →