.jpg)
.jpg)
.jpg)
.jpg)
-
INPUT
![]()
INPUT (x, t)注册算子输入信息。注册算子输入信息成功后，自动生成算子输入的相关接口，用于获取算子输入的名称、设置算子输入的对应描述等。例如，注册算子输入x，算子输入接收的数据类型为TensorType{DT_FLOAT}，可调用INPUT(x, TensorType{DT_FLOAT})接口，注册算子输入成功后，自动生成以下相关
来自：帮助中心 -
准备初始数据
![]()
onents/mapreduce/input/”，并上传data.txt到此目录，操作如下： 在HDFS客户端使用以下命令创建目录。 hdfs dfs -mkdir -p /tmp/examples/multi-components/mapreduce/input/ 执行以下命令上传文件至HDFS。
来自：帮助中心 -
input
![]()
-
input
![]()
-
input
![]()
input_format_classname 格式 无。 说明 指定输入格式的类名，如org.apache.hadoop.mapred.TextInputFormat。 父主题： 标示符
来自：帮助中心 -
场景说明
![]()
ponents/mapreduce/input/”，并上传data.txt到此目录，命令如下： 在Linux系统HDFS客户端使用命令hdfs dfs -mkdir -p /tmp/examples/multi-components/mapreduce/input/ 在Linux系统HDFS客户端使用命令hdfs
来自：帮助中心 -
场景说明
![]()
ponents/mapreduce/input/”，并上传data.txt到此目录，命令如下： 在Linux系统HDFS客户端使用命令hdfs dfs -mkdir -p /tmp/examples/multi-components/mapreduce/input/ 在Linux系统HDFS客户端使用命令hdfs
来自：帮助中心 -
场景说明
![]()
ponents/mapreduce/input/”，并上传data.txt到此目录，命令如下： 在Linux系统HDFS客户端使用命令hdfs dfs -mkdir -p /tmp/examples/multi-components/mapreduce/input/ 在Linux系统HDFS客户端使用命令hdfs
来自：帮助中心 -
INPUT
![]()
INPUT (x, t)注册算子输入信息。注册算子输入信息成功后，自动生成算子输入的相关接口，用于获取算子输入的名称、设置算子输入的对应描述等。例如，注册算子输入x，算子输入接收的数据类型为TensorType{DT_FLOAT}，可调用INPUT(x, TensorType{DT_FLOAT})接口，注册算子输入成功后，自动生成以下相关
来自：帮助中心 -
input
![]()
input 配置项说明 表1 input配置项说明 参数 类型 是否必选 示例 说明 type String 是 type: "input" 配置项类型。 subType String 否 subType: "password" 子类型，支持的类型有number、password。
来自：帮助中心 -
确定Job基线
![]()
段数据量小于splitSize，还是认为它是独立的分片。 - mapreduce.input.fileinputformat.split.minsize 可以设置数据分片的数据最小值。 0 父主题： MapReduce性能调优
来自：帮助中心 -
确定Job基线
![]()
段数据量小于splitSize，还是认为它是独立的分片。 - mapreduce.input.fileinputformat.split.minsize 可以设置数据分片的数据最小值。 0 父主题： MapReduce性能调优
来自：帮助中心 -
通过Tez引擎执行union相关语句写入的数据，切换MR引擎后查询不出来。
![]()
到HIVE_UNION_SUBDIR目录下的数据。 此时可以设置参数set mapreduce.input.fileinputformat.input.dir.recursive=true，开启union优化，决定是否读取目录下的数据。 父主题： Hive常见问题
来自：帮助中心 -
通过Tez引擎执行union相关语句写入的数据，切换MR引擎后查询不出来。
![]()
到HIVE_UNION_SUBDIR目录下的数据。 此时可以设置参数set mapreduce.input.fileinputformat.input.dir.recursive=true，开启union优化，决定是否读取目录下的数据。 父主题： Hive常见问题
来自：帮助中心 -
输入文件数超出设置限制导致任务执行失败
![]()
Manager，然后选择“集群 > 服务 > Hive > 配置 > 全部配置”。 搜索hive.mapreduce.input.files2memory配置项，并修改hive.mapreduce.input.files2memory配置的值到合适值，根据实际内存和任务情况对此值进行调整。 保存配置并重启受影响的服务或者实例。
来自：帮助中心 -
DYNAMIC_INPUT
![]()
DYNAMIC_INPUT (x, t)注册动态算子输入信息。注册动态算子输入信息成功后，自动生成算子输入的相关接口，用于创建动态输入、设置算子输入的对应描述等。例如，注册动态算子输入d，算子输入接收的数据类型为TensorType{DT_FLOAT}，可调用DYNAMIC_INPUT(d, TensorType{DT_FLOAT})接口
来自：帮助中心 -
建立表分区
![]()
动时间较长，可以在执行SQL语句之前执行“set mapreduce.input.fileinputformat.list-status.num-threads = 100;”命令来缩短启动时间。“mapreduce.input.fileinputformat.list-status
来自：帮助中心 -
OPTIONAL_INPUT
![]()
OPTIONAL_INPUT(x, t)注册可选算子输入信息。注册可选算子输入信息成功后，自动生成算子输入的相关接口，用于获取算子输入的名称、设置算子输入的对应描述等。例如，注册算子输入b，算子输入接收的数据类型为TensorType{DT_FLOAT}，可调用OPTIONAL_INPUT(b, TensorType{DT_FLOAT})
来自：帮助中心 -
建立表分区
![]()
动时间较长，可以在执行SQL语句之前执行“set mapreduce.input.fileinputformat.list-status.num-threads = 100;”命令来缩短启动时间。“mapreduce.input.fileinputformat.list-status
来自：帮助中心 -
OPTIONAL_INPUT
![]()
_THIS_TYPE& set_input_b(Operator& v); // 指定输入b与算子对象v的索引0的输出存在连接关系，返回算子对象本身 TensorDesc get_input_desc_b(); // 返回输入b对应的描述 graphStatus update_input_desc_b(const
来自：帮助中心 -
DYNAMIC_INPUT
![]()
DYNAMIC_INPUT (x, t)注册动态算子输入信息。注册动态算子输入信息成功后，自动生成算子输入的相关接口，用于创建动态输入、设置算子输入的对应描述等。例如，注册动态算子输入d，算子输入接收的数据类型为TensorType{DT_FLOAT}，可调用DYNAMIC_INPUT(d, TensorType{DT_FLOAT})接口
来自：帮助中心
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
