MapReduce任务长时间无进展 问题 MapReduce任务长时间无进展。 回答 一般是因为内存太少导致的。当内存较小时，任务中拷贝map输出的时间将显著增加。 为了减少等待时间，您可以适当增加堆内存空间。 任务的配置可根据mapper的数量和各mapper的数据大小来进行优

查看更多 →

output（任务输出参数） task.output参数结构说明 参数 是否必选 类型 说明 obs 是 Object OBS输出路径，请参见obs字段数据结构说明。 hosting 否 Object HOSTING输出类型，仅云上作业支持，至少选择一种输出类型。使用该输出类型时，用户

查看更多 →

输出格式相关 KooCLI支持的输出格式有哪些？ 如何定义JMESPath表达式 KooCLI与输出相关的系统参数有哪些，推荐使用哪些？ 新输出参数cli-output，cli-query，cli-output-num在使用时的注意事项有哪些？ 旧输出参数cli-output-r

查看更多 →

设置本地音频输出 接口名称 WEB_SetAIOutputAPI 功能描述 设置本地音频输出时调用该接口。 应用场景 设置本地音频输出是否启用。 URL https://ip/action.cgi?ActionID=WEB_SetAIOutputAPI 参数 表1 设置本地音频输出参数

查看更多 →

对应，用“;”分隔，且key和value均支持参数化，动态列名采用${列名}表示。 注意事项 当配置项支持参数化时，表示将记录中的一列或者多列作为该配置项的一部分。例如当配置项设置为car_${car_brand}时，如果一条记录的car_brand列值为BMW，则该配置项在该条记录下为car_BMW。

查看更多 →

MRS Kafka输出流 功能描述 DLI 将Flink作业的输出数据输出到Kafka中。 Apache Kafka是一个快速、可扩展的、高吞吐、可容错的分布式发布订阅消息系统，具有高吞吐量、内置分区、支持数据副本和容错的特性，适合在大规模消息处理场景中使用。MRS基于Apache

查看更多 →

enable_output_null 否 当“encode”为“json”时，可以使用该参数来配置是否输出空字段。 “true”表示输出空字段（值为null）。 “false”表示不输出空字段。 示例 将数据以csv格式写入到edgeHub主题abcd中。 1 2 3 4 5 6 7

查看更多 →

当配置项支持参数化时，表示将记录中的一列或者多列作为该配置项的一部分。例如当配置项设置为car_${car_brand}时，如果一条记录的car_brand列值为BMW，则该配置项在该条记录下为car_BMW。 示例 将流weather_out的数据输出到MRS服务的OpenTSDB中。

查看更多 →

准备结果输出通道 视频智能分析服务作业的输出结果为DIS或者Webhook时，需要提前准备输出通道。 创建DIS通道 视频智能分析服务作业的结果输出类型选择为DIS时，在创建作业前，您需确保DIS通道已开通成功，开通方法请参见开通DIS通道。 运行Webhook Service

查看更多 →

输入输出定义 连接参数 连接器无需认证，无连接参数。 定义输入 输入参数 此触发事件在流类型执行动作中使用，它的输入是在创建流类型执行动作的第二步“配置输入”中定义的，在该触发事件中单击右下角“mock数据”可以填写数据用于mock测试。 输出参数 和输入参数相同。 定义输出 输入参数

查看更多 →

开源Kafka输出流 功能描述 DLI将Flink作业的输出数据输出到Kafka中。 Apache Kafka是一个快速、可扩展的、高吞吐、可容错的分布式发布订阅消息系统，具有高吞吐量、内置分区、支持数据副本和容错的特性，适合在大规模消息处理场景中使用。 前提条件 Kafka服务

查看更多 →

自拓展输出流 用户可通过编写代码实现将DLI处理之后的数据写入指定的云生态或者开源生态。 语法格式 CREATE SINK STREAM stream_id (attr_name attr_type (',' attr_name attr_type)* ) WITH (

查看更多 →

当配置项支持参数化时，表示将记录中的一列或者多列作为该配置项的一部分。例如当配置项设置为car_${car_brand}时，如果一条记录的car_brand列值为BMW，则该配置项在该条记录下为car_BMW。 示例 将流weather_out的数据输出到MRS服务的OpenTSDB中。

查看更多 →

查询插件输出配置 功能介绍 查询插件输出配置 调用方法 请参见如何调用API。 URI POST /v1/{domain_id}/agent-plugin/plugin-output 表1 路径参数 参数 是否必选 参数类型 描述 domain_id 是 String 租户ID 请求参数

查看更多 →

DIS Agent支持配置监听多个目录或文件，例如想收集"/home/folder1/file1"和"/home/folder2/file2"这两个文件的日志，可以通过配置多个DISStream来实现：

查看更多 →

MapReduce任务异常，临时文件未删除 用户问题 MapReduce任务异常临时文件为什么没有删除？ MR任务即MapReduce任务，关于MapReduce介绍请参考MapReduce。 问题现象 HDFS临时目录文件过多，占用内存。 原因分析 MapReduce任务提交时

查看更多 →

MapReduce统计样例代码 功能介绍 统计日志文件中本周末网购停留总时间超过2个小时的女性网民信息。 主要分为三个部分： 从原文件中筛选女性网民上网时间数据信息，通过类CollectionMapper继承Mapper抽象类实现。 汇总每个女性上网时间，并输出时间大于两个小时的

查看更多 →

MapReduce统计样例代码 功能介绍 统计日志文件中本周末网购停留总时间超过2个小时的女性网民信息。 主要分为三个部分： 从原文件中筛选女性网民上网时间数据信息，通过类CollectionMapper继承Mapper抽象类实现。 汇总每个女性上网时间，并输出时间大于两个小时的

查看更多 →

MapReduce统计样例代码 功能介绍 统计日志文件中本周末网购停留总时间超过2个小时的女性网民信息。 主要分为三个部分： 从原文件中筛选女性网民上网时间数据信息，通过类CollectionMapper继承Mapper抽象类实现。 汇总每个女性上网时间，并输出时间大于两个小时的

查看更多 →

MapReduce访问多组件样例程序开发思路 场景说明 该样例以MapReduce访问HDFS、HBase、Hive为例，介绍如何编写MapReduce作业访问多个服务组件。帮助用户理解认证、配置加载等关键使用方式。 该样例逻辑过程如下。 以HDFS文本文件为输入数据 log1.txt：数据输入文件

查看更多 →

如何在导入Hive表时指定输出的文件压缩格式？ 问题现象 如何在导入Hive表时指定输出的文件压缩格式？ 处理步骤 当前Hive支持以下几种压缩格式： org.apache.hadoop.io.compress.BZip2Codec org.apache.hadoop.io.compress

查看更多 →