数据源--添加API数据源 操作步骤 登录进入“IoT数据分析”服务控制台。 在左侧导航栏选择“数据源>API数据源”进入页面。 点击“添加数据源”按钮，在弹出的页面中输入数据源名称，点击“确定”按钮，完成API数据源的添加。您可通过第三方APP（例如postman）向这个API数据源的URL发送数据。

查看更多 →

数据源--添加DIS数据源 前提条件 您已购买华为云DIS服务。 操作步骤 点击IoT数据分析服务控制台左侧导航栏的数据源，进入数据源页面，点击“实时数据源”。 实时点击“添加数据源”，在弹出的页面中输入消息通知服务的连接参数，各参数说明详见表1。 表1 添加实时数据源参数说明 参数名

查看更多 →

数据仓库 服务 GaussDB （DWS）相关介绍请参考《数据仓库服务产品介绍》。 MapReduce服务 MRS 相关介绍请参考《MapReduce服务产品介绍》。 云数据库RDS相关介绍请参考《云数据库服务产品介绍》。 父主题： 使用Spark作业跨源访问数据源

查看更多 →

MapReduce与其他组件的关系 MapReduce和HDFS的关系 HDFS是Hadoop分布式文件系统，具有高容错和高吞吐量的特性，可以部署在价格低廉的硬件上，存储应用程序的数据，适合有超大数据集的应用程序。 MapReduce是一种编程模型，用于大数据集（大于1TB）的并

查看更多 →

开发MapReduce应用 MapReduce统计样例程序 MapReduce访问多组件样例程序 父主题： MapReduce开发指南（安全模式）

查看更多 →

MapReduce接口介绍 MapReduce Java API接口介绍 MapReduce REST API接口介绍 父主题： MapReduce应用开发常见问题

查看更多 →

开发MapReduce应用 MapReduce统计样例程序 MapReduce访问多组件样例程序 父主题： MapReduce开发指南（安全模式）

查看更多 →

MapReduce接口介绍 MapReduce Java API接口介绍 MapReduce REST API接口介绍 父主题： MapReduce应用开发常见问题

查看更多 →

MapReduce日志介绍 日志描述 日志默认存储路径： JobhistoryServer：“/var/log/Bigdata/mapreduce/jobhistory”（运行日志），“/var/log/Bigdata/audit/mapreduce/jobhistory”（审计日志）

查看更多 →

MapReduce日志介绍 日志描述 日志默认存储路径： JobhistoryServer：“/var/log/Bigdata/mapreduce/jobhistory”（运行日志），“/var/log/Bigdata/audit/mapreduce/jobhistory”（审计日志）

查看更多 →

开发MapReduce应用 MapReduce统计样例程序 MapReduce访问多组件样例程序 父主题： MapReduce开发指南（普通模式）

查看更多 →

MapReduce接口介绍 MapReduce Java API接口介绍 MapReduce REST API接口介绍 父主题： MapReduce应用开发常见问题

查看更多 →

Server，BMS）的自建数据库 云日志服务（Log Tank Service，LTS） DSC支持的数据源类型及版本 数据安全中心支持的资产类型及版本如表1所示。 表1 DSC支持的数据源类型及版本 数据源类型 版本 MySQL 5.6、5.7、5.8、8.0 SQL Server 2017_SE、2017_EE、2017_WEB

查看更多 →

Elasticsearch E CS 自建数据源 实例 选择对应数据源下待连接的实例（除ECS自建数据源外均需要配置)。 内网IP ECS机器内网IP（仅ECS自建数据源需要配置）。 VPC ID ECS机器使用的VPC的ID地址（仅ECS自建数据源需要配置）。 网络ID ECS机器使

查看更多 →

开发MapReduce应用 MapReduce统计样例程序开发思路 MapReduce访问多组件样例程序开发思路 父主题： MapReduce开发指南

查看更多 →

MapReduce接口介绍 MapReduce Java API接口介绍 父主题： MapReduce应用开发常见问题

查看更多 →

开发MapReduce应用 MapReduce统计样例程序 MapReduce访问多组件样例程序 父主题： MapReduce开发指南（普通模式）

查看更多 →

MapReduce接口介绍 MapReduce Java API接口介绍 MapReduce REST API接口介绍 父主题： MapReduce应用开发常见问题

查看更多 →

数据源配置 创建数据源 查询数据源列表 修改数据源 删除数据源 查询数据源详情 父主题： API列表

查看更多 →

API数据源 算子简介 名称： API接入数据源 功能说明： 通过API进行数据上报到pipeline的数据源。 约束：下游不允许对接数据源。 算子配置 基础配置项 算子名称： 配置项英文名：name 说明： 算子名称，对算子进行个性化的命名，以辅助增加可读性。支持中文、英文、数

查看更多 →

单击“新增数据源”。 在弹出的“新建数据源”页面，根据数据源类型配置如下信息，具体参数说明如表1所示。 表1 参数说明 参数 说明 数据源名称 填写该数据源的名称，可包含中文、英文字母、数字、特殊符号。 数据源类型 选择该数据源的类型，包括mock类、自有类型。 mock类：指静态数据。

查看更多 →