MapReduce MapReduce基本原理 MapReduce与其他组件的关系 MapReduce开源增强特性 父主题： 组件介绍

查看更多 →

同一个网络下可以有多个 MRS 数据源， 但是 GaussDB (DWS)集群每次只能和一个MRS集群建立连接。 在GaussDB(DWS) 集群创建一个MRS数据源连接，具体操作步骤请参见创建MRS数据源连接。 使用MRS数据源导入数据到集群，具体操作请参见使用MRS数据源。 （可选）当MRS集群的H

查看更多 →

单击“获取数据库”，在列表框中选择数据库。 填写完数据源信息后，单击“确定”即可完成ClickHouse数据连接的添加。 使用MapReduce服务（ClickHouse）数据源 您可以参考使用 数据仓库 服务（DWS）数据源，配置使用MapReduce服务（ClickHouse）数据源。 父主题： 新建数据连接

查看更多 →

√ √ √ √ MapReduce服务 （MRS HBase） √ × × √ × × × MapReduce服务（MRS Hive） √ √ √ √ √ × √ MapReduce服务（MRS Kafka） √ × √ × × × √ MapReduce服务（MRS Spark）[1]

查看更多 →

DLV 提供了丰富的数据源，您在使用大屏时可以根据数据存储的位置，进行数据连接，在大屏上展示数据结果。 登录DLV控制台，单击“我的数据”，您可以对数据源进行管理。 DLV目前支持接入以下几种类型的数据源： API类 数据库类 文件类 其他 API类 DLV目前只支持API数据源。 数据库类

查看更多 →

MapReduce Action 功能描述 MapReduce任务节点，负责执行一个map-reduce任务。 参数解释 MapReduce Action节点中包含的各参数及其含义，请参见表1。 表1 参数含义 参数 含义 name map-reduce action的名称 resourceManager

查看更多 →

使用Mapreduce 配置使用分布式缓存执行MapReduce任务 配置MapReduce shuffle address 配置MapReduce集群管理员列表 通过Windows系统提交MapReduce任务 配置MapReduce任务日志归档和清理机制 MapReduce性能调优

查看更多 →

数据源 数据源连接测试失败排查操作 MRS Hive数据源测试连接失败 FTP数据源测试连接失败 OBS数据源测试连接失败 Kafka数据源连接失败

查看更多 →

数据源 创建数据源 查询数据源列表 查询数据源详情 修改数据源内容 修改数据源特征 删除数据源 查询数据源任务结果 父主题： API

查看更多 →

单击右上角的“添加数据源”。 在“添加数据源”页面，填写配置信息，然后单击“确定”。 图1 添加数据源 表1 数据源配置参数 参数 配置说明 所属分区 选择数据源所属的主备分区。 数据源类型 选择数据源类型，目前支持MySQL、PostgreSQL、Redis和OpenGauss。如无法选择某个数据源，请编辑命名空间开通更多功能点。

查看更多 →

单击“获取数据库”，在列表框中选择数据库。 填写完数据源信息后，单击“确定”即可完成MRS SparkSQL数据连接的添加。 使用MapReduce服务（MRS SparkSQL）数据源 您可以参考使用数据仓库服务（DWS）数据源，配置使用MapReduce服务（MRS SparkSQL）数据源。 父主题： 新建数据连接

查看更多 →

新建MRS Hive数据连接 连接MRS Hive前，需要满足以下条件： 已创建一个低于2.0.0版本的MRS集群，集群包含Hive组件，并且请确保MRS集群已关闭Kerberos认证。对于开启Kerberos认证的MRS Hive数据源，DLV暂不支持。 已获取MRS Hive数据源的地址。

查看更多 →

数据源 数据源主要包含两块：左侧树状导航展示数据源路径、右侧可进行新建数据源操作。 图1 数据源 单击“数据源”，展开列表，可看到该数据源下的所有表；右侧可以查看或编辑数据源配置信息，包含数据源连接串、用户名、密码、数据源名称、资源权限、责任人、数据源描述等； 图2 数据源信息

查看更多 →

数据源 RES的离线数据源包括什么？ 如何上传数据至OBS 如何上传实时数据？ 离线数据和近线实时数据如何配合使用？ 数据探索是什么？近线实时数据如何在数据探索中的报告体现？ 如何确定近线数据源导入实时数据成功？ 实时数据能否立即应用到推荐场景？

查看更多 →

数据源 数据源更新 获取数据源详情 删除数据源 获取数据源列表 数据源新增 验证终端节点服务并创建终端节点

查看更多 →

数据源 创建数据源 查看数据源 修改数据源 删除数据源 父主题： 基础数据管理

查看更多 →

数据源 查询数据源 创建数据源 更新数据源 删除数据源 父主题： API说明

查看更多 →

MRS MapReduce 功能 通过MRS MapReduce节点实现在MRS中执行预先定义的MapReduce程序。 参数 用户可参考表1和表2配置MRS MapReduce节点的参数。 表1 属性参数 参数 是否必选 说明 节点名称 是 节点名称，可以包含中文、英文字母、数

查看更多 →

MapReduce Action 功能描述 MapReduce任务节点，负责执行一个map-reduce任务。 参数解释 MapReduce Action节点中包含的各参数及其含义，请参见表1。 表1 参数含义 参数 含义 name map-reduce action的名称 resourceManager

查看更多 →

使用MapReduce 配置使用分布式缓存执行MapReduce任务 配置MapReduce shuffle address 配置MapReduce集群管理员列表 通过Windows系统提交MapReduce任务 配置MapReduce任务日志归档和清理机制 MapReduce性能调优

查看更多 →

数据导入HDFS 在MapReduce作业的Map阶段中从外部数据源抽取数据，并将数据输出到HDFS临时目录下（以“输出目录-ldtmp”命名）。 在MapReduce作业的提交阶段，将文件从临时目录迁移到输出目录中。 数据导出到关系型数据库 在MapReduce作业的Map阶段，

查看更多 →