manager管理面看不到Kafka新建的topic 安全集群API方式提交Spark Submit作业操作HBase表，HBase表权限控制未生效 MRS manager补丁机制优化 MRS大数据组件 Spark执行load data inpath慢 Spark建表支持列名带$字符 OBS相关问题修复 MRS

查看更多 →

数据到指定字段。 Hive输入：Hive表输入步骤，配置Hive表的列定义到指定字段。 Spark输入：SparkSQL表输入步骤，配置SparkSQL表的列定义到指定字段。仅支持SparkSQL存取Hive数据。 转换类型 长整型时间转换：长整型日期转换步骤，配置长整型数值与日期的转换。

查看更多 →

执行analyze table语句，因资源不足出现任务卡住 问题 使用spark-sql执行analyze table语句，任务一直卡住，打印的信息如下： spark-sql> analyze table hivetable2 compute statistics; Query ID

查看更多 →

MapReduce Action 功能描述 MapReduce任务节点，负责执行一个map-reduce任务。 参数解释 MapReduce Action节点中包含的各参数及其含义，请参见表1。 表1 参数含义 参数 含义 name map-reduce action的名称 resourceManager

查看更多 →

使用MapReduce 配置使用分布式缓存执行MapReduce任务 配置MapReduce shuffle address 配置MapReduce集群管理员列表 通过Windows系统提交MapReduce任务 配置MapReduce任务日志归档和清理机制 MapReduce性能调优

查看更多 →

2-LTS版本的补丁安装完成后需要在 FusionInsight Manager Web界面重启Flink、Hadoop、HBase、HDFS、Hive、MapReduce、Meta、Spark2x、Ranger和Yarn服务，以使补丁功能生效。组件重启期间，部分业务可能短暂不可用。请选择适当的时间进行重启，以降低对业务持续性的影响。

查看更多 →

本工程应用程序实现从HDFS上读取文本数据并计算分析。 SparkRExample示例不支持未开启Kerberos认证的集群。 SparkPythonExample SparkScalaExample SparkRExample SparkLauncherJavaExample 使用Spark Launcher提交作业的Java/Scala示例程序。

查看更多 →

sultTask。 Spark Application的结构 Spark Application的结构可分为两部分：初始化SparkContext和主体程序。 初始化SparkContext：构建Spark Application的运行环境。 构建SparkContext对象，如：

查看更多 →

KafkaManager KrbServer及LdapServer Kudu Loader Manager MapReduce Oozie OpenTSDB Presto Ranger Spark Spark2x StarRocks Storm Tez YARN ZooKeeper

查看更多 →

关系网络 关系网络图 父主题： 组件指南

查看更多 →

time”。 确定信息后，单击“确定”。 新建关系 在“图谱预览”界面左上角选择“新建>新建关系”。 或在搜索框中进行搜索操作后，空白处右键单击鼠标，选择“新建关系”。 弹出“新建关系”对话框。 图3 新建关系 选择“头实体”、“关系名”和“尾实体”，可在下拉的搜索框中直接搜索实体名称。

查看更多 →

查看关系实体 操作场景 本文指导您如何查看当前选择的应用租户下的所有关系实体及实体详情。 查看实体列表 登录LinkX-F系统首页。 选择“模型设计 > 数据模型管理”，默认进入“数据实体”页面。 在左侧导航栏选择“关系实体”，进入“关系实体”页面。 列表默认展示“正在工作”、“

查看更多 →

在左侧导航栏中，选择“数据模型管理 > 关系实体”，进入“关系实体”页面。 在“关系实体”页面，根据实际需求，设置筛选条件（所属应用、编码、英文名称、中文名称、模型分类、关系类型、源数据实体名称、目标数据实体名称、创建者、更新者等），单击“搜索”。 图1 条件筛选 在关系实体列表中显示的列表字段

查看更多 →

作废关系实体 操作场景 当“模型类型”为“扩展模型”的关系实体不想使用时，您可以在应用运行态作废该关系实体。作废的关系实体将无法使用，请谨慎操作！ 前提条件 已登录应用运行态。 操作步骤 在左侧导航栏中，选择“数据模型管理 > 关系实体”，进入关系实体页面。 勾选需要作废的关系实体，单击“作废”。

查看更多 →

关系操作接口 功能介绍 关系操作接口。 URI POST /v3/{project_id}/abm/instances/{instance_id}/metadata3/relationships 表1 路径参数 参数 是否必选 参数类型 描述 project_id 是 String

查看更多 →

查看关系详情 功能介绍 通过ID获取关系详情信息。 调用方法 请参见如何调用API。 URI GET /v2/{project_id}/design/relation/{id} 表1 路径参数 参数 是否必选 参数类型 描述 project_id 是 String 项目ID，获取方法请参见项目ID和账号ID。

查看更多 →

出待删除的绑定关系对列表。 可直接在绑定关系列表中找到待删除的绑定关系对。 根据待删除关系对数量选择删除类型。 单个删除 单个桌面绑定关系需要删除时，可选择单个删除。 单击待删除的关系对所在行的“删除”，进入删除确认页面。 单击“确定”。 批量删除 大量桌面绑定关系需要删除时，可选择批量删除。

查看更多 →

SQL作业。 SparkSubmit：提交Spark Jar和Spark Python程序，运行Spark Application计算和处理用户数据。 SparkScript：提交SparkScript脚本，批量执行Spark SQL语句。 Spark SQL：使用Spark提供的类似SQL的Spark

查看更多 →

提供Python语言的API，Spark Core、SparkSQL和Spark Streaming模块的常用接口请参见Spark Python API接口介绍。 按不同的模块分，Spark Core和Spark Streaming使用上表中的API接口进行程序开发。而SparkSQL模块，支持CLI或者JD

查看更多 →

特性：在通用的商用硬件上运行，可水平扩展，提供高可用性。 Kudu的设计具有以下优点： 能够快速处理OLAP工作负载 支持与MapReduce，Spark和其他Hadoop生态系统组件集成 与Apache Impala的紧密集成，使其成为将HDFS与Apache Parquet结合使用的更好选择

查看更多 →

执行analyze table语句，因资源不足出现任务卡住 问题 使用spark-sql执行analyze table语句，任务一直卡住，打印的信息如下： spark-sql> analyze table hivetable2 compute statistics; Query ID

查看更多 →