import org.apache.spark.SparkConf; import org.apache.spark.SparkContext; import org.apache.spark.api.java.JavaRDD; import org.apache.spark.api

查看更多 →

执行作业的用户数据库和表权限不足导致作业运行失败 问题现象 Spark作业运行报数据库权限不足，报错信息如下： org.apache.spark.sql.AnalysisException: org.apache.hadoop.hive.ql.metadata.HiveException:

查看更多 →

将“ZooKeeper Base Path”值配置到URL模板中，即在原有的URL地址后面增加“:/hbase”即可，并单击确定： 图9 配置URL模板 配置EIP。如果本地Windows与集群之间网络不通，需要为每个HBase节点以及ZooKeeper节点配置EIP，并且在本地Windows

查看更多 →

配置Spark表、列和数据库的用户权限 操作场景 使用SparkSQL操作表或者数据库时，如果用户访问别人创建的表或数据库，需要授予对应的权限。为了实现更严格权限控制，SparkSQL也支持列级别的权限控制。如果要访问别人创建的表上某些列，需要授予列权限。以下介绍使用Manage

查看更多 →

示例：不同场景下连接数据库参数配置 以下示例场景中node代表“host:port”，host为数据库 服务器 名称或IP地址，port为数据库 服务器端口 。 容灾场景 某客户有两套数据库集群，其中A集群为生产集群，B集群为容灾集群。当客户执行容灾切换时，A集群将降为容灾集群，B集群将

查看更多 →

示例：不同场景下连接数据库参数配置 以下示例场景中node代表“host:port”，host为数据库服务器名称或IP地址，port为数据库服务器端口。 容灾场景 某客户有两套数据库实例，其中A数据库实例为生产数据库实例，B数据库实例为容灾数据库实例。当客户执行容灾切换时，A数据库实例将降为

查看更多 →

Windows系统，支持Windows7以上版本。 安装JDK JDK使用1.8版本。 安装和配置IntelliJ IDEA IntelliJ IDEA为进行应用开发的工具，版本要求使用2019.1或其他兼容版本。 安装Maven 开发环境的基本配置。用于项目管理，贯穿软件开发生命周期。 开发流程

查看更多 →

DSP Scheduler 安装到Tomcat 安装与配置 创建“DSPScheduler”目录。 解压安装包到 “DSPScheduler”目录中。 Linux #tar -xvf Primeton_DSP_7.0_Scheduler_Linux_64.tar -C DSPScheduler

查看更多 →

DLI 数据源 操作场景 数据湖探索 （Data Lake Insight，简称DLI）是完全兼容Apache Spark、Apache Flink、openLooKeng（基于Apache Presto）生态，提供一站式的流处理、批处理、交互式分析的Serverless融合处理分析

查看更多 →

部署数据库 数据库部署 非可信数据库部署 父主题： 实施步骤

查看更多 →

09:14:16 ... 步骤五：安装Magento组件 安装Magento时可以选择是否安装示例数据。如果安装Magento仅用于测试，可以选择安装示例数据。如果是在生产环境中安装Magento，建议安装全新的Magento，并从初始进行配置。 执行以下命令，安装git。 yum -y install

查看更多 →

数据库部署 数据库初始化及参数调整 安装数据库 安装数据库，初始化数据库服务时，字符集需要选择UTF-8。 调整参数 数据库服务安装后，需调整以下参数提升性能： 表1 数据库参数表 参数名称 参数说明 取值样例 区域 必选参数。 不同区域的云服务产品之间内网互不相通，请就近选择靠

查看更多 →

示例：不同场景下连接数据库参数配置 以下示例场景中node代表“host:port”，host为数据库服务器名称或IP地址，port为数据库服务器端口。 负载均衡场景 某客户存在一套数据库集群，包含如下节点{node1,node2,node3,node4,node5,node6,node7

查看更多 →

示例：不同场景下连接数据库参数配置 以下示例场景中node代表“host:port”，host为数据库服务器名称或IP地址，port为数据库服务器端口。 容灾场景 某客户有两套数据库实例，其中A数据库实例为生产数据库实例，B数据库实例为容灾数据库实例。当客户执行容灾切换时，A数据库实例将降为

查看更多 →

、列授权和数据库授权三个场景下的操作。 安全模式支持配置Hive表、列或数据库的权限，普通模式不支持配置Hive表、列或数据库的权限。 MRS 3.x及后续版本支持Ranger，如果当前组件使用了Ranger进行权限控制，须基于Ranger配置相关策略进行权限管理，具体操作可参考

查看更多 →

、列授权和数据库授权三个场景下的操作。 安全模式支持配置Hive表、列或数据库的权限，普通模式不支持配置Hive表、列或数据库的权限。 如果当前组件使用了Ranger进行权限控制，须基于Ranger配置相关策略进行权限管理，具体操作可参考添加Hive的Ranger访问权限策略。 前提条件

查看更多 →

示例：不同场景下连接数据库参数配置 以下示例场景中node代表“host:port”，host为数据库服务器名称或IP地址，port为数据库服务器端口。 容灾场景 某客户有两套数据库实例，其中A数据库实例为生产数据库实例，B数据库实例为容灾数据库实例。当客户执行容灾切换时，A数据库实例将降为

查看更多 →

示例：不同场景下连接数据库参数配置 以下示例场景中node代表“host:port”，host为数据库服务器名称或IP地址，port为数据库服务器端口。 容灾场景 某客户有两套数据库集群，其中A集群为生产集群，B集群为容灾集群。当客户执行容灾切换时，A集群将降为容灾集群，B集群将

查看更多 →

配置Spark表、列和数据库的用户权限 操作场景 使用SparkSQL操作表或者数据库时，如果用户访问别人创建的表或数据库，需要授予对应的权限。为了实现更严格权限控制，SparkSQL也支持列级别的权限控制。如果要访问别人创建的表上某些列，需要授予列权限。以下介绍使用Manage

查看更多 →

Hive > 配置 > 全部配置”。 搜索hive.server.session.control.maxconnections配置项，并修改hive.server.session.control.maxconnections配置的值到合适值，不能超过1000。 保存配置并重启受影响的服务或者实例。

查看更多 →

数据库 创建数据库 删除数据库 查看指定数据库 查看所有数据库 父主题： Spark SQL语法参考（即将下线）

查看更多 →