3306 数据库名称 MySQL数据库的名称。 sqoop 用户名 拥有MySQL数据库的读、写和删除权限的用户。 admin 密码 用户的密码。 - 使用本地API 使用数据库本地API加速（系统会尝试启用MySQL数据库的local_infile系统变量）。 是 使用Agent

查看更多 →

什么是Flexus云数据库RDS 华为云Flexus云服务是新一代开箱即用、体验跃级、面向中小企业和开发者打造的高性价比云服务产品。Flexus云数据库RDS是华为云Flexus云服务的一个产品。FlexusRDS支持以下引擎： MySQL PostgreSQL 如何使用Flexus云数据库RDS

查看更多 →

（3）华为大数据解决方案、功能特性及华为在大数据行业的成功案例。 知识点 大数据技术发展趋势及鲲鹏大数据 3% HDFS分布式文件系统和 ZooKeeper 12% Hive 分布式 数据仓库 10% HBase技术原理 11% MapReduce 和 Yarn 技术原理 9% Spark 基于内存的分布式计算 7% Flink

查看更多 →

EFILE、ORC等存储格式。 Hive作为一个基于HDFS和MapReduce架构的数据仓库，其主要能力是通过对HQL（Hive Query Language）编译和解析，生成并执行相应的MapReduce任务或者HDFS操作。 图1 Hive结构 Metastore：对表，列

查看更多 →

针对读操作进行优化 针对写操作进行优化 什么是 数据湖 ？ 在企业内部，数据是一类重要资产已经成为了共识。随着企业的持续发展，数据不断堆积，企业希望把生产经营中的所有相关数据都完整保存下来，进行有效管理与集中治理，挖掘和探索数据价值。 数据湖就是在这种背景下产生的。数据湖是一个集中存储各类结构化和非结

查看更多 →

，易运维等特点。 基于 GaussDB 数据仓库产品内核，以云上数据仓库服务的形式将GaussDB(DWS)的能力提供给云平台上的企业用户，打造云上云下一致的数据仓库用户体验。 GaussDB(DWS)是具有国产自主知识产权的新一代分布式数据仓库系统。目前已经被广泛地应用在国内外政府

查看更多 →

OBS连接参数说明 PostgreSQL/SQLServer连接参数说明 数据仓库服务（DWS）连接参数说明 云数据库MySQL/MySQL数据库连接参数说明 Oracle数据库连接参数说明 DLI 连接参数说明 Hive连接参数说明 HBase连接参数说明 HDFS连接参数说明 FTP/SFTP连接参数说明

查看更多 →

Hive对接外置自建关系型数据库 应用场景 在已有Hive数据的集群上外置元数据库后，之前的元数据表不会自动同步。因此在安装Hive之初就要确认好元数据是外置数据库还是内置到DBService，如果是外置自建数据库，则需在安装Hive时或者暂无Hive数据时将元数据外置，安装后不允许修改，否则将会造成原有元数据丢失。

查看更多 →

Hive对接OBS 概述 Hive是一个数据仓库工具，可以对存储在分布式存储中的大规模数据进行数据提取、转化和加载，它提供了丰富的SQL查询方式来进行数据分析。 前提条件 已安装Hadoop，具体请参见Hadoop对接OBS。 对接步骤 以Hive 2.3.3为例。 下载apache-hive-2

查看更多 →

参数类型 说明 ip 是 String 主机的地址 port 是 String 主机的SSH端口号 userName 是 String 主机的登录用户名 password 是 String 主机的登录方式为密码时，填写主机的登录密码。 agentName 是 String 连接代理，即 CDM 集群名称。

查看更多 →

Manager的告警列表中，查看是否有“进程故障”产生。 是，执行5。 否，执行8。 在“进程故障”，查看“服务名”是否为“ZooKeeper”。 是，执行6。 否，执行8。 参考ALM-12007 进程故障的处理步骤处理该故障。 在告警列表中，查看“Hive服务不可用”告警是否清除。 是，处理完毕。 否，执行8。

查看更多 →

Hive应用开发简介 Hive介绍 Hive是一个开源的，建立在Hadoop上的数据仓库框架，提供类似SQL的HQL语言操作结构化数据，其基本原理是将HQL语言自动转换成MapReduce任务或Spark任务，从而完成对Hadoop集群中存储的海量数据进行查询和分析。 Hive主要特点如下：

查看更多 →

/opt/ojdbc6.jar /tmp 按照如下示例，在Hive客户端创建关联关系型数据库的外表。 如果是安全模式，建表的用户需要“ADMIN”权限，ADD JAR的路径请以实际路径为准。 -- 关联oracle linux6版本示例 -- 如果是安全模式，设置admin权限 set role

查看更多 →

户组数据保存能力。 方案架构 Hive是建立在Hadoop上的数据仓库框架，提供大数据平台批处理计算能力，能够对结构化/半结构化数据进行批量分析汇总完成数据计算。提供类似SQL的Hive Query Language语言操作结构化数据，其基本原理是将HQL语言自动转换成MapRe

查看更多 →

数据迁移需要考虑网络连通性等因素，给开发和维护都带来较大难度。 无论数据是在用户本地自建的IDC中（Internet Data Center，互联网数据中心）、云服务中、第三方云中，或者使用E CS 自建的数据库或文件系统中，CDM均可帮助用户轻松应对各种数据迁移场景，包括数据上云，

查看更多 →

文档（Document） 文档是一组键值(key-value)对(即BSON)，是MongoDB中最基本的单元。 行（Row） 数据结构 MongoDB一般采用类似JSON的格式存储，存储的内容是文档型的。如下图，示例中提供了关系型数据库和MongoDB数据库中的数据结构对比，帮助您更直观的了解MongoDB中的一些概念。

查看更多 →

什么是数据库开发支持服务 数据库开发支持服务是华为云为了达成客户业务系统开发、测试、上线运行提供的技术支撑，如数据库开发指导、性能调优、应用对接与上线支持等。数据库开发支持服务满足客户需求，帮助客户解决数据库开发过程中遇到的各种疑难问题，帮助客户提升开发人员的数据库开发能力。 父主题：

查看更多 →

手段，通过接口查看Hive对整个SQL语句是如何进行任务的分解和编排，并结合MapReduce/Spark的执行情况针对性的进行任务的优化。 HiveMetaStore：因为Hive的MetaStore可能是外部的独立数据库，所以它的性能也会影响到整个HiveServer的性能，

查看更多 →

accessKey 否 String 访问标识（AK）。obs支持选是时需配置此参数。建议在配置文件或者环境变量中密文存放，使用时解密，确保安全。 linkConfig.securityKey 否 String 密钥（SK）。obs支持选是时需配置此参数。建议在配置文件或者环境变量中密文存放，使用时解密，确保安全。

查看更多 →

sql-dialect=hive; 注意事项 Hive方言只能用于操作Hive对象，并要求当前Catalog是一个HiveCatalog 。 Hive方言只支持db.table这种两级的标识符，不支持带有Catalog名字的标识符。更多信息请参考Apache Flink Hive Read &

查看更多 →

使用Hive Hive用户权限管理 Hive客户端使用实践 快速使用Hive进行数据分析 Hive数据存储及加密配置 Hive on HBase 配置Hive读取关系型数据库数据 Hive企业级能力增强 Hive性能调优 Hive运维管理 Hive常见SQL语法说明 Hive常见问题

查看更多 →