Hive是一个开源的，建立在Hadoop上的 数据仓库 框架，提供类似SQL的HQL语言操作结构化数据，其基本原理是将HQL语言自动转换成MapReduce任务或Spark任务，从而完成对Hadoop集群中存储的海量数据进行查询和分析。 Hive主要特点如下： 通过HQL语言非常容易的完成数据提取、转换和加载（ETL）。

查看更多 →

基于Python的Hive样例程序 功能介绍 本章节介绍如何使用Python连接Hive执行数据分析任务。 样例代码 使用Python方式提交数据分析任务，参考样例程序中的“hive-examples/python-examples/pyCLI_sec.py”。该样例程序连接的集

查看更多 →

基于Python的Hive样例程序 功能介绍 本章节介绍如何使用Python连接Hive执行数据分析任务。 样例代码 使用Python方式提交数据分析任务，参考样例程序中的“hive-examples/python-examples/pyCLI_sec.py”。该样例程序连接的集

查看更多 →

Service，简称 MRS ）是一个基于开源Hadoop生态环境而运行的大数据集群，对外提供大容量数据的存储和分析能力，可解决用户的数据存储和处理需求。有关MRS服务的详细信息，请参考《 MapReduce服务 用户指南》。 用户可以将海量业务数据，存储在MRS的分析集群，即使用Hive/S

查看更多 →

基于属性的访问控制（ABAC） ABAC概述和配置流程 启用和配置访问控制属性 为ABAC创建权限策略 支持配置的用户属性 父主题： 多账号权限管理

查看更多 →

Server实例迁移之后，用户需要更新示例程序中使用的HiveServer的IP地址。 在HAConnection的第三个参数填写正确的用户名，密码可以不填写。创建连接，执行HQL，样例代码中仅执行查询所有表功能，可根据实际情况修改HQL内容，输出查询的列名和结果到控制台。 try:

查看更多 →

SAP应用基于存储快照的备份 SAP应用可被看作是一种无状态应用，因SAP系统的核心数据全部保存在数据库上。对于单节点的SAP应用，满足该节点的崩溃一致性即可。因此，您可以使用华为云的 云服务器备份 服务或云硬盘备份服务，通过存储快照的技术快速备份及恢复SAP应用的数据。 此方案适用于如下SAP应用场景：

查看更多 →

基于OIDC的应用认证集成 认证登录获取授权码 获取ID Token 刷新Access Token 隐式授权 获取OIDC metadata 父主题： 应用集成接口

查看更多 →

增，陆续有用户反馈访问速度慢等问题。客户决定使用华为云CDN提高终端用户访问速度、提升用户体验。 方案概述 华为云CDN可以有效加速网站，为用户提供良好的体验。通过 CDN加速 搭建在E CS 服务器上的网站，这样构造的业务系统可以在降低成本的同时，提高终端用户使用感受。 业务流程：当终

查看更多 →

基于GDS的集群互联互通 技术背景 在大中型企业中，因数仓分层、业务规划等原因，通常会部署多个 GaussDB (DWS)集群，并进行跨集群的数据同步。面向集群间的数据同步，通常需满足大数据量、并行执行等要求，如何提供高效的跨集群数据同步能力成为当下数据领域热点之一。 功能描述 Ga

查看更多 →

基于复制的流模板部署流 标准单据场景流创建 自定义单据场景流创建 父主题： 部署流程

查看更多 →

查询LakeFormation预定义资源标签的权限。 read - - LakeFormation Console API通常对应着一个或多个操作项。表2展示了API与操作项的关系，以及该API需要依赖的操作项。 表2 API与操作项的关系 API 对应的操作项 依赖的操作项 POST /v1/{

查看更多 →

AUTHORIZATION”区域的组件插件名称“OBS”，为对应用户的用户组赋予OBS存储路径的“Read”和“Write”的权限。 例如，为“hgroup1”用户组赋予“obs://obs-test/test/”目录的“Read”和“Write”的权限： 在首页中单击“HADOOP SQL”区域的组件插

查看更多 →

对应API接口：自定义策略实际调用的API接口。 授权项：自定义策略中支持的Action，在自定义策略中的Action中写入授权项，可以实现授权项对应的权限功能。 依赖的授权项：部分Action存在对其他Action的依赖，需要将依赖的Action同时写入授权项，才能实现对应的权限功能。 IAM

查看更多 →

基于复制的流模板配置流 一共开发完成3类流模板，基于这3类流模板需要能创建和配置出适用这一类的所有流。 ERP基础数据同步到OA流创建并复用 OA数据同步到ERP流创建并复用 ERP审批流程同步到OA创建并复用 父主题： 实施流程

查看更多 →

本方式的最大优点在于能够快速地备份、恢复数据，对系统的影响非常小。但本方式最关键的是如何保证SAP HANA在线情况下的应用一致性。相对于文件备份，基于存储快照的备份没有对应的工具来检查备份数据是否存在一致性问题。因此，这种备份方式建议您谨慎使用，仅用于对数据的一致性要求不高的场景或者允许系统停机备份的场景。在使用存

查看更多 →

，代码的提交触发后续的测试，以及线上的环节，一个工具链打通完整的路径，实现端到端的交付和支持。 不同研发模式下流水线的应用与思考 第二部分重点讲述基于华为的流水线支撑的实践，支持三种主流模式： 第一种模式：大规模开发 华为起家的核心是交换机，交换机本身业务分成多层架构，例如上面的

查看更多 →

copy）主要是用于Hadoop文件系统内部或之间进行大规模数据复制的工具，它使用Map/Reduce实现文件分发，错误处理和恢复，以及报告生成。它把文件和目录的列表作为map任务的输入，每个任务会完成源列表中部分文件的拷贝。 配置指南 参考Hadoop对接OBS中hadoop-huawe

查看更多 →

L、Derby。Hive中的元数据包括表的名字，表的列和分区及其属性，表的属性（是否为外部表等），表的数据所在目录等。 Hive结构 Hive为单实例的服务进程，提供服务的原理是将HQL编译解析成相应的MapReduce或者HDFS任务，图1为Hive的结构概图。 图1 Hive结构

查看更多 →

JSON对象由嵌套或并列的name-value对组成，具有顺序无关性，当导入JSON格式数据时，需要通过字段名与name的自动对应来确定字段与value的对应关系。用户需要定义恰当的字段名，否则可能导致导入结果不符合预期。字段名与name的自动对应规则如下： 无嵌套无数组的情况下，字段名应当与name一致，不区分大小写。

查看更多 →

JSON对象由嵌套或并列的name-value对组成，具有顺序无关性，当导入JSON格式数据时，需要通过字段名与name的自动对应来确定字段与value的对应关系。用户需要定义恰当的字段名，否则可能导致导入结果不符合预期。字段名与name的自动对应规则如下： 无嵌套无数组的情况下，字段名应当与name一致，不区分大小写。

查看更多 →