为什么要使用 数据仓库 ？ 为什么要使用云数据仓库服务 GaussDB (DWS) ？ 如何选择公有云GaussDB(DWS)或者公有云RDS？ 用户和角色是什么关系？ GaussDB(DWS)和 MRS 分别应在何时使用？ 如何查看数据库用户的创建时间？ 区域和可用分区 数据在数据仓库服务中是否安全？

查看更多 →

在MRS管理控制台提交SQL作业 MapReduce服务 MRS 使用Kafka客户端创建Topic 04:55 使用Kafka客户端创建Topic MapReduce服务 MRS 使用Hive客户端创建外部表 04:20 使用Hive客户端创建外部表 MapReduce服务 MRS 访问集群WebUI界面

查看更多 →

数据仓库服务（DWS）连接参数说明 连接数据仓库服务（DWS）时，相关参数如表1所示。 作业运行中禁止修改密码或者更换用户。在作业运行过程中修改密码或者更换用户，密码不会立即生效且作业会运行失败。 表1 数据仓库服务（DWS）连接参数 参数名 说明 取值样例 名称 连接的名称，根

查看更多 →

续打开Hue WebUI。 前提条件 启用Kerberos认证时，MRS集群管理员已分配用户使用Hive的权限，具体操作请参见创建MRS集群用户。例如创建一个“人机”用户“hueuser”，并加入“hive”、“hadoop”、“supergroup”组和“manager_view”角色，主组为“hive”。

查看更多 →

按照传统的定义，元数据（Metadata）是关于数据的数据。元数据打通了源数据、数据仓库、数据应用，记录了数据从产生到消费的全过程。元数据主要记录数据仓库中模型的定义、各层级间的映射关系、监控数据仓库的数据状态及ETL的任务运行状态。在数据仓库系统中，元数据可以帮助数据仓库管理员和开发人员非常方便地找到其所关心的数据

查看更多 →

领取免费数据仓库服务后，为什么看不到集群？ 免费领取数据仓库服务后，并不会自动创建集群，您需要登录GaussDB(DWS)管理控制台手动创建GaussDB(DWS)集群。 父主题： 计费FAQ

查看更多 →

介绍GaussDB(DWS)服务的特点、功能和适用场景。 GaussDB(DWS)入门包含一个示例，引导您完成创建数据仓库集群、创建数据库表、上传数据和测试查询这一过程。 如果计划或正在将应用程序从其他数据仓库向GaussDB(DWS)迁移，您可能想了解GaussDB(DWS)在实施方式上有什么区别。

查看更多 →

WebUI，需要在浏览器中添加站点信任以继续打开Hue WebUI。 前提条件 启用Kerberos认证时，MRS集群管理员已分配用户使用Hive的权限。具体操作请参见创建用户。例如创建一个“人机”用户“hueuser”，并加入“hive”、“hadoop”、“supergroup”组和“manager_view”角色，主组为“hive”。

查看更多 →

创建脚本 功能介绍 创建一个新脚本，当前支持的脚本类型有 DLI SQL、Flink SQL、RDS SQL、Spark SQL、Hive SQL、DWS SQL、Shell、Presto SQL、ClickHouse SQL、HetuEngine SQL、Python、Spark

查看更多 →

删除数据集的接口。 数据集版本 包括获取数据集版本列表、创建数据集版本、获取数据集版本详情、删除数据集版本的接口。 数据仓库 包括获取数据仓库列表信息和获取数据仓库的数据列表的接口。 数据仓库自定义属性 包括获取数据仓库自定义属性列表的接口。 集群信息管理 包括查询可用资源规格的接口。

查看更多 →

领取免费数据仓库服务后，为什么看不到集群？ 免费领取数据仓库服务后，并不会自动创建集群，您需要登录GaussDB(DWS)管理控制台手动创建GaussDB(DWS)集群。 父主题： 计费问题

查看更多 →

bin/spark-submit --master yarn --deploy-mode client /opt/female/SparkSQLPythonExample/SparkSQLPythonExample.py <inputPath> 其中，<inputPath>指HDFS文件系统中input的路径

查看更多 →

开启参数 场景选择 特点 upsert update + insert Hudi默认写入类型，写入具有更新能力。 默认，无需参数开启。 SparkSQL: set hoodie.datasource.write.operation=upsert; DataSource Api: df

查看更多 →

数据开发，左侧列表选择“数据开发 > 脚本开发”。在脚本的目录树上，可以查看到当前已经创建的目录，默认在根目录/。 connectionName 否 String 脚本关联的连接名称。当type参数值为DLISQL、SparkSQL、HiveSQL、DWSSQL、Shell、PRESTO、Click

查看更多 →

Spark客户端和服务端权限参数配置说明 SparkSQL权限管理功能相关的配置如下所示，客户端与服务端的配置相同。要使用表权限功能，需要在服务端和客户端添加如下配置。 “spark-defaults.conf”配置文件 表1 参数说明（1） 参数 描述 默认值 spark.sql

查看更多 →

集群的数据库端口。 准备工作 创建集群 - 在使用GaussDB(DWS) 执行数据分析任务前，您首先要创建一个集群。一个GaussDB(DWS) 集群由多个在相同子网中的节点组成，共同提供服务。创建集群时，系统会创建一个默认数据库。 创建DWS 2.0集群 创建包年/包月集群 连接集群

查看更多 →

当表名为table时，执行相关操作时出现异常 问题 当创建了表名为table的表后，执行drop table table上报以下错误，或者执行其他操作也会出现类似错误。 16/07/12 18:56:29 ERROR SparkSQLDriver: Failed in [drop table

查看更多 →

数据开发，左侧列表选择“数据开发 > 脚本开发”。在脚本的目录树上，可以查看到当前已经创建的目录，默认在根目录/。 connectionName 否 String 脚本关联的连接名称。当type参数值为DLISQL、SparkSQL、HiveSQL、DWSSQL、Shell、PRESTO、Click

查看更多 →

SQL样例程序（Python） 功能简介 统计日志文件中本周末网购停留总时间超过2个小时的女性网民信息。 代码样例 下面代码片段仅为演示，具体代码参见SparkSQLPythonExample： # -*- coding:utf-8 -*- import sys from pyspark.sql

查看更多 →

SQL样例程序（Python） 功能简介 统计日志文件中本周末网购停留总时间超过2个小时的女性网民信息。 代码样例 下面代码片段仅为演示，具体代码参见SparkSQLPythonExample： # -*- coding:utf-8 -*- import sys from pyspark.sql

查看更多 →

介绍GaussDB(DWS)服务的特点、功能和适用场景。 GaussDB(DWS)入门包含一个示例，引导您完成创建数据仓库集群、创建数据库表、上传数据和测试查询这一过程。 如果打算或正在将应用程序从其他数据仓库向GaussDB(DWS)迁移，您可能想知道GaussDB(DWS)在实施方式上有什么区别。

查看更多 →