全部文档

数据仓库服务 GaussDB(DWS)数据仓库服务 GaussDB(DWS)

    计算
    弹性云服务器 ECS
    裸金属服务器 BMS
    云手机 CPH
    专属主机 DeH
    弹性伸缩 AS
    镜像服务 IMS
    函数工作流 FunctionGraph
    云耀云服务器 HECS
    VR云渲游平台 CVR
    特惠算力专区
    数据库
    云数据库 RDS
    数据复制服务 DRS
    文档数据库服务 DDS
    分布式数据库中间件 DDM
    云数据库 GaussDB (for openGauss)
    云数据库 GaussDB(for MySQL)
    云数据库 GaussDB NoSQL
    数据管理服务 DAS
    数据库和应用迁移 UGO
    开发与运维
    软件开发平台 DevCloud
    项目管理 ProjectMan
    代码托管 CodeHub
    流水线 CloudPipeline
    代码检查 CodeCheck
    编译构建 CloudBuild
    部署 CloudDeploy
    云测 CloudTest
    发布 CloudRelease
    移动应用测试 MobileAPPTest
    CloudIDE
    Classroom
    开源镜像站 Mirrors
    应用魔方 AppCube
    云性能测试服务 CPTS
    应用管理与运维平台 ServiceStage
    云应用引擎 CAE
    迁移
    主机迁移服务 SMS
    对象存储迁移服务 OMS
    云数据迁移 CDM
    开发者工具
    SDK开发指南
    API签名指南
    DevStar
    HCloud CLI
    Terraform
    Ansible
    云市场
    云消息服务 KooMessage
    容器
    云容器引擎 CCE
    云容器实例 CCI
    容器镜像服务 SWR
    应用编排服务 AOS
    多云容器平台 MCP
    基因容器 GCS
    容器洞察引擎 CIE
    云原生服务中心 OSC
    容器批量计算 BCE
    应用服务网格 ASM
    人工智能
    AI开发平台ModelArts
    华为HiLens
    图引擎服务 GES
    图像识别 Image
    文字识别 OCR
    自然语言处理 NLP
    内容审核 Moderation
    图像搜索 ImageSearch
    医疗智能体 EIHealth
    园区智能体 CampusGo
    企业级AI应用开发专业套件 ModelArts Pro
    人脸识别服务 FRS
    对话机器人服务 CBS
    视频分析服务 VAS
    语音交互服务 SIS
    知识图谱 KG
    人证核身服务 IVS
    企业应用
    域名注册服务 Domains
    云解析服务 DNS
    云速建站 CloudSite
    网站备案
    华为云WeLink
    会议
    隐私保护通话 PrivateNumber
    语音通话 VoiceCall
    消息&短信 MSGSMS
    云管理网络
    SD-WAN 云服务
    边缘数据中心管理 EDCM
    云桌面 Workspace
    应用与数据集成平台 ROMA Connect
    ROMA资产中心 ROMAExchange
    API全生命周期管理 ROMA API
    区块链
    区块链服务 BCS
    可信跨链服务 TCS
    可信分布式身份服务
    数字资产链
    价格
    成本优化最佳实践
    专属云商业逻辑
    开天aPaaS
    开天集成工作台
    存储
    对象存储服务 OBS
    云硬盘 EVS
    云备份 CBR
    弹性文件服务 SFS
    存储容灾服务 SDRS
    云硬盘备份 VBS
    云服务器备份 CSBS
    数据快递服务 DES
    专属企业存储服务
    云存储网关 CSG
    专属分布式存储服务 DSS
    数据工坊 DWR
    大数据
    MapReduce服务 MRS
    数据湖探索 DLI
    表格存储服务 CloudTable
    可信智能计算服务 TICS
    推荐系统 RES
    云搜索服务 CSS
    数据可视化 DLV
    数据湖治理中心 DGC
    数据接入服务 DIS
    数据仓库服务 GaussDB(DWS)
    视频
    实时音视频 SparkRTC
    视频直播 Live
    视频点播 VOD
    媒体处理 MPC
    视频接入服务 VIS
    专属云
    专属计算集群 DCC
    云生态
    云市场
    合作伙伴中心
    华为云培训中心
    网络
    虚拟私有云 VPC
    弹性公网IP EIP
    弹性负载均衡 ELB
    NAT网关 NAT
    云专线 DC
    虚拟专用网络 VPN
    云连接 CC
    VPC终端节点 VPCEP
    企业路由器 ER
    企业交换机 ESW
    IoT物联网
    设备接入 IoTDA
    IoT物联网
    全球SIM联接 GSL
    IoT数据分析 IoTA
    路网数字化服务 DRIS
    IoT边缘 IoTEdge
    设备发放 IoTDP
    安全与合规
    安全技术与应用
    DDoS防护 ADS
    Web应用防火墙 WAF
    云防火墙 CFW
    应用信任中心 ATC
    企业主机安全 HSS
    容器安全服务 CGS
    云堡垒机 CBH
    数据库安全服务 DBSS
    数据加密服务 DEW
    数据安全中心 DSC
    云证书管理服务 CCM
    漏洞扫描服务 VSS
    态势感知 SA
    威胁检测服务 MTD
    管理检测与响应 MDR
    安全治理云图 Compass
    认证测试中心 CTC
    智能协作
    IdeaHub
    用户服务
    帐号中心
    费用中心
    成本中心
    资源中心
    企业管理
    工单管理
    客户运营能力
    国际站常见问题
    支持计划
    专业服务
    合作伙伴支持计划
    CDN与智能边缘
    内容分发网络 CDN
    智能边缘云 IEC
    智能边缘小站 IES
    智能边缘平台 IEF
    应用中间件
    微服务引擎 CSE
    分布式消息服务Kafka版
    分布式消息服务RabbitMQ版
    API网关 APIG
    分布式缓存服务 DCS
    分布式消息服务RocketMQ版
    管理与监管
    统一身份认证服务 IAM
    消息通知服务 SMN
    云监控服务 CES
    应用运维管理 AOM
    应用性能管理 APM
    云日志服务 LTS
    云审计服务 CTS
    标签管理服务 TMS
    资源管理服务 RMS
    应用身份管理服务 OneAccess
    解决方案
    高性能计算 HPC
    SAP
    混合云灾备
    其他
    管理控制台
    消息中心
    产品价格详情
    系统权限
    我的凭证
    客户关联华为云合作伙伴须知
    公共问题
    宽限期保留期
    奖励推广计划
    活动
    计算
    弹性云服务器 ECS
    裸金属服务器 BMS
    云手机 CPH
    专属主机 DeH
    弹性伸缩 AS
    镜像服务 IMS
    函数工作流 FunctionGraph
    云耀云服务器 HECS
    VR云渲游平台 CVR
    特惠算力专区
    存储
    对象存储服务 OBS
    云硬盘 EVS
    云备份 CBR
    弹性文件服务 SFS
    存储容灾服务 SDRS
    云硬盘备份 VBS
    云服务器备份 CSBS
    数据快递服务 DES
    专属企业存储服务
    云存储网关 CSG
    专属分布式存储服务 DSS
    数据工坊 DWR
    CDN与智能边缘
    内容分发网络 CDN
    智能边缘云 IEC
    智能边缘小站 IES
    智能边缘平台 IEF
    人工智能
    AI开发平台ModelArts
    华为HiLens
    图引擎服务 GES
    图像识别 Image
    文字识别 OCR
    自然语言处理 NLP
    内容审核 Moderation
    图像搜索 ImageSearch
    医疗智能体 EIHealth
    园区智能体 CampusGo
    企业级AI应用开发专业套件 ModelArts Pro
    人脸识别服务 FRS
    对话机器人服务 CBS
    视频分析服务 VAS
    语音交互服务 SIS
    知识图谱 KG
    人证核身服务 IVS
    IoT物联网
    设备接入 IoTDA
    IoT物联网
    全球SIM联接 GSL
    IoT数据分析 IoTA
    路网数字化服务 DRIS
    IoT边缘 IoTEdge
    设备发放 IoTDP
    开发与运维
    软件开发平台 DevCloud
    项目管理 ProjectMan
    代码托管 CodeHub
    流水线 CloudPipeline
    代码检查 CodeCheck
    编译构建 CloudBuild
    部署 CloudDeploy
    云测 CloudTest
    发布 CloudRelease
    移动应用测试 MobileAPPTest
    CloudIDE
    Classroom
    开源镜像站 Mirrors
    应用魔方 AppCube
    云性能测试服务 CPTS
    应用管理与运维平台 ServiceStage
    云应用引擎 CAE
    视频
    实时音视频 SparkRTC
    视频直播 Live
    视频点播 VOD
    媒体处理 MPC
    视频接入服务 VIS
    管理与监管
    统一身份认证服务 IAM
    消息通知服务 SMN
    云监控服务 CES
    应用运维管理 AOM
    应用性能管理 APM
    云日志服务 LTS
    云审计服务 CTS
    标签管理服务 TMS
    资源管理服务 RMS
    应用身份管理服务 OneAccess
    区块链
    区块链服务 BCS
    可信跨链服务 TCS
    可信分布式身份服务
    数字资产链
    智能协作
    IdeaHub
    开发者工具
    SDK开发指南
    API签名指南
    DevStar
    HCloud CLI
    Terraform
    Ansible
    云生态
    云市场
    合作伙伴中心
    华为云培训中心
    其他
    管理控制台
    消息中心
    产品价格详情
    系统权限
    我的凭证
    客户关联华为云合作伙伴须知
    公共问题
    宽限期保留期
    奖励推广计划
    活动
    开天aPaaS
    开天集成工作台
    容器
    云容器引擎 CCE
    云容器实例 CCI
    容器镜像服务 SWR
    应用编排服务 AOS
    多云容器平台 MCP
    基因容器 GCS
    容器洞察引擎 CIE
    云原生服务中心 OSC
    容器批量计算 BCE
    应用服务网格 ASM
    网络
    虚拟私有云 VPC
    弹性公网IP EIP
    弹性负载均衡 ELB
    NAT网关 NAT
    云专线 DC
    虚拟专用网络 VPN
    云连接 CC
    VPC终端节点 VPCEP
    企业路由器 ER
    企业交换机 ESW
    数据库
    云数据库 RDS
    数据复制服务 DRS
    文档数据库服务 DDS
    分布式数据库中间件 DDM
    云数据库 GaussDB (for openGauss)
    云数据库 GaussDB(for MySQL)
    云数据库 GaussDB NoSQL
    数据管理服务 DAS
    数据库和应用迁移 UGO
    大数据
    MapReduce服务 MRS
    数据湖探索 DLI
    表格存储服务 CloudTable
    可信智能计算服务 TICS
    推荐系统 RES
    云搜索服务 CSS
    数据可视化 DLV
    数据湖治理中心 DGC
    数据接入服务 DIS
    数据仓库服务 GaussDB(DWS)
    应用中间件
    微服务引擎 CSE
    分布式消息服务Kafka版
    分布式消息服务RabbitMQ版
    API网关 APIG
    分布式缓存服务 DCS
    分布式消息服务RocketMQ版
    企业应用
    域名注册服务 Domains
    云解析服务 DNS
    云速建站 CloudSite
    网站备案
    华为云WeLink
    会议
    隐私保护通话 PrivateNumber
    语音通话 VoiceCall
    消息&短信 MSGSMS
    云管理网络
    SD-WAN 云服务
    边缘数据中心管理 EDCM
    云桌面 Workspace
    应用与数据集成平台 ROMA Connect
    ROMA资产中心 ROMAExchange
    API全生命周期管理 ROMA API
    安全与合规
    安全技术与应用
    DDoS防护 ADS
    Web应用防火墙 WAF
    云防火墙 CFW
    应用信任中心 ATC
    企业主机安全 HSS
    容器安全服务 CGS
    云堡垒机 CBH
    数据库安全服务 DBSS
    数据加密服务 DEW
    数据安全中心 DSC
    云证书管理服务 CCM
    漏洞扫描服务 VSS
    态势感知 SA
    威胁检测服务 MTD
    管理检测与响应 MDR
    安全治理云图 Compass
    认证测试中心 CTC
    迁移
    主机迁移服务 SMS
    对象存储迁移服务 OMS
    云数据迁移 CDM
    专属云
    专属计算集群 DCC
    解决方案
    高性能计算 HPC
    SAP
    混合云灾备
    价格
    成本优化最佳实践
    专属云商业逻辑
    用户服务
    帐号中心
    费用中心
    成本中心
    资源中心
    企业管理
    工单管理
    客户运营能力
    国际站常见问题
    支持计划
    专业服务
    合作伙伴支持计划
    云市场
    云消息服务 KooMessage
      文档首页> 数据仓库服务 GaussDB(DWS)> 快速入门> 快速创建GaussDB(DWS)集群并导入数据
      None

      快速创建DWS集群并导入数据

      • 华为云数据仓库服务（Data Warehouse Service，简称DWS）是一种即开即用、安全可靠的在线数据仓库服务，为用户提供海量数据的存储、挖掘和分析能力。

      • 数据仓库服务提供专业高效的服务管理控制平台，让用户自助完成数据仓库的管理与维护，系统可用性高。用户可以快速创建数据仓库服务集群并开展业务。

      • 本指南提供创建集群、连接集群并从OBS导入样例数据的操作指导，指导您快速上手数据仓库服务。

      Step1 创建集群

      步骤

      ① 登录DWS控制台。

      如果您还没有公有云帐户，请单击“免费注册”先注册一个账户，并完成实名认证，然后再登录。
      ② 单击“购买数据仓库集群”。

      

      了解详细步骤

      1

      创建数据仓库集群

      申请虚拟私有云

      单击图片可查看原图

      Step2 配置集群基本参数

      步骤

      ① 在购买数据仓库集群页面，选择区域、可用区和产品类型。

      • 区域：选择在哪个区域创建集群。
      • 可用区：可用区表示在公有云的一个数据中心地域下，电力、网络互相隔离的物理区域。可用区之间内网互通，不同可用区之间物理隔离。
      • 产品类型：选择数仓类型，推荐使用“云数仓”。
      • CPU架构：选择鲲鹏或X86。

      ② 选择节点规格、每节点存储容量和节点数量。如图① 所示。

      ③ 配置集群参数，如图②所示。其中：

      • 管理员用户：集群创建成功后，客户端连接集群数据库时将使用该管理员用户及其密码。
      • 数据库端口：指定一个端口，SQL客户端或应用程序将通过该端口连接集群中的数据库。在集群创建之后，无法更改。

      说明

      ① 如果您的客户端机器位于防火墙之后，则您需要相应地开放“数据库端口”，这样才能从SQL客户端工具连接到集群并进行查询分析。

      了解详细步骤

      1

      选择节点规格和节点数量

      选择付费方式

      2

      配置集群参数

      选择付费方式

      单击图片可查看原图

      Step3 配置网络参数和高级配置

      步骤

      ① 配置网络参数。如图① 所示。

      • 虚拟私有云：虚拟私有云（VPC）为集群提供网络拓扑，实现多个不同集群互相隔离并控制访问，提高网络安全。可以选择已有的VPC，也可以单击“查看虚拟私有云”登录VPC界面新建一个VPC，具体请参见《虚拟私有云用户指南》。

      • 子网：创建虚拟私有云时会默认创建一个子网，可以选择对应的子网名。

      • 安全组：可选择“自动创建安全组”。自动创建的安全组名为“dws-<集群名称>-<数据库端口>”，其出方向允许所有访问，入方向只开放“数据库端口”以允许来自客户端或应用程序的访问。

      • 公网访问：本示例选择“现在购买”，为集群购买一个弹性IP作为集群的公网IP，以便在互联网环境使用客户端连接DWS数据库。

      ② 设置如下参数，如图② 所示：

      企业项目：集群所属的企业项目。如果没有项目，可以设置为“default”或登录企业管理服务新建一个项目。

      高级配置：选择“默认配置”即可。单击“自定义”时可以看到有哪些高级配置项以及它们的默认值，可以自定义设置。

      ③单击“立即购买”，然后在规格确认页面，确认后，单击“提交”。

      创建DWS集群需要15分钟左右，请耐心等待。返回集群管理页面，当集群状态为“可用”时表示创建成功。如图③所示。

      了解详细步骤

      1

      配置网络参数

      选择付费方式

      2

      高级配置

      选择付费方式

      3

      查看集群状态

      选择付费方式

      单击图片可查看原图

      Step4 下载客户端并连接集群

      步骤

      ①DWS提供了基于Windows平台的Data Studio图形界面客户端，请先在客户端主机上安装JDK 1.8版本（仅支持JDK 1.8版本）。并进入“此电脑 > 属性 > 高级系统设置 > 环境变量”设置JAVA_HOME（例如C:\Program Files\Java\jdk1.8.0_191），并在变量path中添加“;%JAVA_HOME%\bin”。

      ②在DWS控制台的“连接管理”页面，下载Data Studio图形界面客户端。

      ③解压下载的Data Studio软件包，进入解压目录后，双击Data Studio.exe启动客户端。

      ④在Data Studio主菜单中选择“文件 > 新建连接”，并在弹出框中参照图②所示配置连接参数连接DWS数据库。

      “数据库类型”请选择“HUAWEI CLOUD DWS”。

      “主机名”请填写集群的公网地址。在DWS管理控制台的集群管理页面中，单击集群名称，可查看公网地址，如图③所示。

      使用客户端首次连接DWS集群时，请使用创建集群时设置的管理员用户、密码、数据库端口连接到默认数据库“postgres”。

      ⑤去除“SSL选项”勾选，然后单击“确定”，在弹出对话框中单击“继续”。

      在本示例中，我们将采用非SSL方式通过公网地址连接集群。

      了解详细步骤

      1

      下载客户端

      选择付费方式

      2

      连接集群

      选择实例配置

      3

      获取集群公网地址

      选择实例配置

      单击图片可查看原图

      Step5 创建导入数据的目标数据库和表

      步骤

      在Data Studio客户端中执行SQL语句，将模拟的8.9亿条交通卡口车辆通行样例数据导入DWS，并执行查询。展示DWS对于历史详单数据的高性能查询能力。

      ①在Data Studio的“SQL终端”窗口，执行以下语句创建数据库“traffic”。

      create database traffic encoding 'utf8' template template0;

      ②右键单击数据库名“traffic”，单击菜单“打开连接”，再右键单击数据库名“traffic”并单击“打开新的终端”，如图②所示。

      后面的步骤，请全部在该终端中执行。

      ③执行以下语句，创建用于存储卡口车辆信息的数据库表。

      create schema traffic_data;
      set current_schema= traffic_data;
      drop table if exists GCJL;
      CREATE TABLE GCJL
      (
          kkbh VARCHAR(20), 
          hphm VARCHAR(20),
          gcsj DATE ,
          cplx VARCHAR(8),
          cllx VARCHAR(8),
          csys VARCHAR(8)
      )
      with (orientation = column, COMPRESSION=MIDDLE)
      distribute by hash(hphm);

      了解详细步骤

      1

      创建数据库

      选择付费方式

      2

      连接数据库

      选择实例配置

      3

      创建数据库表

      选择付费方式

      单击图片可查看原图

      Step6 创建OBS外表

      步骤

      了解详细步骤

      1

      创建OBS外表

      选择付费方式

      单击图片可查看原图

      Step7 将外表数据插入到数据库表中

      步骤

      ①执行以下语句，将数据从外表导入到数据库表中。

      insert into traffic_data.GCJL select * from tpchobs.GCJL_OBS;

      导入数据将耗费一些时间，请耐心等待。

      了解详细步骤

      1

      导入数据

      选择付费方式

      单击图片可查看原图

      Step8 查询并分析样例数据

      步骤

      ①执行Analyze命令，生成数据库普通表的统计信息。

      统计结果存储在系统表PG_STATISTIC中。执行计划生成器会使用这些统计数据，以生成最有效的查询执行计划。

      ② 查询数据表中的数据量

      执行如下语句，可以查看已加载的数据条数。

      set current_schema= traffic_data;

      Select count(*) from traffic_data.gcjl;

      ② 车辆模糊查询

      执行如下语句，指定车牌号码和时间段查询车辆轨迹。DWS在应对模糊查询时秒级响应。
      set current_schema= traffic_data;
      select hphm, kkbh, gcsj
      from traffic_data.gcjl
      where hphm like '粤A23F%'
      and kkbh in('508', '1125', '2120')
      and gcsj between '2016-01-01' and '2016-01-07'
      order by hphm,gcsj desc;

      了解详细步骤

      1

      执行Analyze和查询数据

      选择付费方式

      2

      车辆模糊查询

      选择实例配置

      单击图片可查看原图

      Step9 清理资源

      步骤

      当完成本示例后，如果您不再需要使用本示例创建的资源，可以删除这些资源，以免资源浪费或占用您的配额。

      ①删除集群。在DWS管理控制台的“集群管理”页面进行删除。如图①所示。

      删除时，在弹出对话框勾选“释放与集群绑定的弹性IP”，再单击“确定”。

      在删除集群时，自动创建的安全组如果未被其他资源所使用，此时也会随着集群一起被删除。

      ②登录虚拟私有云管理控制台，按顺序删除如下资源：

      进入“虚拟私有云”页面，单击虚拟私有云名称，然后删除子网，如图② 。

      进入“虚拟私有云”页面，在虚拟私有云“vpc-dws” 所在行，单击“删除”删除虚拟私有云。

      说明

      ①在删除安全组、子网、虚拟私有云之前，请确保它们没有被其他资源绑定。

      了解详细步骤

      1

      删除集群

      获取实例连接地址

      2

      删除子网

      下载和安装客户端

      单击图片可查看原图

      相关操作指导

      视频小图标 Created with Sketch.

      快速入门

      视频小图标 Created with Sketch.

      使用Data Studio连接DWS并导入OBS数据

      视频小图标 Created with Sketch.

      快照管理

      分享：

        相关文档

        相关产品

      关闭导读