使用开源Kettle导入数据 Kettle是一款开源的ETL工具，通过Kettle工具可以完成数据的抽取、转换、装入和加载。 海量数据搬迁场景下，使用Kettle自身提供的数据入库插件，入库速度在1500条/秒左右，数据搬迁耗时较高。而相同运行环境下，使用集成dws-client

查看更多 →

数据仓库 华为云数据仓库高级工程师培训 父主题： 培训服务

查看更多 →

数据仓库 表1 数据仓库权限 权限 对应API接口 授权项（Action） IAM项目 (Project) 企业项目 (Enterprise Project) 获取数据仓库列表 GET /v1.0/{project_id}/common/warehouses octopus:dataWarehouse:list

查看更多 →

数据仓库 获取数据仓库列表信息 获取数据仓库的数据列表 父主题： API

查看更多 →

数据仓库规格 GaussDB (DWS)的规格按照产品类型分为存算一体和存算分离。其中存算一体还包含单机版模式。各产品类型的不同差异，详情请参见数据仓库类型。 低配置集群，如内存16G、vCPU4核及以下的规格，建议不要用于生产环境，可能会导致资源过载风险。 存算一体规格 存算一体

查看更多 →

数据仓库类型 产品类型概述 存算一体：面向数据分析场景，为用户提供高性能、高扩展、高可靠、高安全、低时延、易运维的企业级数仓服务，支持2048节点、20PB级超大规模数据分析能力，适用于“库、仓、市、湖”一体化的融合分析业务。 存算分离：采用存算分离云原生架构，计算、存储分层弹性

查看更多 →

业务文件夹名称：需要与 DockerFile 文件中的项目名称一致。 图3 修改1 镜像名称：使用流水线构建完成之后的镜像地址。 图4 修改2 镜像版本：按照实际情况选择。一般更新之后构建容器选择最新的（最高的）版本。 配置修改 所有的配置文件都通过配置文件覆盖的方式进行配置，一定要在

查看更多 →

双方达成一致的业务保障目标，客户完成服务付款。 服务范围 本项目华为云数据仓库专家服务包括以下一项或多项内容： 华为云数据仓库产品咨询服务 华为云数据仓库平台安装部署规划与实施 数据仓库迁移方案设计与实施支持 基于华为云数据仓库平台的开发支持 本项目华为云数据仓库专家服务不包括以下内容： 应用程序改造、应用程序设计、数据库逻辑结构设计

查看更多 →

查看构建任务构建信息 功能介绍 查看构建任务构建信息 调用方法 请参见如何调用API。 URI GET /v1/job/{job_id}/info 表1 路径参数 参数 是否必选 参数类型 描述 job_id 是 String 构建的任务ID； 编辑构建任务时，浏览器URL末尾的32位数字、字母组合的字符串。

查看更多 →

创建数据仓库GaussDB(DWS) 参见“创建集群”章节创建GaussDB(DWS)数据仓库。创建成功后，记录集群的内网IP。 为确保E CS 与GaussDB(DWS)网络互通，GaussDB(DWS)数据仓库需要与ECS在同一个区域，同一个虚拟私有云和子网下。 表1 DWS规格

查看更多 →

数据仓库错误码 SQL标准错误码说明 第三方库错误码说明 GAUSS-00001 -- GAUSS-00100 GAUSS-00101 -- GAUSS-00200 GAUSS-00201 -- GAUSS-00300 GAUSS-00301 -- GAUSS-00400 GAUSS-00401

查看更多 →

数据仓库服务 DWS DWS集群启用KMS加密 DWS集群启用日志转储 DWS集群启用自动快照 DWS集群启用SSL加密连接 DWS集群未绑定弹性公网IP DWS集群运维时间窗检查 DWS集群VPC检查 父主题： 系统内置预设策略

查看更多 →

使用GDS从远端 服务器 导入数据 从 MRS 导入数据到集群 从GaussDB(DWS)集群导入数据到新集群 基于GDS的跨集群互联互通 使用开源Kettle导入数据 使用gsql元命令\COPY导入数据 使用COPY FROM STDIN导入数据

查看更多 →

构建程序 本例提供了支持优雅关机功能的程序，使用空白模板创建函数，用户可以学习使用。 创建函数 登录 函数工作流 控制台，在左侧导航栏选择“函数 > 函数列表”，进入函数列表界面。 单击“创建函数”，进入创建函数流程。 选择“创建空白函数”，填写函数配置信息。输入基础配置信息，完成后单击“创建函数”。

查看更多 →

入事件流构建页面。 如需新构建事件流，单击“新建事件流”，具体操作请参见构建事件流。 在“页面构建”页签，双击对应的事件模板组件，进入事件模板构建页面。 您也可以在当前事件流“配置信息”页签内，左侧栏选择“事件模板”，单击事件模板名称，或单击“操作”列，进入事件模板构建页面。 构建卡片。

查看更多 →

构建验证 手动构建验证 Gitlab自动触发Jenkins构建 父主题： Gitlab对接Jenkins自动构建并部署到CAE

查看更多 →

构建镜像 Octopus平台依赖算子镜像内的/bin/bash、stdbuf、tee软件，请确保基础镜像内包含上述软件且能通过PATH找到。 Dockerfile示例 FROM ros:noetic COPY ros_hard_mining.py /home/main/ # 算法启动示例:

查看更多 →

构建镜像 Octopus平台依赖算子镜像内的/bin/bash、stdbuf、tee软件，请确保基础镜像内包含上述软件且能通过PATH找到。 Dockerfile示例 FROM ros:noetic COPY ros_to_dataset.py /home/main/ # 算法启动示例：

查看更多 →

构建程序 前提条件 （1）函数中的IP地址为LTS的接入点，获取接入点IP方法如下： 登录云日志服务 LTS控制台，在左侧导航栏选择“主机管理 > 主机”； 在页面右上方，单击“安装ICAgent”； 在弹出的“安装ICAgent”窗口中获取接入点IP。 图1 接入点IP （2）

查看更多 →

构建程序 创建函数 登录函数工作流控制台，在左侧导航栏选择“函数 > 函数列表”，右上角单击“创建函数”。 进入创建函数页面，选择“创建空白函数”，填写函数信息，完成后单击“创建函数”。 函数类型：选择“HTTP函数”。 区域：选择“华东-上海一”。 函数名称：输入您自定义的函数

查看更多 →

构建程序 本案例提供了实现告警日志功能的程序包，使用空白模板创建函数，用户可以下载（index.zip）学习使用。 创建功能函数 创建实现日志提取功能的函数，将示例代码包上传。创建过程请参考创建函数，运行时语言选择“Python2.7”，委托名称选择创建委托中的“serverless_trust”。

查看更多 →