SQL和DataFrame Spark SQL在不同DB都可以显示临时表 如何在Spark命令中指定参数值 SparkSQL建表时的目录权限 为什么不同服务之间互相删除UDF失败 Spark SQL无法查询到Parquet类型的Hive表的新插入数据 cache table使用指导

查看更多 →

SQL和DataFrame Spark SQL ROLLUP和CUBE使用的注意事项 Spark SQL在不同DB都可以显示临时表 如何在Spark命令中指定参数值 SparkSQL建表时的目录权限 为什么不同服务之间互相删除UDF失败 Spark SQL无法查询到Parquet类型的Hive表的新插入数据

查看更多 →

请根据您的实际需求慎重选择。 当您开通免费试用套餐后，在免费时间段内，您可以直接登录 GaussDB (DWS) 控制台创建相应区域、节点规格和节点数量的集群，该规格集群会自动享受免费试用活动。如果您选择使用其他节点类型，将按标准的按需费率支付费用，计费详情请参见GaussDB(DWS)价格详情。

查看更多 →

，参考对应数据库的产品文档进行配置。 " 单次请求行数 可选参数，单击“显示高级属性”后显示。 指定每次请求获取的行数，根据数据源端和作业数据规模的大小配置该参数。如果配置过大或过小，可能影响作业的时长。 1000 SSL加密 可选参数，支持通过SSL加密方式连接数据库，暂不支持自建的数据库。

查看更多 →

数据仓库 使用哪些安全防护？ 数据仓库服务使用IAM和虚拟私有云来控制用户、集群的网络安全隔离。用户对集群的访问则采用了SSL安全连接和安全算法套件，支持双向数字证书认证。 同时在每个集群中对节点的操作系统进行安全加固，仅允许合法地访问操作系统文件，提高数据安全性。 父主题： 通用问题

查看更多 →

，请根据您的实际需求慎重选择。 当您开通免费试用套餐后，在免费时间段内，您可以直接登录GaussDB(DWS)控制台创建相应区域、节点规格和节点数量的集群，该规格集群会自动享受免费试用活动。如果您选择使用其他节点类型，将按标准的按需费率支付费用，计费详情请参见GaussDB(DWS)价格详情。

查看更多 →

一款运行在Linux操作系统的命令行工具，通过和外表机制的配合，实现数据的高速导入导出。GDS工具包需要安装在数据源文件所在的 服务器 上，数据源文件所在的服务器称为数据服务器，也叫GDS服务器。 DSC 用于将Teradata或Oracle数据库中的sql脚本迁移为适用于GaussDB(DWS)的sql脚本，便于在G

查看更多 →

署数据仓库服务器，就可以在几分钟之内获得高性能、高可靠的企业级数据仓库集群。 您只需点击几下鼠标，就可以轻松完成应用程序与数据仓库的连接、数据备份、数据恢复、数据仓库资源和性能监控等运维管理工作。 提供一键式异构数据库迁移工具 DWS提供配套的迁移工具，可支持Oracle和Teradata的SQL脚本迁移到DWS。

查看更多 →

务会对数据源和任务进行全面的管理和维护，用户只需关注数据迁移的具体逻辑，而不用关心环境等问题，极大降低了开发维护成本。 CDM 还提供了REST API，支持第三方系统调用和集成。 实时监控 需要自行选型开发。 您可以使用 云监控服务 监控您的CDM集群，执行自动实时监控、告警和通知操

查看更多 →

Studio控制台首页，选择对应工作空间的“数据开发”模块，进入数据开发页面。 在数据开发主界面的左侧导航栏，选择“数据开发 > 脚本开发”。 移动脚本或脚本目录。 方式一：通过右键的“移动”功能。 在脚本目录中选择需要移动的脚本或脚本文件夹，右键单击脚本或脚本文件夹名称，选择“移动”。 图1

查看更多 →

数据处理支持什么类型脚本？ 目前数据处理仅支持Python脚本。数据处理集成了华为公有云ModelArts服务的引擎，用来执行用户自编码的Python脚本。 父主题： 数据处理

查看更多 →

案。 数据湖探索（ DLI ） 华为云DLI是完全兼容Apache Spark和Apache Flink生态，实现批流一体的Serverless大数据计算分析服务。DLI支持多模引擎，企业仅需使用SQL或程序就可轻松完成异构数据源的批处理、流处理、内存计算、机器学习等，挖掘和探索数据价值。

查看更多 →

Hive等多种数据仓库。 支持可视化和DDL方式管理数据库表。 脚本开发 提供在线脚本编辑器，支持多人协作进行SQL、Shell、Python脚本在线代码开发和调测。 支持使用变量和函数。 作业开发 提供图形化设计器，支持拖拉拽方式快速构建数据处理工作流。 预设数据集成、SQL、She

查看更多 →

脚本开发 数据连接创建成功后，进行脚本开发，按照数仓分层规范和《数据湖开发规范》进行关系建模开发和维度建模开发。 创建spark sql脚本 在“脚本开发”功能下，在对应的脚本文件夹下创建spark sql脚本。 图1 脚本开发1 SQL脚本右上角配置数据连接和数据库 图2 脚本开发2

查看更多 →

脚本管理 提供用户自定义脚本的创建、修改、删除以及在目标虚拟机上执行自定义脚本、公共脚本的能力。通过该功能，用户可以通过自定义脚本或公共脚本在目标实例（目前支持E CS ）上执行操作。 创建自定义脚本 管理自定义脚本 执行自定义脚本 执行公共脚本 父主题： 自动化运维

查看更多 →

后置脚本 后置脚本是在请求发送后执行的代码片段，主要用于验证请求返回的结果（断言）、将请求返回的结果数据写入环境变量等场景。可以在接口的“后置脚本”页面中单击“添加后置操作”，发送接口请求后将自动运行后置脚本。 断言 可以利用后置脚本验证API响应返回结果的正确性。 // 示例1：pm

查看更多 →

输入搜索条件，在实例列表中通过搜索条件来选取实例，默认按照名称搜索。 过滤条件 输入过滤属性和对应的过滤值，指定过滤条件来选择实例。 支持设置多个过滤条件，搜索时多个过滤属性之间为“与”的关系。 该方式对未来新增的实例也生效。 标签 设置标签键和对应的标签值，指定一个或多个标签来选取实例。 选择多个标签时，按照“与”的关系搜索。

查看更多 →

脚本管理 新建脚本 查看和修改脚本信息 下载脚本 删除脚本 父主题： 运维管理

查看更多 →

新建脚本 云 堡垒机 支持脚本管理功能。通过执行脚本，完成复杂或重复的运维任务，提升运维效率。云堡垒机支持在线编辑脚本和以文件方式导入脚本。 本小节主要介绍如何新建脚本。 云堡垒机已内置HSS-Agent自动下载及安装脚本。 约束限制 仅专业版云堡垒机支持脚本管理功能。 仅支持管理Python和Shell两种脚本语言。

查看更多 →

删除脚本 本小节主要介绍如何删除线上脚本，管理脚本列表。 前提条件 已获取“脚本管理”模块管理权限。 操作步骤 登录云堡垒机系统。 选择“运维 > 脚本管理 ”，进入脚本列表页面。 单个删除。 选择目标脚本，在相应“操作”列单击“删除”，弹出删除确认窗口。 单击“确认”，即可删除目标脚本。

查看更多 →

开发脚本 开发SQL脚本 开发Shell脚本 开发Python脚本 父主题： 脚本开发

查看更多 →