Hive应用开发简介 Hive简介 Hive是一个开源的，建立在Hadoop上的 数据仓库 框架，提供类似SQL的HQL语言操作结构化数据，其基本原理是将HQL语言自动转换成MapReduce任务或Spark任务，从而完成对Hadoop集群中存储的海量数据进行查询和分析。 Hive主要特点如下：

查看更多 →

获取数据仓库列表信息 功能介绍 获取数据仓库列表 URI GET /v1.0/{project_id}/common/warehouses 表1 路径参数 参数 是否必选 参数类型 描述 project_id 是 String 项目id，获取方法请参见获取项目ID 表2 Query参数

查看更多 →

Service）为客户提供ClickHouse、Spark、Flink、Kafka、HBase等Hadoop生态的高性能大数据引擎，支持 数据湖 、数据仓库、BI、AI融合等能力，完全兼容开源，快速帮助客户上云构建低成本、灵活开放、安全可靠、全栈式的云原生大数据平台，满足客户业务快速增长和敏捷创新诉求。 父主题：

查看更多 →

落地，保障AI开发生态链上各参与方高效地实现各自的商业价值。 资产集市介绍 AI Gallery中，“资产集市”支持Notebook代码样例、数据集、算法、镜像、模型、Workflow等AI资产的共享。 “资产集市 > Notebook”：共享了Notebook代码样例。 AI

查看更多 →

RocketMQ实例兼容开源RocketMQ哪个版本？ RocketMQ实例兼容开源RocketMQ 4.8.0和5.x，客户端推荐使用4.9.5及更新的版本。 父主题： 实例问题

查看更多 →

Hive应用开发简介 Hive简介 Hive是一个开源的，建立在Hadoop上的数据仓库框架，提供类似SQL的HQL语言操作结构化数据，其基本原理是将HQL语言自动转换成Mapreduce任务或Spark任务，从而完成对Hadoop集群中存储的海量数据进行查询和分析。 Hive主要特点如下：

查看更多 →

开源镜像站论坛使用 介绍使用华为开源镜像站论坛的操作步骤。 进入开源镜像站首页。 单击“前往论坛”，进入华为云社区论坛-开源镜像站版块。 可以浏览镜像站最新的发布公告、常用工具的新手指导等。也可以发帖提需求建议、反馈问题等，将会有相关技术专家进行答复。 华为论坛不支持匿名发帖，如

查看更多 →

开源搜索引擎咨询 如何批量设置索引副本数为0？ 为什么新创建的索引分片全部被分配到一个node节点上？ Elasticsearch 7.x集群如何在index下创建type？ 如何配置 CSS 集群双副本？ json里设置了1个分片，是否可以通过修改配置，达到4分片，2副本的效果 E

查看更多 →

使用开源Kettle导入数据 Kettle是一款开源的ETL工具，通过Kettle工具可以完成数据的抽取、转换、装入和加载。 海量数据搬迁场景下，使用Kettle自身提供的数据入库插件，入库速度在1500条/秒左右，数据搬迁耗时较高。而相同运行环境下，使用集成dws-client

查看更多 →

使用开源Kafka触发器 本节介绍创建开源Kafka（OPENSOURCEKAFKA）触发器，供用户了解开源Kafka触发器的使用方法。 使用开源Kafka触发器后，FunctionGraph会定期轮询开源Kafka指定Topic下的新消息，FunctionGraph将轮询得到的消息作为参数传递来调用函数。

查看更多 →

如何免费试用数据仓库服务？ 免费试用活动仅限新用户可以参加。如果您的账号从未创建过 GaussDB (DWS)集群，且已完成实名认证，就有资格免费试用GaussDB(DWS)服务1个月。 您可以登录GaussDB(DWS) 管理控制台，单击“立即申请试用”开通免费试用套餐。不同区域之

查看更多 →

数据仓库使用哪些安全防护？ 数据仓库服务使用IAM和虚拟私有云来控制用户、集群的网络安全隔离。用户对集群的访问则采用了SSL安全连接和安全算法套件，支持双向数字证书认证。 同时在每个集群中对节点的操作系统进行安全加固，仅允许合法地访问操作系统文件，提高数据安全性。 父主题： 通用问题

查看更多 →

如何免费试用数据仓库服务？ 免费试用活动仅限新用户可以参加。如果您的账号从未创建过GaussDB(DWS)集群，且已完成实名认证，就有资格免费试用GaussDB(DWS)服务1个月。 您可以登录GaussDB(DWS)管理控制台，单击“立即申请试用”开通免费试用套餐。不同区域之间

查看更多 →

配置数据仓库服务（DWS）连接 连接数据仓库服务（DWS）时，相关参数如表1所示。 作业运行中禁止修改密码或者更换用户。在作业运行过程中修改密码或者更换用户，密码不会立即生效且作业会运行失败。 表1 数据仓库服务（DWS）连接参数 参数名 说明 取值样例 名称 连接的名称，根据连

查看更多 →

开源组件Fastjson拒绝服务漏洞 2019年09月03日，华为 云安全 团队检测到应用较广的开源组件Fastjson的多个版本出现拒绝服务漏洞。攻击者利用该漏洞，可构造恶意请求发给使用了Fastjson的 服务器 ，使其内存和CPU耗尽，最终崩溃，造成用户业务瘫痪。目前，华为云 Web应用防火墙 （Web

查看更多 →

MQS连接开发（开源客户端） Java客户端使用说明 Python客户端使用说明 Go客户端使用说明 C#客户端使用说明 其他语言客户端使用说明 附录：如何提高消息处理效率 附录：spring-kafka对接限制 父主题： 消息集成开发指导

查看更多 →

配置开源Spark组件对接LakeFormation 环境准备 配置Spark对接LakeFormation 对接后二次开发

查看更多 →

语言类开发开源组件镜像 以Maven镜像为例，介绍语言类开发开源组件镜像加速下载操作步骤。 进入开源镜像站首页。 选择“语言类”，筛选镜像；或者直接搜索目标镜像。 单击卡片右下角的“查看镜像源”，可查看该镜像代理或同步的镜像源。 Maven2 https://repo1.maven

查看更多 →

开源sqoop-shell工具使用指导 概述 sqoop-shell是一个开源的shell工具，其所有功能都是通过执行脚本“sqoop2-shell”来实现的。 sqoop-shell工具提供了如下功能： 支持创建和更新连接器 支持创建和更新作业 支持删除连接器和作业 支持以同步或异步的方式启动作业

查看更多 →

Spark2x开源增强特性 Spark2x开源新特性说明 CarbonData基本原理 Spark跨源复杂数据的SQL查询优化 父主题： Spark2x

查看更多 →

接入DWS数据源 概述 应用模型支持把DWS（数据仓库服务）作为一种数据源类型，并用于模型采集。在使用DWS数据源前，您需要先接入数据源。 操作步骤 在开天 集成工作台 界面中，选择左侧导航栏中的“应用模型 > 实例管理”，单击实例“控制台”。 选择“模型采集 > 数据源”，单击“创

查看更多 →