使用开源Kettle导入数据 Kettle是一款开源的ETL工具，通过Kettle工具可以完成数据的抽取、转换、装入和加载。 海量数据搬迁场景下，使用Kettle自身提供的数据入库插件，入库速度在1500条/秒左右，数据搬迁耗时较高。而相同运行环境下，使用集成dws-client

查看更多 →

使用开源Kafka触发器 本节介绍创建开源Kafka（OPENSOURCEKAFKA）触发器，供用户了解开源Kafka触发器的使用方法。 使用开源Kafka触发器后，FunctionGraph会定期轮询开源Kafka指定Topic下的新消息，FunctionGraph将轮询得到的消息作为参数传递来调用函数。

查看更多 →

配置Hadoop数据传输加密 配置场景 安全加密通道是HDFS中RPC通信的一种加密协议，当用户调用RPC时，用户的login name会通过RPC头部传递给RPC，之后RPC使用Simple Authentication and Security Layer（SASL）确定一个

查看更多 →

开源组件Fastjson拒绝服务漏洞 2019年09月03日，华为 云安全 团队检测到应用较广的开源组件Fastjson的多个版本出现拒绝服务漏洞。攻击者利用该漏洞，可构造恶意请求发给使用了Fastjson的 服务器 ，使其内存和CPU耗尽，最终崩溃，造成用户业务瘫痪。目前，华为云 Web应用防火墙 （Web

查看更多 →

MQS连接开发（开源客户端） Java客户端使用说明 Python客户端使用说明 Go客户端使用说明 C#客户端使用说明 其他语言客户端使用说明 附录：如何提高消息处理效率 附录：spring-kafka对接限制 父主题： 消息集成开发指导

查看更多 →

配置开源Spark组件对接LakeFormation 环境准备 配置Spark对接LakeFormation 对接后二次开发

查看更多 →

语言类开发开源组件镜像 以Maven镜像为例，介绍语言类开发开源组件镜像加速下载操作步骤。 进入开源镜像站首页。 选择“语言类”，筛选镜像；或者直接搜索目标镜像。 单击卡片右下角的“查看镜像源”，可查看该镜像代理或同步的镜像源。 Maven2 https://repo1.maven

查看更多 →

开源sqoop-shell工具使用指导 概述 sqoop-shell是一个开源的shell工具，其所有功能都是通过执行脚本“sqoop2-shell”来实现的。 sqoop-shell工具提供了如下功能： 支持创建和更新连接器 支持创建和更新作业 支持删除连接器和作业 支持以同步或异步的方式启动作业

查看更多 →

Spark2x开源增强特性 Spark2x开源新特性说明 CarbonData基本原理 Spark跨源复杂数据的SQL查询优化 父主题： Spark2x

查看更多 →

修改RPC端口后HDFS NameNode实例都变为备状态 用户问题 通过页面更改NameNode的RPC端口，随后重启HDFS服务，出现所有NameNode一直是备状态，导致集群异常。 问题现象 所有NameNode都是备状态，导致集群异常。 原因分析 集群安装启动后，如果修改

查看更多 →

华为云帮助中心，为用户提供产品简介、价格说明、购买指南、用户指南、API参考、最佳实践、常见问题、视频帮助等技术文档，帮助您快速上手使用华为云服务。

查看更多 →

Spark2x开源新特性说明 Spark2x版本相对于Spark 1.5版本新增了一些开源特性。 具体特性或相关概念如下： DataSet，详见SparkSQL和DataSet原理。 Spark SQL Native DDL/DML，详见SparkSQL和DataSet原理。 S

查看更多 →

设置Hadoop中各模块的RPC通道是否加密。通道包括： 客户端访问HDFS的RPC通道。 HDFS中各模块间的RPC通道，如DataNode与NameNode间的RPC通道。 客户端访问Yarn的RPC通道。 NodeManager和ResourceManager间的RPC通道。 Spar

查看更多 →

客户端访问HDFS的RPC通道。 HDFS中各模块间的RPC通道，如DataNode与NameNode间。 客户端访问Yarn的RPC通道 NodeManager和ResourceManager间的RPC通道。 Spark访问Yarn，Spark访问HDFS的RPC通道。 Mapre

查看更多 →

配置开源Hive组件对接LakeFormation 环境准备 配置Hive对接LakeFormation 对接后二次开发

查看更多 →

开源sqoop-shell工具使用指导 概述 本章节适用于 MRS 3.x及后续版本。 sqoop-shell是一个开源的shell工具，其所有功能都是通过执行脚本“sqoop2-shell”来实现的。 sqoop-shell工具提供了如下功能： 支持创建和更新连接器 支持创建和更新作业

查看更多 →

开源组件Fastjson拒绝服务漏洞 2019年09月03日，华为云安全团队检测到应用较广的开源组件Fastjson的多个版本出现拒绝服务漏洞。攻击者利用该漏洞，可构造恶意请求发给使用了Fastjson的服务器，使其内存和CPU耗尽，最终崩溃，造成用户业务瘫痪。目前，华为云Web应用防火墙（Web

查看更多 →

ALM-19024 RegionServer RPC响应时间的P99超过阈值 告警解释 系统每30秒周期性检测每个HBase服务的RegionServer实例的RPC请求响应时间的P99。当检测到某个RegionServer上的RPC请求响应时间的P99连续10次超出阈值时产生该告警。

查看更多 →

应用网关API 查询插件列表 创建插件 查询单个插件 修改插件 删除插件 查询http2rpc资源列表 创建http转rpc方法 修改http转rpc方法 删除http转rpc方法

查看更多 →

GeminiDB Redis和开源Redis、其他开源Redis云服务有什么区别？ 开源Redis是常规的缓存产品，纯内存架构。GeminiDB Redis在开源Redis上做了增强，是一款兼容Redis协议的弹性KV数据库，支持远超内存的容量和极致的性能。热数据在内存中，全量数据在存储池中。有以下特点：

查看更多 →

namenode.rpc-address”参数的“haclusterX.remotenn1”值为对端集群其中一个NameNode实例的业务IP和RPC端口，设置“haclusterX.remotenn2”值为对端集群另外一个NameNode实例的业务IP和RPC端口。按照“IP:port”格式填写。

查看更多 →