urce的数据，当Sink成功将数据发送到下一跳的Channel或最终目的地时，数据从Channel移除。 Channel提供的持久化水平与Channel的类型相关，有以下三类： Memory Channel：非持久化。 File Channel：基于WAL（预写式日志Write-Ahead

查看更多 →

权限管理模块，管理用户和用户组的权限。 A CS 用户和用户组管理模块，管理用户及用户归属的用户组。 Kerberos 在 OMS 与集群中各部署一个。 OMS Kerberos提供单点登录及Controller与Node Agent间认证的功能。 集群中Kerberos提供组件用户安全认证功能，其服务名称为KrbServer，包含两种角色实例：

查看更多 →

K8s调度器原理剖析和实践 Cloud Native Lives 第5课：K8s网络模型原理剖析与实践 01:11:04 K8s网络模型原理剖析与实践 Cloud Native Lives 第6课：K8s服务发现与负载均衡原理剖析与实践 01:11:38 K8s服务发现与负载均衡原理剖析

查看更多 →

支持客户所在地或培训中心培训。 华为认证存储高级工程师培训 本培训课程内容主要包括： 存储系统介绍、闪存存储技术与应用、分布式存储技术与应用、存储规划设计与实施、存储运维与故障处理等。 提供为期5天的面授培训服务： 每场限16人以内。 支持客户所在地或培训中心培训。 华为认证数通高级工程师核心技术培训

查看更多 →

集团应用与数据集成 集团企业完成子公司与集团总部之间、集团与外部合作伙伴之间的集成面临这些瓶颈： 地域差异 集团总部和集团子公司、合作伙伴所处的地域不同，时区不同，降低了数据的时效性和可靠性。 云服务差异 集团总部和集团子公司、合作伙伴使用的云服务不一样，调用不同的云服务存在困难。

查看更多 →

选择“使用已有”应用安装包时，该参数可见。 选择应用安装包所在的OBS桶与安装包名称。 选择2.3 步骤二：应用内容上云中创建的OBS桶。 应用启动路径 应用类型选择“3D应用”时，该参数可见。 若为系统预装的3D应用，此为应用启动程序在 云服务器 系统中的绝对路径。否则为应用启动程序在安装包中的相对路径。

查看更多 →

Ranger基本原理 Apache Ranger提供一个集中式安全管理框架，提供统一授权和统一审计能力。它可以对整个Hadoop生态中如HDFS、Hive、HBase、Kafka、Storm等进行细粒度的数据访问控制。用户可以利用Ranger提供的前端WebUI控制台通过配置相关策略来控制用户对这些组件的访问权限

查看更多 →

ZooKeeper基本原理 ZooKeeper简介 ZooKeeper是一个分布式、高可用性的协调服务。在大数据产品中主要提供两个功能： 帮助系统避免单点故障，建立可靠的应用程序。 提供分布式协作服务和维护配置信息。 ZooKeeper结构 ZooKeeper集群中的节点分为三种

查看更多 →

数据应用集成设计与实施 图1 数据应用集成设计与实施 数据应用集成设计与实施作为数据管理实施专业服务中的一个非必选项，主要面向客户数据消费场景多，IT能力弱的场景提供服务。工作内容包括数据应用集成实施和数据应用内容开发，将多个数据应用进行打通组合，或针对特定业务场景进行报表设计与开

查看更多 →

询时间。并行查询的性能提升倍数理论上与CPU的核数正相关，也就是说并行度越高能够使用的CPU核数就越多，性能提升的倍数也就越高。 下图是使用CPU多核资源并行计算一个表的count(*)过程的基本原理：表数据进行切块后分发给多个核进行并行计算，每个核计算部分数据得到一个中间cou

查看更多 →

目前，DRS实时灾备支持的数据库类型，如下表所示。 表1 灾备方案 业务数据库 灾备数据库 相关文档 本地自建MySQL数据库 ECS自建MySQL数据库 其他云上MySQL数据库 RDS for MySQL RDS for MySQL MySQL到MySQL单主灾备 MySQL到MySQL双主灾备

查看更多 →

如何保障数据库高可用 云数据库 GeminiDB采用计算存储分离架构，集群下多个数据库实例访问下层共享分布式存储，整体的故障有计算节点故障、存储节点故障两类。 图1 原理图 当计算节点故障，由于下层共享存储，其余非故障节点不需要进行数据恢复，直接接管业务，可提供秒级的故障切换，加

查看更多 →

RDS与自建数据库优势对比 云数据库RDS和自建数据库的优势对比如表1所示。 表1 优势对比 项目 云数据库RDS 自购 服务器 搭建数据库服务 服务可用性 请参见 弹性云服务器 的优势。 需要购买额外设备，自建主从，自建RAID。 数据可靠性 请参见什么是云硬盘。 需要购买额外设备，自建主从，自建RAID。

查看更多 →

仅当“连接模式”选择“默认”时需要配置。 填写数据库的端口。 JDBC连接 仅当“连接模式”选择“专业”时需要配置。 填写数据库的JDBC格式连接串。 用户名 数据库的登录用户名。 密码 数据库的登录密码。 完成连接配置后，单击“测试连接”，检测元模型与数据源之间是否能够连通。 如果测试结果为

查看更多 →

数据库加密与访问控制 数据库安全加密管理 系统管理员操作指导 安全管理员操作指导 审计管理员操作指导

查看更多 →

MapReduce基本原理 如需使用MapReduce，请确保 MRS 集群内已安装Hadoop服务。 MapReduce是Hadoop的核心，是Google提出的一个软件架构，用于大规模数据集（大于1TB）的并行运算。概念“Map（映射）”和“Reduce（化简）”及其主要思想，均取自于函数式编程语言及矢量编程语言。

查看更多 →

DDS节点脱节原理和说明 副本集架构由主节点、备节点和隐藏节点组成，DDS自动搭建三节点的副本集供用户使用，节点之间数据自动同步，保证数据的高可靠性。对于需要保证高可用的中小型业务系统，推荐使用副本集。 主节点：即Primary节点，用于读写请求。 备节点：即Secondary节点，用于读请求。

查看更多 →

为的“1+2+1”物联网解决方案，理论与实践并重，系统地介绍IoT平台原理与实战，物联网通信技术原理与实战，物联网操作系统原理与实战，以及华为物联网网关原理与实战。旨在培养熟悉物联网技术原理，并能够应用华为物联网产品与技术进行综合创新的应用型人才。 培训对象 物联网初学者 物联网从业人员

查看更多 →

MRS安全认证原理和认证机制 功能 开启了Kerberos认证的安全模式集群，进行应用开发时需要进行安全认证。 使用Kerberos的系统在设计上采用“客户端/服务器”结构与AES等加密技术，并且能够进行相互认证（即客户端和服务器端均可对对方进行身份认证）。可以用于防止窃听、防止

查看更多 →

MySQL主备复制原理简介 RDS for MySQL的默认备库、只读实例、自建从库、DRS链路灾备实例均采用MySQL的Binlog复制技术，也称为MySQL主备复制或主从复制技术。本章节介绍MySQL的主从复制原理。 主备复制流程 主节点（Master）中有数据更新时，会按照

查看更多 →

Loader基本原理 Loader是在开源Sqoop组件的基础上进行了一些扩展，实现MRS与关系型数据库、文件系统之间交换“数据”、“文件”，同时也可以将数据从关系型数据库或者文件服务器导入到HDFS/HBase中，或者反过来从HDFS/HBase导出到关系型数据库或者文件服务器中。

查看更多 →