会给数据密集型的工作流带来大量的IO开销。而对于RDD来说，它只有一套受限制的接口，仅支持粗粒度的更新，例如map，join等等。通过这种方式，Spark只需要简单的记录建立数据的转换操作的日志，而不是完整的数据集，就能够提供容错性。这种数据的转换链记录就是数据集的溯源。由于并行

查看更多 →

通过Metastore对数据库及表和视图进行增删改查等操作。 如果使用IE浏览器访问Hue界面来执行HQL，由于浏览器存在的功能问题，将导致执行失败。建议使用兼容的浏览器，例如Google Chrome浏览器。 MapReduce：查看集群中正在执行和已经完成的MR任务，包括它们的状态、起始结束时间、运行日志等。

查看更多 →

如果在消息处理过程中有节点、进程等出现异常，提供重新部署该处理单元的能力。 可靠的消息保证 支持At-Least Once、At-Most Once、Exactly Once的数据处理模式。 安全机制 提供基于Kerberos的认证以及可插拔的授权机制，提供支持SSL的Storm UI以及Log Viewe

查看更多 →

精确一次语义：Flink的Checkpoint和故障恢复能力保证了任务在故障发生前后的应用状态一致性，为某些特定的存储支持了事务型输出的功能，即使在发生故障的情况下，也能够保证精确一次的输出。 丰富的时间语义 时间是流处理应用的重要组成部分，对于实时流处理应用来说，基于时间语义的窗口聚合、检

查看更多 →

Master负责协调来自ResourceManager的资源，并通过NodeManager监视容器的执行和资源使用（CPU、内存等的资源分配）。 NodeManager管理一个YARN集群中的每个节点。NodeManager提供针对集群中每个节点的服务，从监督对一个容器的终生管理到监视资源和跟踪节点健康。MRv1

查看更多 →

在 域名 基本信息页面，单击CNAME所在行的，复制“CNAME”。在页面顶部，单击“未接入”旁边的，在弹出的对话框中，复制“子域名”和“TXT记录”。 将CDN的主源站的源站域名修改为WAF的CNAME。 （可选）在DNS服务商添加一条WAF的子域名和TXT记录。 为了防止其他用户提前将您的域名配置到Web

查看更多 →

些组件的访问权限 。 Ranger架构如图1所示 图1 Ranger结构 表1 结构图说明 名称 描述 RangerAdmin Ranger的管理角色，拥有策略管理、用户管理、审计管理等功能，提供WebUI和RestFul接口。 UserSync 负责周期从外部同步用户和用户组信息并写入RangerAdmin中。

查看更多 →

默认情况下，用户的密码有效期是90天，所以获取的keytab文件的有效期是90天。 Kerberos服务的renewable、forwardable开关和票据刷新周期的设置在Kerberos服务的配置页面的“系统”标签下，票据刷新周期的修改可以根据实际情况修改“kdc_renew_lifetime”和“kdc_m

查看更多 →

DLV 的功能 我的数据 通过我的数据模块创建指向您的数据源的连接配置，支持如下数据源： 对象存储服务 （OBS） 数据仓库 服务（DWS） 数据湖探索 （ DLI ） MapReduce服务 （ MRS Hive） MapReduce服务（MRS SparkSQL） 云数据库 MySQL 云数据库

查看更多 →

适用于内容分发网络（CDN）的最佳实践 该示例模板中对应的合规规则的说明如下表所示： 表1 合规包示例模板说明 合规规则 规则中文名称 涉及云服务 规则描述 cdn-enable-https-certificate CDN使用HTTPS证书 cdn CDN未使用HTTPS，视为“不合规”

查看更多 →

用华为云CDN提高终端用户访问速度、提升用户体验。 方案概述 华为云CDN可以有效加速网站，为用户提供良好的体验。通过CDN加速搭建在E CS 服务器上的网站，这样构造的业务系统可以在降低成本的同时，提高终端用户使用感受。 业务流程：当终端用户发起访问请求时，会首先通过CDN查找对此

查看更多 →

开通CDN服务 在使用CDN之前，您需要开通CDN服务，本文为您介绍如何开通CDN服务。 前提条件 在执行本章操作前，请确认您 注册华为账号 并完成实名认证。 注意事项 您需要先购买流量包或者账号余额不少于1000元才能开通CDN服务，请确保您的账户中有足够的余额。您可以在费用中心页面，对账户进行充值。

查看更多 →

会从全量开始的增量数据持续的解析转换和回放，直到追平当前的增量数据。 第四阶段：为了防止触发器、事件在迁移阶段对于数据的操作，在结束任务阶段再迁移触发器、事件。 全量数据迁移的底层模块主要原理： 分片模块：通过优化的分片算法，计算每个表的分片逻辑 抽取模块：根据计算的分片信息并行多任务从源数据库查询数据

查看更多 →

启用和禁用SCP功能 启用SCP 在创建SCP并将其附加到组织单元和账号之前，必须先启用SCP，且只能使用组织的管理账号启用SCP。启用SCP后，组织将自动给所有OU和账号绑定FullAccess策略，默认允许所有操作。 以组织管理员或管理账号的身份登录管理控制台，进入Organizations控制台。

查看更多 →

CDN流量和带宽的进制换算规则是什么？ CDN的基础服务费用是流量或带宽，默认的进制换算规则如下： 流量进制换算规则为1GB=1024MB。 带宽进制换算规则为1Mbps=1000Kbps。 父主题： 使用咨询

查看更多 →

urce的类型有数据驱动和轮询两种。 典型的Source类型如下： 和系统集成的Sources：Syslog、Netcat。 自动生成事件的Sources：Exec、SEQ。 用于Agent和Agent之间通信的IPC Sources：Avro。 Source必须至少和一个Channel关联。

查看更多 →

Controller是Manager的控制中心，负责汇聚来自集群中所有节点的信息，统一向MRS集群管理员展示，以及负责接收来自MRS集群管理员的操作指令，并且依据操作指令所影响的范围，向集群的所有相关节点同步信息。 Manager的控制进程，负责各种管理动作的执行： Web Service将各种管

查看更多 →

接入CDN的加速域名和源站域名需要备案吗？ 添加中国大陆、全球服务范围内的加速域名，必须要在工信部备案才能接入CDN。 中国大陆境外服务范围的加速域名不要求备案。 源站域名不要求备案，但需在公网能正常解析(建议在工信部做好备案)。 如果域名已经有备案号，可以直接接入CDN使用，不要求一定在华为云备案。

查看更多 →

CDN下载 CDN下载简介 配置CDN下载

查看更多 →

化执行。SIMD的全称是Single Instruction Multiple Data，即用单条指令操作多条数据，通过数据并行以提高性能的一种实现方式 ( 其他的还有指令级并行和线程级并行 )，它的原理是在CPU寄存器层面实现数据的并行操作。 关系模型与SQL查询 ClickH

查看更多 →

来确保数据的一致性。针对时序场景，对存储数据进行预计算和存储，提升分析场景的性能。针对时序数据特征，进行强有力的数据编码和压缩能力，同时其自身的副本机制也保证了数据的安全，并与Apache Hadoop和Flink等进行了深度集成，可以满足工业物联网领域的海量数据存储、高速数据读取和复杂数据分析需求。

查看更多 →