Spark基本原理 Spark简介 Spark是一个开源的，并行数据处理框架，能够帮助用户简单、快速的开发大数据应用，对数据进行离线处理、流式处理、交互式分析等。 Spark提供了一个快速的计算、写入及交互式查询的框架。相比于Hadoop，Spark拥有明显的性能优势。Spark

查看更多 →

Hue基本原理 Hue是一组WEB应用，用于和 MRS 大数据组件进行交互，能够帮助用户浏览HDFS，进行Hive查询，启动MapReduce任务等，它承载了与所有MRS大数据组件交互的应用。 Hue主要包括了文件浏览器和查询编辑器的功能： 文件浏览器能够允许用户直接通过界面浏览以及操作HDFS的不同目录；

查看更多 →

易于调试：CQL提供了详细的异常码说明，降低了用户对各种错误的处理难度。 关于Storm的架构和详细原理介绍，请参见：https://storm.apache.org/。 Storm原理 基本概念 表1 概念介绍 概念 说明 Tuple Storm核心数据结构，是消息传递的基本单元，

查看更多 →

Subtask串起来组成一个Operator Chain，实际上就是一个执行链，每个执行链会在TaskManager上一个独立的线程中执行，如图5所示。 图5 Operator chain 图5中上半部分表示的是将Source和Map两个紧密度高的算子优化后串成一个Operator Chain，实际上一个Operator

查看更多 →

。 Container Container是YARN中的资源抽象，封装了某个节点上的多维度资源，如内存、CPU、磁盘、网络等（目前仅封装内存和CPU），当AM向RM申请资源时，RM为AM返回的资源便是用Container表示。YARN会为每个任务分配一个Container，且该任

查看更多 →

工作负载伸缩原理 HPA工作原理 HPA（Horizontal Pod Autoscaler）是用来控制Pod水平伸缩的控制器，HPA周期性检查Pod的度量数据，计算满足HPA资源所配置的目标数值所需的副本数量，进而调整目标资源（如Deployment）的replicas字段。

查看更多 →

工作负载伸缩原理 CCE支持多种工作负载伸缩方式，策略对比如下： 表1 弹性伸缩策略对比 伸缩策略 HPA策略 CronHPA策略 CustomedHPA策略 VPA策略 AHPA策略 策略介绍 Kubernetes中实现POD水平自动伸缩的功能，即Horizontal Pod Autoscaling。

查看更多 →

自动建表原理介绍 CDM 将根据源端的字段类型进行默认规则转换成目的端字段类型，并在目的端建数据表。 自动建表时的字段类型映射 CDM在 数据仓库 服务（Data Warehouse Service，简称DWS）中自动建表时，DWS的表与源表的字段类型映射关系如图1所示。例如使用CDM

查看更多 →

HBase基本原理 数据存储使用HBase来承接，HBase是一个开源的、面向列（Column-Oriented）、适合存储海量非结构化数据或半结构化数据的、具备高可靠性、高性能、可灵活扩展伸缩的、支持实时数据读写的分布式存储系统。更多关于HBase的信息，请参见：https://hbase

查看更多 →

Hive基本原理 Hive是建立在Hadoop上的数据仓库基础构架。它提供了一系列的工具，可以用来进行数据提取转化加载（ETL），这是一种可以存储、查询和分析存储在Hadoop中的大规模数据的机制。Hive定义了简单的类SQL查询语言，称为HQL，它允许熟悉SQL的用户查询数据。

查看更多 →

Group1与Consumer Group2中。 关于Kafka架构和详细原理介绍，请参见：https://kafka.apache.org/24/documentation.html。 Kafka原理 消息可靠性 Kafka Broker收到消息后，会持久化到磁盘，同时，To

查看更多 →

HetuEngine基本原理 HetuEngine简介 HetuEngine是自研高性能交互式SQL分析及数据虚拟化引擎。与大数据生态无缝融合，实现海量数据秒级交互式查询；支持跨源跨域统一访问，使能 数据湖 内、湖间、湖仓一站式SQL融合分析。 HetuEngine结构 HetuEn

查看更多 →

华为人工智能工程师培训 培训简介 基于ICT网络、以人工智能为引擎的第四次工业革命正将人们带入一个万物感知、万物互联、万物智能的智能世界。国务院于2017年7月份印发了《新一代人工智能发展规划》，将人工智能发展提高到国家战略层面，规划明确要求“到2020年人工智能总体技术和应用与

查看更多 →

什么是医疗智能体 医疗智能体（ EIHealth ）平台是基于华为云AI和大数据技术优势，为基因组分析、药物研发和临床研究三个领域提供的专业AI研发平台。平台提供大量相关模型、算法及数据资源，是一站式的医疗研发平台。 医疗智能体提供以下子服务： 基因组分析 提供高性能、高可靠性、高性

查看更多 →

创建联邦学习工程 创建工程 编辑代码（简易编辑器） 编辑代码（WebIDE） 模型训练 父主题： 模型训练

查看更多 →

Standard自动学习 使用ModelArts Standard自动学习实现口罩检测 使用ModelArts Standard自动学习实现垃圾分类

查看更多 →

通过E CS 集群部署在线学习平台服务 基于RDS for MySQL存储用户后台数据 基于 Web应用防火墙 提供网络安全防护，保障后台 服务器 的安全 使用分布式缓存服务Redis存储用户的信息，加速登录服务 使用OBS存储在线学习视频等资源 集成CDN用户在线学习视频播放的速度，提升用户使用体验感；

查看更多 →

志、VPC日志，持续实时检测日志中访问者的IP或 域名 是否存在潜在的恶意活动和未经授权行为并进行告警。 此服务集成了AI智能引擎、威胁情报、规则基线三种检测方式，智能检测来自多个云服务（包含IAM服务、DNS服务、 CTS 服务、OBS服务、VPC服务）日志数据中的访问行为，去发现是否

查看更多 →

人工智能 华为人工智能工程师培训 华为企业人工智能高级开发者培训 行业AI大赛&培训专业服务 父主题： 培训服务

查看更多 →

华为企业人工智能高级开发者培训 培训简介 基于ICT网络、以人工智能为引擎的第四次工业革命正将人类带入一个万物感知、万物互联、万物智能的智能世界。国务院于2017年7月份印发了《新一代人工智能发展规划》，将人工智能发展提高到国家战略层面，规划明确要求“到2020年人工智能总体技术

查看更多 →

详细介绍各服务的产生背景、亮点和价值特性，工作原理和应用场景 乾坤eBook（网络） 详细介绍各服务的产生背景、亮点和价值特性，工作原理和应用场景 乾坤知识库（网络） （待上线） 乾坤eBook（网络） （待上线） 产品介绍视频（网络） （待上线） 小坤智能助手 您好！我是有问必答知识渊博的智能 问答机器人 ，有问题欢迎随时求助哦！

查看更多 →