输出都会被存储在文件系统中。整个框架负责任务的调度和监控，以及重新执行已经失败的任务。 MapReduce主要特点如下： 大规模并行计算 适用于大型数据集 高容错性和高可靠性 合理的资源调度 父主题： MapReduce应用开发概述

查看更多 →

通过施加超出系统容量的业务压力，验证云服务的过载保护、业务隔离和优雅降级等能力。为全面验证系统整体的容量规划和业务依赖，云服务应用通常采用全链路压测进行测试。 风险等级 高 关键策略 模拟大量接口消息进行压力测试。 模拟各种业务场景进行压力测试。 持续自动测试。 性能发生偏差时自动告警，以便及时定位和处理。 相关云服务和工具

查看更多 →

Turbo集群支持使用云原生网络2.0。 适用场景 性能要求高，需要使用VPC其他网络能力的场景：由于云原生网络2.0直接使用的VPC网络，性能与VPC网络的性能几乎一致，所以适用于对带宽、时延要求极高的业务场景，比如：线上直播、电商优惠等。 大规模组网：云原生网络2.0当前最大可支持2000个E CS 节点，10万个容器。

查看更多 →

CSS 是一个基于Apache Lucene(TM)的开源搜索引擎，用于原始日志存储及日志检索。 Influxdb 专门处理高写入和查询负载的 时序数据库 ，用于存储大规模的时序数据并进行实时分析。 Prometheus 开源的系统监控和警报工具，用于主机监控。 OBS 对象存储，用于原始日志存储。

查看更多 →

rch等。 具体内容请参见《 数据湖探索 开发指南》。 存算分离 用户将数据存储到OBS后， DLI 可以直接和OBS对接进行数据分析。存算分离的架构下，使得存储资源和计算资源可以分开申请和计费，降低了成本并提高了资源利用率。 存算分离场景下，DLI支持OBS在创建桶时数据冗余策略选择单

查看更多 →

CSS是一个基于Apache Lucene(TM)的开源搜索引擎，用于原始日志存储及日志检索。 Influxdb 专门处理高写入和查询负载的时序数据库，用于存储大规模的时序数据并进行实时分析。 Prometheus 开源的系统监控和警报工具，用于主机监控。 OBS 对象存储，用于原始日志存储。

查看更多 →

产品上市质量。 8大特色压测模型，性能容量全场景智能评估 性能测试服务沉淀了30年高并发测试工程方案与实践，提供了浪涌（突发流量）、智能摸高（系统性能摸底）、震荡（模拟高低峰）、TPS模式（压力自定义）等8大模式，快速构建真实场景，助力产品压测场景覆盖率提升50%，满足客户全场景的压测诉求。

查看更多 →

弹性防护能力 遭受大规模攻击时自动调用当前区域华为云最大DDoS防护能力提供全力防护。 海量清洗带宽 拥有多线BGP防护带宽，轻松抵御DDoS攻击，可以满足活动大促、活动上线等重要业务的安全稳定性保障需求。 卓越清洗能力 全自动检测和攻击策略匹配，实时防护；业务流量采用集群分发，性能高，时延低，稳定性好。

查看更多 →

HetuEngine依赖的组件 名称 描述 HDFS Hadoop分布式文件系统（Hadoop Distributed File System），提供高吞吐量的数据访问，适合大规模数据集方面的应用。 Hive 建立在Hadoop基础上的开源的 数据仓库 ，提供类似SQL的Hive Query Language

查看更多 →

是用来采集大规模集群中的监控类信息，并可实现数据的秒级查询，解决海量监控类数据在普通数据库中查询存储的局限性。 OpenTSDB使用场景有如下几个特点： 采集指标在某一时间点具有唯一值，没有复杂的结构及关系。 监控的指标具有随着时间不断变化的特点。 具有HBase的高吞吐，良好的伸缩性等特点。

查看更多 →

Endpoint护栏和资源护栏策略，阻断所有非预期的访问路径，提供数据边界管理的详细设计方案。 中大型企业上华为云，对于数据隐私、核心数据的防护要求高。 数据边界管理实施 根据企业数据边界管理的详细设计，落地企业数据管理最佳实践。 高阶场景-云财务治理服务 云财务治理设计 根据Landing Zone组织结构，结合财务关系，设计分级财务管理详细方案。

查看更多 →

企业电商 对内存要求高、数据量大并且数据访问量大、要求快速的数据交换和处理的场景。例如广告精准营销、电商、移动APP。 推荐使用内存优化型 弹性云服务器 ，主要提供高内存实例，同时可以配置超高IO的云硬盘和合适的带宽。 更多信息，请参见内存优化型。 图形渲染 对图像视频质量要求高、大内存，大

查看更多 →

于另外两种容器网络模式，性能存在一定的损耗（约5%-15%）。所以容器隧道网络适用于对性能要求不是特别高的业务场景，比如：Web应用、访问量不大的数据中台、后台服务等。 大规模组网：相比VPC路由网络受限于VPC路由条目配额的限制，容器隧道网络没有网络基础设施的任何限制；同时容器

查看更多 →

优势： 大规模集群部署 单套集群最大支持100个节点部署，适用于写入规模和数据量大的互联网场景。 高可用易扩展 单节点宕机不会影响整个集群的可用性，计算节点和存储空间可独立快速扩容，扩容期间业务无感知。 实时高并发写入 实时高并发写入，适合电商领域高并发海量订单，写入性能高。 工业数据采集

查看更多 →

准直播与低时延直播两种服务。标准直播致力于为常规的大规模实时观看场景提供更加稳定、高效的直播流媒体传输服务及功能强大的实时媒体处理能力。低时延直播将直播端到端延迟降低至毫秒级，并且弱网抗性更强，适用于直播延迟敏感，内容同步性要求高的直播场景。 视频直播服务包含如下子产品： 云直播（Cloud

查看更多 →

DWS支持行列混合存储，可以同时为用户提供更优的数据压缩比（列存）、更好的索引性能（列存）、更好的点更新和点查询（行存）性能。 数据加载快 DWS提供了GDS极速并行大规模数据加载工具。 高扩展 按需扩展：Shared-Nothing开放架构，可随时根据业务情况增加节点，扩展系统的数据存储能力和查询分析性能，最高支持2048节点规模。

查看更多 →

低基字段分组聚合 高基字段聚合 表示对具有较多不同值的列进行聚合，如对一个存储时间的列进行按天的时间聚合。 高基字段直方图聚合 低基字段和高基字段混合聚合 表示对以上两种类型的聚合混合在一起，如先对低基字段做分组聚合，然后再对高基字段做直方图聚合。 低基字段分组聚合混合高基字段直方图聚合

查看更多 →

的成果输出。 实景三维生产 实景三维工程管理 对输入数据进行检校，生成实景三维数据生产的工程文件。 空中三角测量 基于给定的数据解算图像位姿，并将解算后图像位姿、稀疏点云、质检信息以文件形式输出。 纹理Mesh模型构建 对多视角影像进行分布式并行处理，生成带纹理的三维Mesh模型

查看更多 →

收集大数据时需要快速添加大量实例，并在收集结束后删除实例。 随着数据量不断增大，企业要高效准确地处理实时数据，需要运行越来越多的CPU资源来提供充足算力。采用按需实例会在成本可控上遇到较大挑战。 竞享实例的应用 客户通过使用竞享实例来降低用云成本，并在预算范围内尽可能的扩大集群规模，提升业

查看更多 →

般都是任务型计算，快速申请大量资源，完成后快速释放。 云容器实例提供如下特性，能够很好的支持这类场景。 高性能计算：提供高性能计算、网络和高I/O存储，满足密集计算的诉求 极速弹性：秒级资源准备与弹性，减少计算过程中的资源处理环节消耗 免运维：无需感知集群和 服务器 ，大幅简化运维工作、降低运维成本

查看更多 →

DLI将Flink作业的输出数据以upsert的模式输出到Kafka中。 Apache Kafka是一个快速、可扩展的、高吞吐、可容错的分布式发布订阅消息系统，具有高吞吐量、内置分区、支持数据副本和容错的特性，适合在大规模消息处理场景中使用。 前提条件 Kafka是线下集群，需要通过增强型跨源连接功能将Flin

查看更多 →