常用概念 推流 推流是指将采集、编码、封装好的直播内容传输到对应的直播服务中心的过程。 拉流 拉流是指直播服务中心已有直播内容，用指定地址进行拉取播放的过程。 边缘推流 指优先将视频推流至距离用户最近的最优边缘节点，然后通过华为云的直播调度系统将直播流传输到源站进行处理与分发。从

查看更多 →

其他常用操作 导入数据至DLI表的方式 数据湖探索监控指标说明及查看指导 云审计服务支持的DLI操作列表说明 配额管理

查看更多 →

常用安全配置 配置主机登录保护 开启恶意程序隔离查杀 开启双因子认证 父主题： 接入HSS

查看更多 →

常用API介绍 Java scala 父主题： 更多信息

查看更多 →

常用概念 过滤器 过滤器提供了非常强大的特性来帮助用户提高HBase处理表中数据的效率。用户不仅可以使用HBase中预定义好的过滤器，而且可以实现自定义的过滤器。 协处理器 允许用户执行region级的操作，并且可以使用与RDBMS中触发器类似的功能。 keytab文件 存放用户

查看更多 →

常用概念 Topic Kafka维护的同一类的消息称为一个Topic。 Partition 每一个Topic可以被分为多个Partition，每个Partition对应一个可持续追加的、有序不可变的log文件。 Producer 将消息发往Kafka topic中的角色称为Producer。

查看更多 →

常用概念 Table Table有schema和primary key属性，且可以划分为多个tablet。 Tablet Tablet是指数据分片，可以指定副本数，存放在多个tablet server上，多个副本中有一个是leader tablet；所有的副本都可以读，但是写操作

查看更多 →

phase之间，当Map的输出结果要被Reduce使用时，每一条输出结果需要按key哈希，并且分发到对应的Reducer上去，这个过程就是shuffle。由于shuffle涉及到了磁盘的读写和网络的传输，因此shuffle性能的高低直接影响到了整个程序的运行效率。 下图清晰地描述了MapReduce算法的整个流程。

查看更多 →

常用CLI介绍 Spark CLI详细的使用方法参考官方网站的描述：http://spark.apache.org/docs/3.1.1/quick-start.html。 常用CLI Spark常用的CLI如下所示： spark-shell 提供了一个简单学习API的方法，类似

查看更多 →

常用概念 Topology 拓扑是一个计算流图。其中每个节点包含处理逻辑，而节点间的连线则表明了节点间的数据是如何流动的。 Spout 在一个Topology中产生源数据流的组件。通常情况下Spout会从外部数据源中读取数据，然后转换为Topology内部的源数据。 Bolt 在

查看更多 →

常用概念 基本概念 DataStream 数据流，是指Flink系统处理的最小数据单元。该数据单元最初由外部系统导入，可以通过socket、Kafka和文件等形式导入，在Flink系统处理后，在通过Socket、Kafka和文件等输出到外部系统，这是Flink的核心概念。 Data

查看更多 →

时，避免了到别的数据节点上获取数据的动作，大大降低了网络带宽的占用。 Client HDFS Client主要包括五种方式：JAVA API、C API、Shell、HTTP REST API、WEB UI五种方式，可参考常用API介绍、Shell命令介绍。 JAVA API 提

查看更多 →

常用概念 Topic Kafka维护的同一类的消息称为一个Topic。 Partition 每一个Topic可以被分为多个Partition，每个Partition对应一个可持续追加的、有序不可变的log文件。 Producer 将消息发往Kafka topic中的角色称为Producer。

查看更多 →

常用API介绍 Java API 父主题： 更多信息

查看更多 →

常用概念 流程定义文件 描述业务逻辑的XML文件，包括“workflow.xml”、“coordinator.xml”、“bundle.xml”三类，最终由Oozie引擎解析并执行。 流程属性文件 流程运行期间的参数配置文件，对应文件名为“job.properties”，每个流程定义有且仅有一个该属性文件。

查看更多 →

北-北京一”或“华北-北京四”。 全局服务：服务部署时不区分物理区域，为全局级服务，在全局区域中授权。包括对象存储服务（OBS）、内容分发网络（CDN）、标签管理服务（TMS）等。 区域级项目：服务部署时通过物理区域划分，为项目级服务，授权后只在授权区域生效，如果需要所有区域都生效，则所有区域都需要进行授权操作。

查看更多 →

北-北京一”或“华北-北京四”。 全局服务：服务部署时不区分物理区域，为全局级服务，在全局区域中授权。包括对象存储服务（OBS）、内容分发网络（CDN）、标签管理服务（TMS）等。 区域级项目：服务部署时通过物理区域划分，为项目级服务，授权后只在授权区域生效，如果需要所有区域都生效，则所有区域都需要进行授权操作。

查看更多 →

常用概念 备份策略 备份策略指的是对备份对象执行备份操作时，预先设置的策略。包括备份策略的名称、开关、备份任务执行的时间、周期以及备份数据的保留规则。其中备份数据的保留规则包括保存时间或保存数量。通过将服务器绑定到备份策略，可以为服务器执行自动备份。 备份 备份即一个备份对象执行

查看更多 →

在中心云上部署的集群化VPN网关，用于IES管理运维网络在中心云和边缘小站对接时使用。 用户网关 用户Internet出口的相关网络设备，通常包含边界路由器，防火墙等。此类设备属于用户现有数据中心的网络设备，需要与IES一体化机柜内的网络设备进行连线，以打通整个网络链路。

查看更多 →

常用概念 Mas-Mongo-SDK Mas-Mongo-SDK是一个在mongo-java-driver的基础上实现的支持多活容灾服务的MongoDB连接客户端，支持MongoClient和MongoTemplate两种使用方式。Mas-MongoDB-SDK的宗旨是促进开发者对于异地多活的MongoDB

查看更多 →

常用概念 Mas-GO-SDK-Mysql是基于go-sql-driver/mysql v1.6.0开发的实现支持多活容灾服务的Mysql驱动源，其宗旨是促进开发者对于异地多活的Mysql关注分离，从而让使用者能够将精力更集中地放在处理业务逻辑上。 父主题： 概述

查看更多 →