方案概述

应用场景

该解决方案基于开源框架Flink，帮助您在华为云上快速构建Flink集群环境。Apache Flink是一个开源的流式数据流执行引擎，用于分布式计算，用于对无界数据流和有界数据流进行有状态计算，它可以用于对数据实时处理、批处理和流批一体化处理。如金融交易数据处理、网络流量监控、服务器日志数据分析等场景。

方案架构

该解决方案基于华为云弹性云服务器 ECS上资源一键式部署，帮用户快速构建Flink集群环境。解决方案架构图如下：

图1 方案架构图

部署该方案中需要使用的资源：

• 创建一台弹性云服务器 ECS，充当Flink集群的JobManager角色和TaskManager角色。
• 创建两台弹性云服务器 ECS，分别充当Flink集群的TaskManager角色。
• 创建虚拟私有云 VPC、子网及安全组，保护弹性云服务器的网络安全，通过配置安全组规则，限定云服务器的访问端口，保证个人网站安全。

方案优势

• 独立性高

  Flink集群独立于其他系统或框架运行，这样可以避免与其他系统或框架的依赖和冲突，提高集群的稳定性和可靠性。

• 易管理和维护

  用户可以通过Flink提供的Web UI界面或命令行工具轻松地进行集群的管理和监控。

• 一键部署

  一键轻松部署，即可完成Flink集群环境的构建。

约束与限制

• 该解决方案部署前，需注册华为账号并开通华为云，完成实名认证，且账号不能处于欠费或冻结状态。如果计费模式选择“包年包月”，请确保账户余额充足以便一键部署资源的时候可以自动支付；或者在一键部署的过程进入费用中心，找到“待支付订单”并手动完成支付。

• 如果选用IAM委托权限部署资源，请确保使用的华为云账号有IAM的足够权限，具体请参考3.1-创建rf_admin_trust委托；如果使用华为主账号或admin用户组下的IAM子账户可不选委托，将采用当前登录用户的权限进行部署。

• 该解决方案默认部署在新建VPC下，VPC默认网段为：172.16.0.0/16。必须保证业务系统和Flink集群服务网络互通，具体配置操作可参考创建VPC对等连接，更多详情可参考VPC对等连接官网。