文档首页 > > 用户指南> 跨源连接> 增强型跨源连接

增强型跨源连接

分享
更新时间: 2020/02/27 GMT+08:00

操作场景

DLI 增强型跨源连接底层采用对等连接,直接打通DLI集群与目的数据源的vpc网络,通过点对点的方式实现数据互通,能够提供比经典型跨源更加灵活的使用场景与更加强劲的性能。增强型跨源支持所有DLI服务已实现的跨源业务,并且通过UDF、Spark作业等方式能够实现与自建/线下数据源之间的访问。

开发SQL作业请参考《数据湖探索SQL语法参考》>HBase表OpenTSDB表DWS表RDS表CSS表。开发Spark作业请参考《数据湖探索开发指南》>《使用DLI跨源能力》

增强型跨源仅支持包年包月队列。

增强型跨源主要包括如下功能:

增强型跨源页面

显示所有的增强型跨源连接,连接数量较多时,系统分页显示。

表1 跨源连接列表参数

参数

参数说明

连接名称

所创建的跨源连接名称。

连接状态

跨源连接的状态信息,目前控制台仅显示“已激活”状态的连接。

虚拟私有云

目的数据源所使用的虚拟私有云。具体请参考《虚拟私有云产品介绍》。

子网

目的数据源所使用的子网。具体请参考《虚拟私有云产品介绍》。

创建时间

每个连接的创建时间,可按创建时间顺序或倒序显示连接列表。

操作

  • 删除连接:用于删除已创建的跨源连接。
  • 路由信息:查看跨源连接自定义的路由信息。
  • 修改主机信息:用户自定义配置主机/域名对应的IP信息。
  • 更多:
    • 绑定队列:仅支持绑定包周期队列;执行绑定队列后,被绑定的队列即可使用增强型跨源访问数据源。
    • 解绑队列:用于解除跨源连接与队列之间的绑定关系。
    • 添加路由:添加跨源连接的自定义路由。
    • 删除路由:删除跨源连接的自定义路由。

创建连接

以创建MRS服务HBase跨源连接为例进行说明。

只支持通过增强型跨源访问MRS HBase。

  1. 在MRS服务中购买集群。

    如果已有可用集群,可不用重新购买。

  2. 在SQL作业或Spark作业的顶部菜单栏中,选择“跨源连接”
  3. 选择“增强型跨源”页签,单击左上角的“创建”按钮。

    输入连接名称,选择绑定队列(可选),虚拟私有云,子网,输入主机信息(可选),详细参数介绍请参见表2

    图1 创建连接
    表2 参数说明

    参数

    参数说明

    连接名称

    所创建的跨源连接名称。

    • 名称只能包含数字、英文字母、下划线。不能为空。
    • 输入长度不能超过64个字符。

    绑定队列

    可选参数,用于绑定需要使用跨源的包年包月队列。

    虚拟私有云

    目的数据源所使用的虚拟私有云。

    子网

    目的数据源所使用的子网。

    主机信息

    可选参数,用户自定义配置主机/域名对应的IP信息。每行填写一条记录,填写格式为:“IP 主机名/域名”。访问MRS的HBase集群时需要配置Zookeeper实例的主机名与对应的IP地址。MRS集群主机名与IP地址获取方式请参考下图。

    图2 MRS ZK IP地址信息

    进入MRS集群管理界面的步骤为:

    1. 在MRS集群列表中,单击所使用的集群名称,进入集群“概览”页。
    2. 在集群“基本信息”中找到“集群管理页面”,单击“点击查看”。
    3. 输入用户名和密码(“用户名”和“密码”为购买MRS集群时设置,“用户名”默认为“admin”),单击“登录”进入“MRS Manager”页面。
    4. 选择“服务管理”页签;
    5. 进入“Zookeeper”服务;
    6. 选择“实例”页签,可以查看对应业务IP,可选择任意一个业务IP。
    说明:

    如果MapReduce服务集群存在多个IP,创建跨源连接时填写其中任意一个业务IP即可。

  4. 单击“确定”,完成连接创建。

查找连接

“增强型跨源”页面,可在搜索框中输入连接名称关键字,查找与之匹配的连接。

查看连接详情

“增强型跨源”页面,选中一条连接,单击该连接对应的,可查看该条连接的详细信息。包括:连接ID和主机信息。

查看绑定队列详情

“增强型跨源”页面,选中一条连接,单击选中的连接名称,可以查看绑定队列相关信息。
表3 跨源连接队列详情列表参数

参数

参数说明

对等连接ID

增强型跨源在该队列所在集群中创建的对等连接ID。

说明:

每一个增强型跨源对每一个绑定的队列都会创建一个对等连接。该对等连接用于实现跨VPC通信,请确保数据源使用的安全组开放了DLI队列网段的访问,并且在使用跨源过程中不要删除该对等连接。

队列名称

已绑定的队列名称。

连接状态

跨源连接的状态信息,包括以下三种状态:

  • 创建中
  • 已激活
  • 已失败
说明:

当连接状态显示为“已失败”时,点击左边对应的,可查看详细的错误信息。

创建时间

每个连接的创建时间,可按创建时间顺序或倒序显示连接列表。

操作

解绑队列:用于解除跨源连接与队列之间的绑定关系。

删除连接

“增强型跨源”页面,可单击“操作”列的“删除”,删除不需要的连接。

“连接状态”“创建中”时,连接不可删除。

绑定队列

  • 方式一

    “增强型跨源”页面,选中一条连接,单击该连接对应的,在弹出的对话框中,选择要绑定的队列(支持多选),单击“确定”。

  • 方式二

    单击选中的连接名称,进入“绑定队列详情”页面。单击左上角的,在弹出的对话框中,选择要绑定的队列(支持多选),单击“确定”。

解绑队列

  • 方式一

    “增强型跨源”页面,选中一条连接,单击该连接对应的,在弹出的对话框中,选择要解绑的队列(支持多选),单击“确定”。

  • 方式二

    单击选中的连接名称,进入“绑定队列详情”页面。选择要解绑的队列,单击该连接右侧的,在弹出的对话框中,选择要绑定的队列(支持多选),单击“确定”。

修改主机信息

“增强型跨源”页面,选中一条连接,单击该连接对应的,在弹出的对话框中,填写主机信息。格式为:“IP 主机名/域名”,多条配置之间以换行分隔。

  • 修改主机配置每次均为全量覆盖。
  • 主机名/域名限制为长度128,数字字母下划线("_")横杠("-")句点(".")组成,字母开头。

自定义路由信息

  • 查看路由信息

    “增强型跨源”页面,选中一条连接,单击该连接对应的,可以查看该跨源自定义的路由信息,如图 路由信息所示。

    图3 路由信息
  • 添加路由

    “增强型跨源”页面,选中一条连接,单击该连接对应的,或者在“路由信息”页面单击,可以添加该跨源的自定义路由。在弹出的对话框中,填写路由名称与路由网段即可,详细参数请参考参数说明。

    表4 自定义路由详情列表参数

    参数

    参数说明

    路由名称

    自定义路由的名称,在同一个增强型跨源中唯一。名称规则为:长度1~64字节,数字、字母、下划线("_")、中划线("-")组成。

    路由IP

    自定义路由网段,允许不同路由的网段之间有交集,但不允许完全相同。

    创建时间

    每个路由的创建时间。

    操作

    删除路由:用于删除自定义路由信息。

  • 删除路由
    1. “增强型跨源”页面,选中一条连接,单击该连接对应的,在弹出的对话框中选择要删除的路由信息,单击,如图 删除路由信息所示。
      图4 删除路由信息
    2. “路由信息”页面,选中一条自定义路由信息,单击该路由对应的
分享:

    相关文档

    相关产品

文档是否有解决您的问题?

提交成功!

非常感谢您的反馈,我们会继续努力做到更好!

反馈提交失败,请稍后再试!

*必选

请至少选择或填写一项反馈信息

字符长度不能超过200

提交反馈 取消

如您有其它疑问,您也可以通过华为云社区问答频道来与我们联系探讨

跳转到云社区