创建数据连接

约束限制

• RDS数据连接方式依赖于OBS。如果没有与DataArts Studio同区域的OBS，则不支持RDS数据连接。
• 当所连接的数据湖发生变化（如MRS集群扩容等情况）时，您需要重新编辑并保存该连接。

前提条件

• 在创建数据连接前，请确保您已创建所要连接的数据湖（如DataArts Studio所支持的数据库、云服务等）。
  • 在创建DWS类型的数据连接前，您需要先在DWS服务中创建集群，并且具有KMS密钥的查看权限。
  • 在创建MRS HBase、MRS Hive、MRS Kafka、MRS Spark、MRS Presto类型的数据连接前，需确保您已创建MRS集群，并且在创建数据链接时已创建选择所需要的组件。
  • 在创建RDS类型的数据连接前，请确保您已创建RDS数据库实例。DataArts Studio平台目前仅支持RDS中的MySQL和PostgreSQL数据库引擎。
• 在创建数据连接前，请确保待连接的数据湖与DataArts Studio实例之间网络互通。
  • 如果数据湖为云下的数据库，则需要通过公网或者专线打通网络，确保数据源所在的主机可以访问公网，并且防火墙规则已开放连接端口。
  • 如果数据湖为云上服务（如DWS、MRS等），则网络互通需满足如下条件：
    • DataArts Studio实例（指DataArts Studio实例中的CDM集群）与云上服务处于不同区域的情况下，需要通过公网或者专线打通网络。
    • DataArts Studio实例（指DataArts Studio实例中的CDM集群）与云上服务同区域情况下，同虚拟私有云、同子网、同安全组的不同实例默认网络互通；如果同虚拟私有云但是子网或安全组不同，还需配置路由规则及安全组规则，配置路由规则请参见《虚拟私有云(VPC)使用指南》中的“添加路由信息”章节，配置安全组规则请参见《虚拟私有云(VPC)使用指南》中的“安全组 > 添加安全组规则”章节。
    • 此外，您还必须确保该云服务的实例与DataArts Studio工作空间所属的企业项目必须相同，如果不同，您需要修改工作空间的企业项目。

创建数据连接

1. 在DataArts Studio控制台首页，选择对应工作空间的“管理中心”模块，进入管理中心页面。
   图1 选择管理中心
   

2. 在管理中心页面，单击“数据连接”，进入数据连接页面。
   图2 创建数据连接
   

3. 单击“创建数据连接”，在弹出的对话框中，选择“数据连接类型”，并参见表1配置相关参数。
   图3 创建数据连接
   

   表1 数据连接

   数据连接类型	参数说明
   MRS Hive	请参见表2。
   MRS HBase	请参见表3。
   MRS Kafka	请参见表4。
   DWS	请参见表7。
   ORACLE	请参见表8
   MRS Spark	请参见表5。
   RDS	请参见表6。 RDS连接类型还支持创建与部分关系型数据库的连接，如MySQL/PostgreSQL/达梦数据库 DM等。
   主机连接	请参见表9。

4. 单击“测试”，测试数据连接的连通性。如果无法连通，数据连接将无法创建。
5. 测试通过后，单击“确定”，完成数据连接的创建。

数据连接参数说明

创建MRS安全集群的kerberos认证用户

如果要创建MRS安全集群的数据连接，不能使用admin用户。因为admin用户是默认的管理页面用户，这个用户无法作为安全集群的认证用户来使用。您可以参考以下步骤创建一个新的MRS用户：

针对MRS 3.x版本集群：

1. 使用admin登录MRS服务的Manager页面。
2. 在Manager页面选择“系统 > 权限 > 用户”，单击“添加用户”，添加一个专有用户作为kerberos认证用户，并且为这个用户添加用户组和分配角色权限，用户组选择superGroup，角色建议全选，然后根据页面提示完成用户的创建。
   

   • MRS 3.1.0及之后版本集群，所创建的用户至少需具备Manager_viewer的角色权限才能在管理中心创建连接；如果需要对应组件的进行库、表、数据的操作，还需要添加对应组件的用户组权限。
   • MRS 3.1.0版本之前的集群，所创建的用户需要具备Manager_administrator或System_administrator权限，才能在管理中心创建连接。
   • 仅具备Manager_tenant或Manager_auditor权限，无法创建连接。
3. 使用新建的用户登录Manager页面，并更新初始密码，否则会导致创建连接失败。
4. 同步IAM用户。
   1. 登录MRS管理控制台。
   2. 选择“集群列表 > 现有集群”，选中一个运行中的集群并单击集群名称，进入集群信息页面。
   3. 在“概览”页签的基本信息区域，单击“IAM用户同步”右侧的“同步”进行IAM用户同步。
      

      • 当IAM用户的用户组的所属策略从MRS ReadOnlyAccess向MRS CommonOperations、MRS FullAccess、MRS Administrator变化时，由于集群节点的SSSD（System Security Services Daemon）缓存刷新需要时间，因此同步完成后，请等待5分钟，等待新修改策略生效之后，再进行提交作业。否则，会出现提交作业失败的情况。
      • 当IAM用户的用户组的所属策略从MRS CommonOperations、MRS FullAccess、MRS Administrator向MRS ReadOnlyAccess变化时，由于集群节点的SSSD缓存刷新需要时间，因此同步完成后，请等待5分钟，新修改策略才能生效。

针对MRS 2.x及之前版本集群 ：

1. 使用admin登录MRS Manager页面。
2. 在MRS Manager页面的“系统设置”中，单击“用户管理”，在用户管理页面，添加用户，添加一个专有用户作为kerberos认证用户，并且为这个用户添加用户组和分配角色权限，用户组选择superGroup，角色建议全选，然后根据页面提示完成用户的创建。
   

   • MRS 2.x及之前版本集群，所创建的用户需要具备Manager_administrator或System_administrator权限，才能在管理中心创建连接。
   • 仅具备Manager_tenant或Manager_auditor权限，无法创建连接。
3. 使用新建的用户登录MRS Manager页面，并更新初始密码，否则会导致创建连接失败。
4. 同步IAM用户。
   1. 登录MRS管理控制台。
   2. 选择“集群列表 > 现有集群”，选中一个运行中的集群并单击集群名称，进入集群信息页面。
   3. 在“概览”页签的基本信息区域，单击“IAM用户同步”右侧的“同步”进行IAM用户同步。
      

      • 当IAM用户的用户组的所属策略从MRS ReadOnlyAccess向MRS CommonOperations、MRS FullAccess、MRS Administrator变化时，由于集群节点的SSSD（System Security Services Daemon）缓存刷新需要时间，因此同步完成后，请等待5分钟，等待新修改策略生效之后，再进行提交作业。否则，会出现提交作业失败的情况。
      • 当IAM用户的用户组的所属策略从MRS CommonOperations、MRS FullAccess、MRS Administrator向MRS ReadOnlyAccess变化时，由于集群节点的SSSD缓存刷新需要时间，因此同步完成后，请等待5分钟，新修改策略才能生效。

编辑数据连接

1. 登录DataArts Studio管理中心控制台，单击“数据连接”，进入数据连接页面。
2. 在数据连接列表中，找到所需编辑的连接，然后单击“编辑”。
3. 在“编辑数据连接”对话框中，根据需要修改连接参数，参数描述可参考数据连接参数说明。
4. 完成修改后，单击“测试”测试数据连接的是否可以正常连接，如果可以正常连接，单击“确定”。

   如果测试连接无法连通，数据连接将无法创建，请根据错误提示重新修改连接参数后再进行重试。

删除数据连接

若删除数据连接，此数据连接下的数据表信息也会被删除，请谨慎操作。删除数据连接时，若待删除的连接已被引用，则不可删除，反之，可删除。

1. 登录DataArts Studio管理中心控制台，单击“数据连接”，进入数据连接页面。
2. 在数据连接列表中，找到所需删除的连接，然后单击“删除”。
3. 在删除确认对话框中，了解删除连接的影响后，若要删除，单击“确定”。