文档首页/ 数据治理中心 DataArts Studio/ 常见问题/ 数据开发/ 通过DataArts Studio调度大数据服务时需要注意什么?
更新时间:2024-08-30 GMT+08:00

通过DataArts Studio调度大数据服务时需要注意什么?

问题描述

通过DataArts Studio调度大数据服务时,需要注意的地方需要说明一下。

解决方案

DLI和MRS作为大数据服务,不具备锁管理的能力。因此如果同时对表进行读和写操作时,会导致数据冲突、操作失败。

如果您需要对大数据服务数据表进行读表和写表操作,建议参考以下方式之一进行串行操作处理:

  • 将读表和写表操作拆分为同一作业的不同节点,两个节点通过连线建立先后执行关系,避免同时执行冲突。
  • 将读表和写表操作拆分为两个不同的作业,两个作业之间设置依赖关系,避免同时执行冲突。