更新时间:2024-08-30 GMT+08:00
通过DataArts Studio调度大数据服务时需要注意什么?
问题描述
通过DataArts Studio调度大数据服务时,需要注意的地方需要说明一下。
解决方案
DLI和MRS作为大数据服务,不具备锁管理的能力。因此如果同时对表进行读和写操作时,会导致数据冲突、操作失败。
如果您需要对大数据服务数据表进行读表和写表操作,建议参考以下方式之一进行串行操作处理:
- 将读表和写表操作拆分为同一作业的不同节点,两个节点通过连线建立先后执行关系,避免同时执行冲突。
- 将读表和写表操作拆分为两个不同的作业,两个作业之间设置依赖关系,避免同时执行冲突。
父主题: 数据开发