中软国际数据治理专业服务解决方案实践

Undo空间管理 Undo子系统依赖后台回收线程进行空闲空间回收，负责主机上Undo模块的空间回收，备机通过回放Xlog进行回收。回收线程遍历使用中的undo zone，对该zone中的txn page扫描，依据xid从小到大的顺序进行遍历。回收已提交或者已回滚完成的事务，且该事务的提

查看更多 →

空间管理 Undo子系统依赖后台回收线程进行空闲空间回收。负责主机上Undo模块的空间回收，备机通过回放xLog进行回收。回收线程遍历使用中的undo zone，对该zone中的txn page扫描，依据xid从小到大的顺序进行遍历。回收已提交或者已回滚完成的事务，且该事务的提交

查看更多 →

Undo空间管理 Undo子系统依赖后台回收线程进行空闲空间回收，负责主机上Undo模块的空间回收，备机通过回放Xlog进行回收。回收线程遍历使用中的undo zone，对该zone中的txn page扫描，依据xid从小到大的顺序进行遍历。回收已提交或者已回滚完成的事务，且该事务的提

查看更多 →

对数据进行脱敏 功能介绍 对数据进行脱敏 调用方法 请参见如何调用API。 URI POST /v1/{project_id}/data/mask 表1 路径参数 参数 是否必选 参数类型 描述 project_id 是 String 项目ID 请求参数 表2 请求Header参数

查看更多 →

先级取值如图所示。 表1 数据规划 cgroup组 memory.qos_level取值 说明 A -8 当在root中进行OOM操作时，内核遍历root所有cgroup组，最终选择优先级最低的A、E。由于A和E优先级相同，内核继续对A和E使用的内存进行比较。 如果设置memcg

查看更多 →

添加执行动作，选择连接器为“控制”，执行动作为“遍历集合元素”； 步骤7 遍历的集合内容为，查询审批流结果中的“value”字段； 步骤8 新增执行动作，选择连接器为“变量”，执行动作为“初始化变量”； 变量名随意(本例中为物料明细)，变量值为空列表[]; 步骤9 添加执行动作，选择创建的SparkPack

查看更多 →

参数说明：使用gs_loader导入数据及COPY导入导出数据时，遇到非法编码的字符时，是否向数据库运行日志中写入记录。 参数类型：布尔型 参数单位：无 取值范围：on、off。 表3 兼容性配置项 兼容性配置项 兼容性行为控制 on 每出现一行包括非法编码字符的数据，都会向数据库运行日志中写入一条记录。

查看更多 →

执行动作中的参数用全局配置来管理 定义一个数组变量来接受处理的数据 前面查询单据列表会一次查询出多条数据，因此需要遍历来处理，新增一个遍历集合元素节点，遍历内容引用查询单据列表响应体的value 添加一个数据转换执行动作，这个执行动作是在连接器里自定义的一个函数执行动作，函数的作用是将B1的字段名映射成OA的字段名

查看更多 →

生成功能，能够实现应用API场景级测试全自动设计、生成、执行和判定，全过程不需要写一行代码。在自主设计、自主生成、自主执行、自主判定的AI算法加持下，API场景级测试的人机交互模式已发生了巨大的转变。 传统的测试设计和执行交互模式，需要人工理解设计文档、编排测试方案、测试自动化开

查看更多 →

Gremlin是Apache TinkerPop开源的图计算框架中的图遍历语言。用户可以通过Gremlin执行CRUD（创建、读取、更新和删除）操作，比如加载数据、管理图和编写复杂的遍历等。 Cypher Cypher是一种被广泛使用的声明式图数据库查询语言，当前Cypher使用了图的统计信息，查询

查看更多 →

查询出来的未同步草稿单可能有多条，用遍历集合元素执行动作遍历查询结果 选择B1连接器中自定义的数据转换执行动作，将B1返回的数据结构转换成mainData，detailData结构 选择Code代码简易版执行动作，通过编写函数，对数据进行处理 将可配置的变量用全局配置封装起来，便于后续修改

查看更多 →

运行数据管道 运行数据管道 运行过程监控与数据跟踪（敬请期待） 父主题： 数据管道

查看更多 →

启动作业时，系统会自行判断用户的作业是否需要实时计算资源，若需要实时计算资源，则会弹出如下对话框供用户自行选择： 计算资源：一个计算资源对应的物理资源为：1核CPU、4G内存，可实时清洗的数据量为1000条/S（仅供参考，请结合各自的业务场景与数据大小进行评估）。 并行数：管道作业运行时的实际并发能力，不得超过“计算资源

查看更多 →

数据建模引擎运行服务 应用运行态登录方式概述 体验版运行态登录全流程 基础版运行态登录全流程 基础版运行态登录全流程（边缘云） 部署应用 卸载应用 配置流程引擎访问 管理服务访问配置 日常管理数据建模引擎 查看数据建模引擎 变更基础版数据建模引擎 扩容基础版数据建模引擎 续费基础版数据建模引擎

查看更多 →

负担和复杂性。 弹性扩展无上限 用户表的数据规模可以无限扩展，访问流量可以自动扩展，且自动满足业务高峰低谷访问的弹性需求。 权限控制方式多 提供公网访问能力，对云内云外每个请求进行签名认证； 系统还会对用户进行运营权限检查。

查看更多 →

执行数据导入 直接查询外表查看 MRS 数据源的数据 如果数据量较少，可直接使用SELECT查询外表，即可查看到MRS数据源的数据。 执行以下命令，则可以从外表查询数据： 1 SELECT * FROM foreign_product_info; 查询结果显示如数据文件中所示的数据，

查看更多 →

查询上行带宽数据接口 功能介绍 查询上行带宽数据。 最大查询跨度31天，最大查询周期1年。 指定起始时间和结束时间时，起始时间必须为时间粒度的整时刻点，结束时间为不包含整点时刻。 比如查询时间粒度为5分钟，起始时间为5分钟整时刻点，如：0分、5分、50分、55分，结束时间为不包含整点时刻点，

查看更多 →

下载数据作业执行日志 功能介绍 下载数据作业执行日志 调试 您可以在 API Explorer 中调试该接口，支持自动认证鉴权。API Explorer可以自动生成SDK代码示例，并提供SDK代码示例调试功能。 URI GET /v1/{project_id}/eihealth-pr

查看更多 →

CheckpointRsp objects 数据作业执行日志 表4 CheckpointRsp 参数 参数类型 描述 source String 数据名称 timestamp String 日志时间戳 message String 执行信息 请求示例 获取数据作业执行日志 https://eihealth

查看更多 →

从OBS并行导入数据 关于OBS并行导入 从OBS导入 CS V、TXT数据 从OBS导入ORC、CARBONDATA数据 父主题： 导入数据

查看更多 →

Each节点在处理数据集的时候，是一行一行进行处理的。Loop.current表示当前遍历到的For Each节点“数据集”中定义的二维数组的某一行，该数据行为一维数组。 一般定义格式为#{Loop.current[0]}、#{Loop.current[1]}或其他。其中[0]表示遍历到的当

查看更多 →