中软国际数据治理专业服务解决方案实践

数据目录数据搬迁 数据目录数据搬迁依赖于管理中心的资源迁移功能，详见管理中心数据搬迁。 当前管理中心支持搬迁的数据目录数据包含分类、标签、采集任务，数据目录中的业务资产、技术资产、指标资产均不支持直接导入导出。 您可以通过导入管理中心和数据架构数据，并运行新导入的采集任务重新生成业务资产、技术资产、指标资产。

查看更多 →

fromJobConfig.kafkaConsumerStrategy 是 枚举 从Kafka拉取数据时的初始偏移量设置： LATEST：最大偏移量，即最新的数据。 EARLIEST：最小偏移量，即最老的数据。 fromJobConfig.isPermanency 是 Boolean 是否永久运行。

查看更多 →

境为JDK1.6以上版本，推荐使用JDK1.8版本。 网络类型 目前仅支持VPC网络。 SDK运行原理 SDK的拉取和确认消息是两个异步的线程，拉取按照事务顺序拉取，两个线程分别独立并且遵循因果序。拉取到的消息会顺序的调用用户注册的notify函数，SDK保证每一条消息会推送一次，且只有一次。

查看更多 →

Windows磁盘分区大小调整范围 项目 最小值 最大值 磁盘 系统盘（取两者之间较大值）： 调整后分区大小之和 40 GB 数据盘（取两者之间较大值）： 调整后分区大小之和 10 GB 系统盘：1024 GB 数据盘：32768 GB 磁盘分区 取以下两者之间较小值： 已用空间 + 1 GB 调整前大小

查看更多 →

fromJobConfig.kafkaConsumerStrategy 是 枚举 从Kafka拉取数据时的初始偏移量设置： LATEST：最大偏移量，即最新的数据。 EARLIEST：最小偏移量，即最老的数据。 fromJobConfig.isPermanency 是 Boolean 是否永久运行。

查看更多 →

删除脱敏 取整脱敏 参照操作步骤进入“脱敏规则”页面。 选择“取整脱敏”，进入“取整脱敏”的页面。 系统设置了“日期取整”和“数字取整”两种算法。 “日期取整”算法对应关系型数据库中timestamp，time，data，datatime等与时间相关的字段。 “数字取整”算法对应

查看更多 →

setDestinationFileType(DestinationFileTypeEnum.TEXT.getType()); // 设置从DIS通道拉取数据时的初始偏移量: 默认LATEST，从通道内最新上传的记录开始读取; TRIM_HORIZON，从通道内最早的未过期记录开始读取 descriptor

查看更多 →

适用场景： 数据存储 数据分享 取整脱敏 针对日期或数字特定参数进行取整运算。 日期取整 年之后字段全部取整。示例：“2019-05-12 -> 2019-01-01”或“2019-05-12 08:08:08 -> 2019-01-01 00:00:00” 月之后字段全部取整。示例：“2019-05-12

查看更多 →

$[自定义时间格式±N/24/60] 例如，取计划时间15分钟前的不同时间格式： 取年：$[yyyy-15/24/60] 取年月：$[yyyymm-15/24/60] 取年月日：$[yyyymmdd-15/24/60] 取小时：$[hh24-15/24/60] 取分钟：$[mi-15/24/60] 调度参数替

查看更多 →

数据控制与数据审计 数据保护策略 项目内的数据支持精细化的权限控制，可对数据分享、下载、删除进行设置。您可以在项目的“设置”页面设置数据权限。数据权限仅可以有项目所有者设置。 分享：关闭分享后，项目内数据不允许分享给其他项目，包括拷贝、引用两种方式。 下载：关闭下载后，项目内数据不允许下载至本地。

查看更多 →

数据服务数据搬迁 数据服务数据搬迁依赖于管理中心的资源迁移功能，详见管理中心数据搬迁。 父主题： 跨工作空间的 DataArts Studio 数据搬迁

查看更多 →

数据质量数据搬迁 数据质量数据搬迁依赖于数据质量监控的规则模板、质量作业、对账作业导入导出功能。 约束与限制 已完成管理中心数据搬迁。 业务指标监控中的指标、规则、业务场景等数据均不支持导入导出，如有涉及，请您进行手动配置同步。 系统支持将自定义的规则模板批量导出，一次最多可导出200个规则模板。

查看更多 →

读取数据库数据 操作场景 本文指导您在应用设计态读取数据库数据。 前提条件 已登录应用设计态。 操作步骤 在左侧导航栏中，选择“数据模型管理 > 反向建模”，进入反向建模页面。 找到需要操作的数据源，单击。 图1 读取数据 在弹出的提示框中，单击“确定”。 读取数据需要等待一段时

查看更多 →

000个partition里有数据，不同key对应的数据也被分到相同的partition里。 回答 这是正常现象。 数据分到哪个partition是通过对key的hashcode取模得到的，不同的hashcode取模后的结果有可能是一样的，那样数据就会被分到相同的partitio

查看更多 →

更新数据库数据 操作场景 本文指导您在应用设计态更新数据库数据。 前提条件 已登录应用设计态。 操作步骤 在左侧导航栏中，选择“数据模型管理 > 反向建模”，进入反向建模页面。 找到需要操作的数据源，单击。 图1 更新数据 在弹出的提示框中，单击“确定”。 父主题： 数据库管理

查看更多 →

000个partition里有数据，不同key对应的数据也被分到相同的partition里。 回答 这是正常现象。 数据分到哪个partition是通过对key的hashcode取模得到的，不同的hashcode取模后的结果有可能是一样的，那样数据就会被分到相同的partitio

查看更多 →

象存储侧产生两份数据流量（针对同一个文件，CDN拉取一次，OBS拉取一次）。 Serverless触发式上传 不改变原有的上传逻辑，当文件上传到其他云对象存储后，触发函数计算服务，通过Serverless方式将文件同步到华为云OBS，架构如下： 图1 Serverless触发式上传

查看更多 →

数据建模 物理实体物化失败怎么处理？ DataGovernance，DataGenerate和DataModeling三个目录的作用是什么？ 物理实体支持哪些数据源？ 父主题： 常见问题

查看更多 →

数据解析 创建任务 删除任务 查看列表信息 任务启动/停止 任务启动/停止（管理token） 查询任务状态 查询任务状态（管理token） 查询当前任务结果 查询历史任务结果 上报Spark任务id 查询日志 TIE解析工具接口 FMA解析工具接口 备份和恢复解析规则接口 业务稳定性接口

查看更多 →

数据备份 查询当前租户是否为SRE白名单租户 查询当前在用备份策略 修改当前在用备份策略 查询备份任务记录列表 查询备份任务详情 上报数据备份结果 父主题： API参考

查看更多 →

数据准备 项目管理接口 任务管理接口 模板管理接口 目录管理接口 页面控制接口 统计接口 北向接口 项目运行历史记录接口 订购退订接口 调测接口 内置任务接口 数据模型接口 父主题： API参考

查看更多 →