中软国际数据治理专业服务解决方案实践

“入图”为“是”时，必填项。 此元数据在入图时的别名或标识。 入图标识需以字母开头，只能包含字母、数字和“_”。 引用类型 “类型”选择为“参考对象”时，可根据实际业务需求进行设置。 强引用：假设实体A参考实体B，组合关系下，实体B的数据实例被删除时，实体A的数据实例也被删除；非

查看更多 →

必填，此选择将影响数据实例和聚合服务中预览数据时，数据脱敏处理的方式。 是否唯一键 必填。如果选“是”，表示可作为关系实体的唯一键属性。 是否关联属性 必填。如果选“是”，表示可作为非实体型关系的关联属性。 是否必填 必填。如果选“是”，则在“数据源映射”时，必须要对该字段与数据库源表设置映射关系。

查看更多 →

选择“模型设计 > 数据模型管理”，默认进入“数据实体”页面。 在左侧导航栏选择“数据实例”，进入数据实例页面。 选择具体实体模型。 在“条件筛选”处选择“数据类型”，根据选择的数据类型输入实体编码或名称，然后选择图数据库类型的“数据源”，单击“搜索”。 单击目标实例“操作”列或勾选实例后单击“删除”，弹出提示信息。

查看更多 →

大数据迁移后数据校验 MaxCompute迁移至 DLI 数据校验 MRS ClickHouse迁移至MRS ClickHouse数据校验 阿里云EMR ClickHouse迁移至MRS ClickHouse数据校验 阿里云 ClickHouse迁移至MRS ClickHouse数据校验

查看更多 →

MRS_Hive实例下数据库授权个数大于0时，在Hive实例列表“操作”列，单击“更多 > 刷新”会自动创建元数据任务拉取实例的库、表、列信息。 添加Hive实例时，如果打开自动创建元数据任务的开关，完成实例创建后会自动创建元数据任务拉取实例下的所有元数据。 支持元数据采集的大数据类型请参见创建元数据采集任务章节。

查看更多 →

创建数据实例示例 示例场景 本文对使用数据管理API代理器方式创建数据实例进行示例说明。 使用数据管理API代理器时，需要在代码中注入Delegator和RestTemplate。下面以创建XZTEST数据实体的数据实例为例。 操作步骤 在代码中注入Delegator和RestT

查看更多 →

大数据架构设计 设计原则 大数据集群设计 大数据任务调度平台设计 大数据参考架构 华为云大数据组件 父主题： 方案设计

查看更多 →

大数据性能优化 HIVE优化 Spark性能优化 Flink性能优化 父主题： 云服务性能优化介绍

查看更多 →

大数据集群设计 设计云上的大数据集群部署架构时，建议参考原则如下： 优先用大数据云服务：如果源端是自建的大数据集群，在目标云平台上有对应的云服务，且功能、性能、兼容性都满足，经评估改造工作量很小，建议设计大数据集群部署架构时，优先采用大数据云服务。如果目标云平台上没有对应的大数据

查看更多 →

新增大数据校验数据连接时，凭证列表数据缺失 问题描述 进行大数据校验，在新增连接时，凭证的下拉列表中没有数据或没有连接类型所对应的凭证。 问题分析 出现该问题，可能的原因如下： 凭证添加错误：在MgC Agent（原Edge）添加的凭证类型与新增连接所需的凭证类型不对应。 凭证同步失败：在MgC

查看更多 →

新增大数据校验数据连接时，凭证列表数据缺失 问题描述 进行大数据校验，在新增连接时，凭证的下拉列表中没有数据或没有连接类型所对应的凭证。 问题分析 出现该问题，可能的原因如下： 凭证添加错误：在MgC Agent（原Edge）添加的凭证类型与新增连接所需的凭证类型不对应。 凭证同步失败：在MgC

查看更多 →

在业务高峰时，得益于竞享实例低成本及快速扩缩容特性，竞享实例为系统提供可变容量以应对流量洪峰。自动化是这项业务的关键，所以客户需要进行业务容错性改造，实现任何一个或一些实例出现故障（被回收）时，可自行替换并继续运行，无需任何人工干预。 实时数据分析 场景概述 实时数据分析是指用适

查看更多 →

数据实体查询接口 Get BatchGet List Find Query Count Select 父主题： xDM-F的查询相关接口

查看更多 →

下载数据实体导入模板 操作场景 本文指导您在应用设计态下载导入模板。 前提条件 已登录应用设计态。 操作步骤 在左侧导航栏中，选择“数据模型管理 > 数据实体”，进入数据实体页面。 单击“导入导出批量操作 > 模板下载”，即可将模板保存至本地。 图1 模板下载 父主题： 数据实体

查看更多 →

源系统和SDI层数据一致性检测 表数量对比 表内容对比 源系统表结构监控 在数据集成时，最重要的是数据不丢失、不失真、不乱码、源表数据结构不变化，否则会造成数据指标计算不准确。而数据集成服务的网络往往非常复杂，依赖于源系统和网络，因此在监控检测源系统和数据湖的SDI层的数据一致性，可以快速给问题定界定位。

查看更多 →

数据实体实例数据统计 进入“模型设计 > 数据看板”页面，在左侧导航栏选择“数据实体实例数据统计”，右侧页面展示数据实体实例数据统计列表。 在“数据实体实例数据统计”页面，您可以： 筛选目标数据实体的实例统计数据：在“条件筛选”处输入或选择常用查询条件（如“数据实体编码”、“英文名称”等），单击“搜索”。

查看更多 →

原视图的versionId，即已创建数据实例的version.唯一编码。 workCopyType 否 Object 此配置项用于创建多维版本数据实例时是否继承其对应的关系实例。根据业务需求，选择类型。 BOTH：若存在关系实例引用此数据实例作为源端实例或目标端实例，创建后的数据实例将继承这些关系实例。

查看更多 →

当“workCopyType”设置为“CUSTOM”时，需要设置此参数。 needSetNull 否 List 指定不复制的属性。被指定不复制的属性，其返回值将被设置为“null”。 view2 否 说明： 如果用户在应用设计态配置“多维版本”功能配置时，将此多维版本属性设置为必填，则请求参数为必填项。

查看更多 →

大数据任务调度平台设计 设计云上的大数据任务调度平台部署架构时，建议参考原则如下： 优先用大数据云服务：如果源端是自建的大数据任务调度平台和组件，在目标云平台上有对应的云服务，且功能、性能、兼容性都满足，经评估改造工作量很小，建议部署架构设计时，优先采用大数据云服务。如果目标云平

查看更多 →

大数据迁移批次规划说明 大数据迁移上云时，是选择整体迁移还是分批迁移，原则如下： 整体迁移的场景： 规模小：大数据平台数据量少（TB级），计算任务数量不多，可以采用整体迁移的方法，先在云上部署大数据平台，然后全量迁移元数据、数据和任务。 关联关系复杂：大数据任务之间的关联关系很复杂，很难拆分，此时也可以选择整体迁移。

查看更多 →

MRS_Hive实例下数据库授权个数大于0时，在Hive实例列表“操作”列，单击“更多 > 刷新”会自动创建元数据任务拉取实例的库、表、列信息。 添加Hive实例时，如果打开自动创建元数据任务的开关，完成实例创建后会自动创建元数据任务拉取实例下的所有元数据。 支持元数据采集的大数据类型请参见创建元数据采集任务章节。

查看更多 →