中软国际数据治理专业服务解决方案实践

息，并依托计算、存储和大数据等资源，结合生物信息算法对文本信息进行分析和研究。 客户瓶颈 基因测序机构随着其业务的不断发展，现有存储系统遇到了巨大的挑战，每日需对数万个基因组进行统计分析，基因组数据所产生的数据容量多达几十TB，数据计算量激增，导致分析研究周期变长，基因测序机构急需投入成本和资源以提升计算速度。

查看更多 →

大数据数据迁移 数据迁移失败，提示超过 DLI 网管流控上限 部分表迁移失败，报错：CRC Check failed 部分表迁移失败，报错：no more field nodes for for field %s and vector %s

查看更多 →

大数据数据迁移 使用须知 准备工作 创建源端连接 创建目的端连接 迁移实施 查看并导出执行结果 自定义参数说明

查看更多 →

数据质量配置数据搬迁 数据质量数据搬迁依赖于数据质量监控的规则模板、质量作业、对账作业导入导出功能。 约束与限制 已完成管理中心数据搬迁。 业务指标监控中的指标、规则、业务场景等数据均不支持导入导出，如有涉及，请您进行手动配置同步。 系统支持将自定义的规则模板批量导出，一次最多可导出200个规则模板。

查看更多 →

读取数据库数据 操作场景 本文指导您在应用设计态读取数据库数据。 前提条件 已登录应用设计态。 操作步骤 在左侧导航栏中，选择“数据模型管理 > 反向建模”，进入反向建模页面。 找到需要操作的数据源，单击。 单个数据源最多只能读取1000个物理表的数据库数据。 图1 读取数据 在

查看更多 →

数据架构配置数据搬迁 当前管理中心支持直接搬迁数据架构组件中的主题、流程、码表、数据标准、关系建模模型、维度、业务指标、原子指标、衍生指标、复合指标和汇总表数据，但不包含事实表数据。 您可以通过管理中心配置数据搬迁进行搬迁，也可以参考本章节通过数据架构的导入导出功能进行搬迁。 数

查看更多 →

数据控制与数据审计 数据保护策略 项目内的数据支持精细化的权限控制，可对数据分享、下载、删除进行设置。您可以在项目的“设置”页面设置数据权限。数据权限仅可以有项目所有者设置。 分享：关闭分享后，项目内数据不允许分享给其他项目，包括拷贝、引用两种方式。 下载：关闭下载后，项目内数据不允许下载至本地。

查看更多 →

数据目录配置数据搬迁 数据目录数据搬迁依赖于管理中心的资源迁移功能，详见管理中心配置数据搬迁。 当前管理中心支持搬迁的数据目录数据包含分类、标签、采集任务，数据目录中的业务资产、技术资产、指标资产均不支持直接导入导出。 您可以通过导入管理中心和数据架构数据，并运行新导入的采集任务重新生成业务资产、技术资产、指标资产。

查看更多 →

更新数据库数据 操作场景 本文指导您在应用设计态更新数据库数据。 前提条件 已登录应用设计态。 操作步骤 在左侧导航栏中，选择“数据模型管理 > 反向建模”，进入反向建模页面。 找到需要操作的数据源，单击。 单个数据源最多只能更新1000个物理表的数据库数据。 图1 更新数据 在

查看更多 →

数据探索 什么是数据探索？ 什么样的用户可以使用数据探索？ 为什么别人可以看到HDFS数据源，我却看不到？ 为什么在HIVE数据源中，我只能看到少量的表，有的表也只能看到部分字段？ 数据探索支持跨不同数据源关联数据么？ 什么是异步任务？什么场景下会触发异步任务？ 什么是模板？什么时候使用模板？

查看更多 →

华为云帮助中心，为用户提供产品简介、价格说明、购买指南、用户指南、API参考、最佳实践、常见问题、视频帮助等技术文档，帮助您快速上手使用华为云服务。

查看更多 →

数据合并 数据连接 数据连接是将特征列维度不完全相同的数据集连接成一份数据。数据集特征不完全相同的原因，比如现网中不同 系统采集的数据。其原理与“数据集”界面的数据连接原理相同，具体请参见数据连接。 操作步骤如下所示。 单击界面右上角的图标，选择“数据处理 > 数据合并 > 数据连接”，界面新增“数据连接”内容。

查看更多 →

数据采样 如果数据量太大，造成特征操作等待的时间长，用户可以通过采样功能减少特征处理的数据量，提升特征处理的速度。 数据采样提供如下两种方式，请根据实际情况进行选择： 随机采样：按照比例进行样本数据的随机采样。 分层采样：如果一个特征或多个特征组合样本值的类型多样，为保证采样数据

查看更多 →

数据解析 创建解析任务 启动解析任务 父主题： 应用数据集

查看更多 →

数据准备 数据服务的优势是什么 私有模板和公共模板的区别是什么 父主题： 常见问题

查看更多 →

数据过滤 算子简介 名称：数据过滤 功能说明：根据设置的条件过滤数据，满足条件的数据则输出，不满足条件的数据将被丢弃。 约束：下游不允许对接数据源及产品过滤算子。 算子配置 基础配置项 算子名称： 配置项英文名：name 说明：算子名称，对算子进行个性化的命名，以辅助增加可读性。

查看更多 →

数据准备 数据集中的数据导入特征工程后，可能存在空值、冗余、数据不足等情况，或者用户需要将多次导入的数据集实例进行数据联合。以上情况，都可以在数据准备中进行操作。当前数据准备包含的功能有：数据修复、数据过滤、数据联合、数据连接、数据去噪。 数据修复 用户可以在数据修复中对单列进行

查看更多 →

数据探索 本章节以“NormalDistribution.csv”（正态分布图的展示）为例，介绍数据探索的基本操作方法。 创建查询 配置查询条件 查看查询结果 父主题： 应用数据集

查看更多 →

数据探索 管理任务 管理模板 父主题： 管理基础工具

查看更多 →

数据接入 角色访问权限 管理软件包 管理采集机（运维） 管理采集机（用户） 管理采集任务 管理本地上传任务 数据源配置参考 安装采集Agent 父主题： 管理数据上云

查看更多 →

数据计算 算子简介 名称：数据计算 功能说明：按照表达式进行数值计算，计算的结果赋值给某个属性。举例：原消息中有温度属性，其数值是以摄氏度数值表示，可以通过本算子设置计算公式，将摄氏温度计算转换成华氏度读数再赋予给原来的温度属性，或者可以选择将计算转换后的数值赋予一个新属性。 约

查看更多 →