中软国际数据治理专业服务解决方案实践

导流数据至数据表 监控服务已接入的数据，会保存在已创建或者系统自动创建的Kafka的Topic中，需要创建导流任务，将数据导流至ClickHouse或Influxdb数据表中。 将数据导流至ClickHouse/Influxdb表 进入AppStage运维中心。 在顶部导航栏选择服务。

查看更多 →

数据源元数据获取 获取数据库列表 获取schemas 获取数据源中的表 获取数据源中表的字段 父主题： 管理中心API

查看更多 →

查询数据集监控数据 功能介绍 查询数据集在指定时间范围内的监控数据。 调试 您可以在 API Explorer 中调试该接口，支持自动认证鉴权。API Explorer可以自动生成SDK代码示例，并提供SDK代码示例调试功能。 URI GET /v2/{project_id}/dat

查看更多 →

”。 接入数据源。 配置ROMA Connect接入业务系统的数据库，确保可以正常从数据库读取数据。不同类型数据源的接入配置不同，此处以MySQL数据库为例，其他类型数据库请参考接入数据源。 在左侧的导航栏选择“数据源管理”，单击页面右上角的“接入数据源”。 在接入数据源页面的“

查看更多 →

数据识别和数据脱敏 DSC能够识别哪些数据源对象？ DSC的扫描时长和脱敏时长？ DSC支持的内置识别规则有哪些？ DSC支持的内置识别模板包含哪些识别规则？ 数据脱敏是否对原始数据有影响？ DSC对可识别和脱敏的数据的字符集是否有要求？ 为什么创建数据库脱敏任务时，无法找到已有的数据库实例中的表？

查看更多 →

数据开发配置数据搬迁 当前管理中心支持直接搬迁数据开发组件中已提交版本的脚本和作业数据，但导出作业时默认只导出作业，不包含其依赖的脚本和资源。 您可以通过管理中心配置数据搬迁进行搬迁，也可以参考本章节通过数据开发的导入导出功能进行搬迁。 数据开发数据搬迁依赖于数据开发的脚本、作业、环境变量、资源导入导出功能。

查看更多 →

大数据迁移后数据校验 MaxCompute迁移至 DLI 数据校验 MRS ClickHouse迁移至MRS ClickHouse数据校验 阿里云EMR ClickHouse迁移至MRS ClickHouse数据校验 阿里云 ClickHouse迁移至MRS ClickHouse数据校验

查看更多 →

数据探索 什么是数据探索？ 什么样的用户可以使用数据探索？ 为什么别人可以看到HDFS数据源，我却看不到？ 为什么在HIVE数据源中，我只能看到少量的表，有的表也只能看到部分字段？ 数据探索支持跨不同数据源关联数据么？ 什么是异步任务？什么场景下会触发异步任务？ 什么是模板？什么时候使用模板？

查看更多 →

华为云帮助中心，为用户提供产品简介、价格说明、购买指南、用户指南、API参考、最佳实践、常见问题、视频帮助等技术文档，帮助您快速上手使用华为云服务。

查看更多 →

数据合并 数据连接 数据连接是将特征列维度不完全相同的数据集连接成一份数据。数据集特征不完全相同的原因，比如现网中不同 系统采集的数据。其原理与“数据集”界面的数据连接原理相同，具体请参见数据连接。 操作步骤如下所示。 单击界面右上角的图标，选择“数据处理 > 数据合并 > 数据连接”，界面新增“数据连接”内容。

查看更多 →

数据采样 如果数据量太大，造成特征操作等待的时间长，用户可以通过采样功能减少特征处理的数据量，提升特征处理的速度。 数据采样提供如下两种方式，请根据实际情况进行选择： 随机采样：按照比例进行样本数据的随机采样。 分层采样：如果一个特征或多个特征组合样本值的类型多样，为保证采样数据

查看更多 →

数据解析 创建解析任务 启动解析任务 父主题： 应用数据集

查看更多 →

数据准备 数据服务的优势是什么 私有模板和公共模板的区别是什么 父主题： 常见问题

查看更多 →

数据过滤 算子简介 名称：数据过滤 功能说明：根据设置的条件过滤数据，满足条件的数据则输出，不满足条件的数据将被丢弃。 约束：下游不允许对接数据源及产品过滤算子。 算子配置 基础配置项 算子名称： 配置项英文名：name 说明：算子名称，对算子进行个性化的命名，以辅助增加可读性。

查看更多 →

数据准备 数据集中的数据导入特征工程后，可能存在空值、冗余、数据不足等情况，或者用户需要将多次导入的数据集实例进行数据联合。以上情况，都可以在数据准备中进行操作。当前数据准备包含的功能有：数据修复、数据过滤、数据联合、数据连接、数据去噪。 数据修复 用户可以在数据修复中对单列进行

查看更多 →

数据探索 本章节以“NormalDistribution.csv”（正态分布图的展示）为例，介绍数据探索的基本操作方法。 创建查询 配置查询条件 查看查询结果 父主题： 应用数据集

查看更多 →

数据探索 管理任务 管理模板 父主题： 管理基础工具

查看更多 →

数据接入 角色访问权限 管理软件包 管理采集机（运维） 管理采集机（用户） 管理采集任务 管理本地上传任务 数据源配置参考 安装采集Agent 父主题： 管理数据上云

查看更多 →

数据计算 算子简介 名称：数据计算 功能说明：按照表达式进行数值计算，计算的结果赋值给某个属性。举例：原消息中有温度属性，其数值是以摄氏度数值表示，可以通过本算子设置计算公式，将摄氏温度计算转换成华氏度读数再赋予给原来的温度属性，或者可以选择将计算转换后的数值赋予一个新属性。 约

查看更多 →

处理数据 入门流程 示例：图片质量变换

查看更多 →

新建训练数据集 在“数据选择”页面，单击“新建训练数据集”，右侧弹出“新建数据集”页面，根据数据存储位置和数据标注情况，按表1填写数据集基本信息，然后单击“确定”。 图3 新建数据集 表1 新建训练数据集参数说明 参数 说明 数据集名称 待新建的数据集名称。 描述 数据集简要描述。

查看更多 →