中软国际数据治理专业服务解决方案实践

配置增量元数据采集任务 配置、运行采集任务是构建数据资产的前提，下面举例说明如何通过配置采集任务达到灵活采集元数据的目的。 场景一：仅添加新元数据 用户的数据库中新增的数据表，采集任务仅采集新增的表。 例如新增table4的情况下： 采集前的数据表元数据：table1，table2，table3

查看更多 →

根据标签查询采集任务（数据准备） 功能介绍 数据准备根据标签查询采集任务。 URI URI格式 GET /softcomai/datalake/collection/v1.0/taskConsole/tasks 参数说明 无。 请求 请求样例 GET https://ip:por

查看更多 →

获取大屏指定组件数据 功能介绍 获取大屏指定组件数据。 URI POST /v1/{project_id}/screens/{screen_id}/query-data 表1 路径参数 参数 是否必选 参数类型 描述 project_id 是 String 项目ID。获取方法请参考获取项目ID。

查看更多 →

子问题分成更小的子问题直到最后子问题可以简单的直接求解，原问题的解可看成子问题的解的合并。对于大容量数据场景，数据库提供对数据进行“分治处理”的方式即分区，将逻辑数据库或其组成元素划分为不同的独立部分，每一个分区维护逻辑上存在相类似属性的数据，这样就把庞大的数据整体进行了切分，有利于数据的管理、查找和维护。

查看更多 →

DLI 如何访问OBS桶中的数据 创建OBS表。 具体语法请参考《数据湖探索SQL语法参考》。 添加分区。 具体语法请参考《数据湖探索SQL语法参考》。 往分区导入OBS桶中的数据。 具体语法请参考《数据湖探索SQL语法参考》。 查询数据。 具体语法请参考《数据湖探索SQL语法参考》。

查看更多 →

小的子问题直到最后子问题可以简单的直接求解，原问题的解可看成子问题的解的合并。对于大容量数据场景，数据库提供对数据进行“分治处理”的方式即分区，将逻辑数据库或其组成元素划分为不同的独立部分，每一个分区维护逻辑上存在相类似属性的数据，这样就把庞大的数据整体进行了切分，有利于数据的管理、查找和维护。

查看更多 →

子问题分成更小的子问题直到最后子问题可以简单的直接求解，原问题的解可看成子问题的解的合并。对于大容量数据场景，数据库提供对数据进行“分治处理”的方式即分区，将逻辑数据库或其组成元素划分为不同的独立部分，每一个分区维护逻辑上存在相类似属性的数据，这样就把庞大的数据整体进行了切分，有利于数据的管理、查找和维护。

查看更多 →

id; 当客户的名字、性别、邮件都相同时，则判定它们为重复的记录。对于表t_customer，id等于1、3、6的为重复数据，id为2、5的也是重复数据，删除多余的数据的同时需要保留其中的一条。 方法一：使用聚合函数min(expr) 使用聚合函数通过子查询取出id最小的不重复行，然后通过NOT

查看更多 →

删除采集任务（数据节点，console页面） 功能介绍 删除采集任务。 URI URI格式 DELETE /softcomai/datalake/collection/v1.0/task/{taskId}/{deleteFilesFlag}（数据面） POST /softcoma

查看更多 →

如何创建数据库和数据表，数据库对应的是不是数据连接? 问题描述 用户对于创建数据库和数据表，数据库与数据连接的关系不清楚，需要具体解释下，便于用户理解。 解决方案 数据库和数据表可以在 DataArts Studio 服务中创建。 数据库对应的不是数据连接，数据连接是创建DataArts

查看更多 →

如何发布数据集 发布数据集的具体方法请参见《数据集服务快速入门》文档的申请发布数据集章节。 父主题： 常见问题

查看更多 →

均需要选取训练规格，根据训练规格大小进行计费。 如果需要数据源停止计费，请先终止近线数据源的导入，删除对应数据源和对应OBS中的数据存储。 父主题： 计费相关

查看更多 →

根据待备份本地盘数据的容量大小，创建本地盘。 新创建的云硬盘需要与待备份本地盘的 弹性云服务器 位于同一区域、同一可用区。 详细操作，请参见新增磁盘。 挂载云硬盘。 将创建的云硬盘挂载至待备份本地盘的弹性 云服务器 。 详细操作，请参见挂载磁盘。 备份本地盘数据。 将本地盘中需要备份的数据，备份至新挂载的云硬盘中。

查看更多 →

flushall：清空整个实例的数据。 flushdb：清空当前DB中的数据。 Redis 4.0及以上版本的实例 Redis 4.0及以上版本的实例数据清空，可以使用Redis-cli客户端或通过管理控制台的Web CLI功能连接实例，执行flushdb或者flushall命令清空数据，或使用D CS 控制

查看更多 →

若项目与租户级围栏都不存在，任务或检查单可直接做采集 图5.1-1 采集围栏配置界面 输入项 规则说明 按项目 说明1：选择需要维护电子围栏的项目编码，电子围栏是按项目维度维护的，同一个项目只能维护一个电子围栏；若项目为空，生成的电子围栏为租户级围栏 是否强制围栏 配置是否强制电

查看更多 →

如何进行信息采集 问题描述 如何进行信息采集？ 解决方法 选择“监控 > 诊断中心”。 单击“信息采集”。 选择“基本采集”或“扩展采集”。 基本采集：采集设备当前的时钟信息、版本信息、配置信息等基本信息内容。 扩展采集：对基本采集的扩展，主要是基于IP地址的会话表、Server

查看更多 →

如何发布数据集 发布数据集的具体方法请参见《数据集服务快速入门》文档的申请发布数据集章节。 父主题： 数据集

查看更多 →

如何订阅数据集 订阅数据集的具体方法请参见《数据集服务快速入门》文档的订阅数据集章节。 父主题： 常见问题

查看更多 →

如何下载数据集 数据集支持下载数据集到OBS桶和本地目录，下载数据集到OBS桶的具体方法请参见《数据集服务快速入门》文档的“下载数据集到OBS桶”章节，下载数据集到本地目录的具体方法请参见《数据集服务快速入门》文档的“申请本地下载数据集”~“下载数据集到本地”章节。 父主题： 数据集

查看更多 →

的用户，obsutil是执行批量处理、自动化任务的好的选择。 如果您的业务环境需要通过API或SDK执行数据上传操作，或者您习惯于使用API和SDK，推荐选择OBS的API或SDK方法创建桶和上传对象。 上述说明仅罗列OBS常用的使用方式和工具，更多OBS工具说明，请参见《OBS工具指南》。

查看更多 →

如何导出企业考勤数据？ 如您是企业管理员，依次进入考勤>统计，在统计页面，点击右上角“导出报表”，选择需要的数据范围及人员，点击“导出到云空间”，便可导出您所需要的考勤数据。 父主题： 考勤

查看更多 →