中软国际数据治理专业服务解决方案实践

查看数据采集日志 操作场景 数据采集日志，记录该项目发生的事件及其发生时间。 操作步骤 登录UGO控制台。 单击左侧导航栏“结构迁移 > 数据库评估”。 在评估项目任务列表中，选择待分析的项目，单击“操作 > 查看日志”。实时显示采集日志列表。 在详情中查看触发事件的具体信息，包

查看更多 →

上传采集机采集数据分片 功能介绍 将采集到的数据分片上报到server端。 URI URI格式 POST /softcomai/datalake/collection/v1.0/sliceUploading 参数说明 无。 请求 请求样例 POST https://ip:port

查看更多 →

数据采集与分析 前提条件 已配置邮箱 服务器 ，具体操作请参见调测邮箱通知功能。 操作步骤 选择“运维管理 > 数据采集与分析 > 数据采集与分析”。 根据需要选择相应的功能使用，详情请参见表1。 表1 任务管理 任务 说明 操作方法 采集设备日志 采集和统计设备故障日志，以了解设备的状态以及运行情况。

查看更多 →

数据采集与分析 数据采集与分析 父主题： 运维管理

查看更多 →

数据采集平台操作说明 数据采集平台面向市级、区级两级的生态环境监测指挥中心的值班长和工作人员，提供多渠道监测站点和污染源数据的功能。 固定微站监测 图1 固定监测站点 通过单击导航栏的【大气监测】，选择子菜单【固定监测站点】，进入固定微站监测。 页面左侧信息栏勾选站点类型、网格风

查看更多 →

升级采集机（数据面） 功能介绍 对采集机进行升级。 URI URI格式 POST /softcomai/datalake/collection/v1.0/collector/upgrade 参数说明 无。 请求 请求样例 POST https://ip:port/softcoma

查看更多 →

下载采集数据记录 功能介绍 下载采集数据记录。 URI URI格式 GET /softcomai/datalake/collection/v1.0/collect/download/{taskId} 参数说明 参数名 是否必选 参数类型 备注 taskId 是 String （下载采集记录）任务ID。

查看更多 →

雷达数据采集与上传 堆体服务对雷达点云数据规格约束、云台采集和环境要求 激光雷达点云数据上传 父主题： 堆体测量

查看更多 →

Flume数据采集慢 问题现象 Flume启动后，Flume数据采集慢。 原因分析 Flume堆内存设置不合理，导致Flume进程一直处于频繁GC。查看Flume运行日志： 2019-02-26T13:06:20.666+0800: 1085673.512: [Full GC:[CMS:

查看更多 →

在数据容器中查看采集的数据 数据容器，用于应用中的数据存储，数据容器包含数据库和集群，用来展示在元数据采集中采集的数据。 前提条件 需拥有数据管家角色，角色权限请参考DMAP数小二用户角色与权限说明。 已按如下流程执行采集任务。 已新增数据连接。 已创建采集任务。 已启动/执行采集任务。

查看更多 →

采集数据源的元数据 元数据简介 配置元数据采集任务 查看任务监控 父主题： 数据目录

查看更多 →

下载采集机日志（数据面） 功能介绍 下载对应采集机上的采集机日志。 URI URI格式 GET /softcomai/datalake/collection/v1.0/download/collectorLog/{collectorId} 参数说明 无。 请求 请求样例 GET

查看更多 →

步骤4：元数据采集 为了在 DataArts Studio 平台中对迁移到云上的原始数据进行管理和监控，我们必须先在DataArts Studio数据目录模块中对SDI贴源层数据进行元数据采集并监控。 采集并监控元数据 在DataArts Studio控制台首页，选择对应工作空间的“数据目录”模块，进入数据目录页面。

查看更多 →

采集数据时报错HoodieException 问题 数据采集时报错： com.uber.hoodie.exception.HoodieException: created_at(Part -created_at) field not found in record. Acceptable

查看更多 →

采集数据时报错HoodieKeyException 问题 创建Hudi表时，是否可以使用包含空记录的可空字段作为主键？ 回答 不可以。 使用包含空记录的可空字段作为主键时会返回HoodieKeyException异常： Caused by: org.apache.hudi.exception

查看更多 →

大容量数据库 大容量数据库背景介绍 表分区技术 数据分区查找优化 数据分区运维管理 父主题： 分区表

查看更多 →

大容量数据库 大容量数据库背景介绍 表分区技术 数据分区查找优化 数据分区运维管理 父主题： 分区表

查看更多 →

大容量数据库 大容量数据库背景介绍 表分区技术 数据分区查找优化 数据分区运维管理 父主题： 分区表

查看更多 →

如何查看安全数据采集和安全数据资源包的剩余量？ 已包周期购买安全云脑的安全数据采集和安全数据保留资源包，可以通过以下方法查看剩余量： 在安全云脑总览页面右上角，将鼠标悬停在“标准版”或“专业版”上，页面显示版本管理窗口。 在版本管理窗口中，单击安全数据采集或安全数据保留栏中的“查看”。

查看更多 →

大容量数据库 大容量数据库背景介绍 表分区技术 数据分区查找优化 数据分区运维管理 父主题： 分区表

查看更多 →

在WiseDBA中采集数据库元数据 数据采集功能用于定期采集数据库元数据，如数据库名、表名、数据量、占用空间等，采集到的元数据保存到WiseDBA中，便于用户在实时诊断功能中查看数据库空间使用情况。 使用须知 RDS for PostgreSQL数据库不支持数据采集。 开启数据采集后，系统

查看更多 →