中软国际数据治理专业服务解决方案实践

中软国际数据治理专业服务解决方案实践

    数据爬取和采集 更多内容
  • 采集开关

    “日志采集开关”默认打开,当不需要采集日志时,可关闭采集开关来停止日志采集,以减少资源占用。 “日志采集开关”关闭后,ICAgent将停止采集日志数据,且 云日志服务LTS 控制台的“ICAgent采集开关”也将同步关闭,请谨慎操作。 图1 日志采集开关 父主题: 日志配置

    来自:帮助中心

    查看更多 →

  • 日志采集

    日志采集 “日志采集”处理器用于自定义日志信息,并显示在当前任务的运行日志中(日志级别为Debug)。 配置参数 基本配置 参数 说明 日志信息 设置日志内容,可使用常量,也可通过变量的方式引用前序步骤中的数据,具体请参考引用变量。 图1 日志采集 父主题: 处理器

    来自:帮助中心

    查看更多 →

  • 采集设置

    采集设置 概述 UniAgent 安装与配置 CCE接入 管理主机组 管理主机组(新版) 代理区域管理 操作日志 父主题: 设置

    来自:帮助中心

    查看更多 →

  • 采集状态

    单击“采集状态”,查看主机的采集状态列表。 图1 查看采集状态 表1 采集状态说明 参数名称 说明 主机名称 主机名称。 IP 实例的IP地址。 实例名称 实例名称。 采集采集器名称。 单击“采集器”列的,支持按照采集器名称过滤。 状态 采集状态,包括:正常、采集错误以及未开始。 单击“状态”列的,支持按照状态过滤。

    来自:帮助中心

    查看更多 →

  • 元数据采集任务接口

    数据采集任务接口 查询采集任务列表 创建采集任务 查询采集任务详情 编辑采集任务 删除单个采集任务 启动、调度、停止采集任务 获取任务日志 父主题: 数据目录API

    来自:帮助中心

    查看更多 →

  • 配置元数据采集任务

    schema、命名空间)范围。当不进行设置时,默认选择该数据连接下的所有数据库(或数据schema、命名空间)。 单击数据表后的“设置”,设置采集任务扫描的数据表范围。当不进行设置时,默认选择数据库(或数据schema、命名空间)下的所有数据表。 当数据库(或数据s

    来自:帮助中心

    查看更多 →

  • 在WiseDBA中采集数据库元数据

    在WiseDBA中采集数据库元数据 数据采集功能用于定期采集数据库元数据,如数据库名、表名、数据量、占用空间等,采集到的元数据保存到WiseDBA中,便于用户在实时诊断功能中查看数据库空间使用情况。 使用须知 RDS for PostgreSQL数据库不支持数据采集。 开启数据采集后,系统

    来自:帮助中心

    查看更多 →

  • 内网采集

    已在Edge上添加源端主机凭证。为确保采集过程具备充分的系统访问权限,主机凭证要求如下: Linux主机,请添加Root账号密码作为采集凭证。 Windows主机,请添加Administrator账号密码作为采集凭证。 操作步骤 登录迁移中心管理控制台。 单击左侧导航栏的“调研>资源采集”,进入资源采

    来自:帮助中心

    查看更多 →

  • 日志采集

    日志采集 “日志采集”处理器用于自定义日志信息,并显示在当前任务的运行日志中(日志级别为Debug)。 配置参数 参数 说明 日志信息 设置日志内容,可使用常量,也可通过变量的方式引用前序步骤中的数据,具体请参考引用变量。 父主题: 处理器

    来自:帮助中心

    查看更多 →

  • 资源采集

    资源采集 资源采集常见问题处理方法 如何查看采集失败原因? 公网采集失败,提示:“网络连接超时”或“其他异常” 数据采集失败,如何重新采集? 如何获取云平台凭证(AK/SK)? 如何获取添加Azure凭证所需的信息? 如何获取Azure对象存储深度采集所需凭证? 如何配置采集Azure容器资源所需权限?

    来自:帮助中心

    查看更多 →

  • 模型采集

    模型采集 接入数据源 管理数据采集任务管理 父主题: 应用模型

    来自:帮助中心

    查看更多 →

  • 超额采集

    超额采集 关闭超额采集开关 打开超额采集开关 父主题: API说明

    来自:帮助中心

    查看更多 →

  • 工具采集

    工具采集 创建工具采集任务 采集器管理 采集器参数配置说明

    来自:帮助中心

    查看更多 →

  • 采集管理

    采集管理 ICAgentUniAgent是同一个插件吗? 如何处理界面“ICAgent状态”为“离线”的问题? 在主机上手工安装ICAgent后提示安装成功,但采集器管理器界面上提示状态异常? ICAgent安装成功后,无法在界面上获取到ICAgent状态 ICAgent安装成

    来自:帮助中心

    查看更多 →

  • 血缘采集

    血缘采集 血缘采集概述 创建血缘采集任务 查看血缘关系 父主题: 大数据血缘

    来自:帮助中心

    查看更多 →

  • 采集对源数据库的影响

    -> 2.54% 0.1% -> 10.2% 提高5% 实验室测试数据,具体影响依据实际情况而定。 TPC-H是数据库业界广泛接受使用的基准测试,由一套面向业务的临时查询并发数据修改组成。查询填充数据库的数据具有广泛的行业相关性。 父主题: 评估项目

    来自:帮助中心

    查看更多 →

  • 创建元数据采集任务

    创建元数据采集任务 创建元数据任务,数据任务将基于数据库创建连接并拉实例的元数据,本章介绍如何创建元数据采集任务。 前提条件 已完成云资产委托授权,具体请参见云资产委托授权/停止授权进行操作。 操作步骤 登录管理控制台。 单击左上角的,选择区域或项目。 在左侧导航树中,单击,选择“安全与合规

    来自:帮助中心

    查看更多 →

  • 运行元数据采集任务

    已完成:已完成元数据采集任务。 运行中:正在运行元数据采集任务。 运行失败:元数据采集任务运行失败。 调度中:元数据采集任务已添加成功,待运行。 部分完成:已完成部分元数据采集任务。 运行时长 任务开始运行到结束运行用的时间 相关操作 您还可以在任务的操作栏对当前元数据采集任务进行“编辑”或“删除”操作。

    来自:帮助中心

    查看更多 →

  • 创建采集数据库中的数据任务

    创建采集数据库中的数据任务 您可以通过创建采集任务,采集schema、数据集、数据集字段等技术元数据采集任务创建后,您可以查看管理采集任务,包括任务的启动、执行、编辑配置信息等。 前提条件 已创建与企业数据库的连接。 需拥有数据管家角色,角色权限请参考DMAP数小二用户角色与权限说明。

    来自:帮助中心

    查看更多 →

  • 创建采集任务(采集Agent方式)

    管:指的是网管数据,包含接入、传送(暂不支持)、数通、云核、无线、能源、IT园区的数据。 云:指的是互联网云服务的数据,包含GIS(暂不支持)、气象、施工、云服务、OBS的数据。 其他数据接入:分为本地上传、远程sftp/ftps、Kafka流数据数据数据、API。 在“网络配置”下,选择“采集Agent”。

    来自:帮助中心

    查看更多 →

  • 安装采集Agent

    安装采集Agent 介绍如何安装采集Agent。 操作步骤 执行以下命令,在“NAIE_Collector_20.5.1_Linux_x64”路径下安装采集Agent。 cd NAIE_Collector_20.5.1_Linux_x64 执行如下命令: ./Install.sh

    来自:帮助中心

    查看更多 →

共105条
看了本文的人还看了