中软国际数据治理专业服务解决方案实践

中软国际数据治理专业服务解决方案实践

    如何采集大数据 更多内容
  • 运行元数据采集任务

    已完成:已完成元数据采集任务。 运行中:正在运行元数据采集任务。 运行失败:元数据采集任务运行失败。 调度中:元数据采集任务已添加成功,待运行。 部分完成:已完成部分元数据采集任务。 运行时长 任务开始运行到结束运行用的时间 相关操作 您还可以在任务的操作栏对当前元数据采集任务进行“编辑”或“删除”操作。

    来自:帮助中心

    查看更多 →

  • 创建采集任务(采集Agent方式)

    当数据接入方式选择“管>IT”时。 采集策略参数说明如下: 一次性采集:该采集任务仅采集一次。 按间隔采集:该采集任务按设置的间隔时间采集数据。 按周期采集:该采集任务按设置的周期和启动时间采集数据。 单击“确定”。 (可选)配置数据存储,参数说明见表3。 当数据接入方式选择"其他数据接入>Kafka流数据"时,则需要执行此步骤。

    来自:帮助中心

    查看更多 →

  • 创建采集数据库中的数据任务

    创建采集数据库中的数据任务 您可以通过创建采集任务,采集schema、数据集、数据集字段等技术元数据采集任务创建后,您可以查看和管理采集任务,包括任务的启动、执行、编辑配置信息等。 前提条件 已创建与企业数据库的连接。 需拥有数据管家角色,角色权限请参考DMAP数小二用户角色与权限说明。

    来自:帮助中心

    查看更多 →

  • 快速搭建数据大屏

    示。 图11 屏效果 单击右上角右“保存”,输入屏的名称,单击“确定”,屏保存成功。 步骤5:管理屏 切换屏发布状态 在控制台右侧“我的项目”单击项目名称,进入项目页面。 单击“数据分析 > 屏”,进入屏页面。 单击屏名称,进入屏编辑页面。 发布屏:单击页面右上角“保存并发布”,大屏发布成功。

    来自:帮助中心

    查看更多 →

  • 通过ECS接入LTS采集Zabbix数据

    通过E CS 接入LTS采集Zabbix数据 Zabbix作为常用的开源监控系统,提供了丰富的告警规则用于系统监控。 云日志服务LTS 支持将Zabbix中的监控数据采集到日志流中。本文介绍通过ECS接入将Zabbix数据采集到云日志服务的操作步骤。 前提条件 准备好需要采集日志的ECS主机

    来自:帮助中心

    查看更多 →

  • 故障定位数据采集授权协议

    登录华为乾坤控制台,选择“ > 我的服务 > 智能终端安全”。 在右上角菜单栏中选择“服务授权 > 故障定位数据采集授权协议”,进入故障定位数据采集授权界面。 勾选“我已知晓”,单击“确认授权”。 图1 故障定位数据采集授权 授权之后,您可以看到当前授权状态。 图2 查看授权状态 父主题: 部署指南

    来自:帮助中心

    查看更多 →

  • 配置增量元数据采集任务

    配置增量元数据采集任务 配置、运行采集任务是构建数据资产的前提,下面举例说明如何通过配置采集任务达到灵活采集数据的目的。 场景一:仅添加新元数据 用户的数据库中新增的数据表,采集任务仅采集新增的表。 例如新增table4的情况下: 采集前的数据表元数据:table1,table2,table3

    来自:帮助中心

    查看更多 →

  • 采集数据库位点信息

    采集数据库位点信息 功能介绍 采集数据库位点信息。 接口约束 目前仅支持MySQL-> GaussDB (DWS)同步场景。 仅支持部分Region使用,详情参考终端节点。 URI POST /v5/{project_id}/jobs/{job_id}/collect-db-position

    来自:帮助中心

    查看更多 →

  • 安装采集Agent

    安装采集Agent 介绍如何安装采集Agent。 操作步骤 执行以下命令,在“NAIE_Collector_20.5.1_Linux_x64”路径下安装采集Agent。 cd NAIE_Collector_20.5.1_Linux_x64 执行如下命令: ./Install.sh

    来自:帮助中心

    查看更多 →

  • 采集任务

    采集任务的调度频率选择 图4 部署采集任务 图5 编辑采集任务 图6 修改采集任务 未部署的采集任务才可以编辑 采集任务重新部署:部署失败的采集任务可以进行重新部署。 图7 采集子任务-1 图8 采集子任务-2 子任务重新部署 部署失败的子任务可以重新进行部署。 图9 子任务重新调度

    来自:帮助中心

    查看更多 →

  • 库表采集

    库表采集 左侧导航栏依次选择单击资源管理、库表管理、采集数据,配置所需要的数据源表, 并依照数据标准规范,合理命名元数据名称,以及代码等项,将采集到的数据资源进行复制至部门资源库,找到部门资源库对应库表物化库表资源,最后通过数据桥接同步对应库表数据采集数据: 图1 采集 复制元数据:

    来自:帮助中心

    查看更多 →

  • 配置采集模板

    配置采集模板 配置指令式采集模板 父主题: 质量管理

    来自:帮助中心

    查看更多 →

  • 日志采集类

    日志采集类 日志出现重复/丢失的原因

    来自:帮助中心

    查看更多 →

  • 网络监控采集

    网络监控采集 网络监控采集(AppNetwork)是网络监控采集器,获取网络监控相关信息。包括:类别、指标、指标名称、指标说明、单位、数据类型以及默认聚合方式。 表1 网络监控采集(AppNetwork)指标说明 指标类别 指标 指标名称 指标说明 单位 数据类型 默认聚合方式

    来自:帮助中心

    查看更多 →

  • 采集中心

    采集器描述对采集采集数据进行说明,指标集是规范采集数据采集参数可以让用户自定义采集数据数据采集由APM Agent实现采集,比如java性能数据采集通过javaagent来实现。APM Agent采集数据必须跟采集器的指标集的数据模型定义对应, 服务器 端才会得到处理。

    来自:帮助中心

    查看更多 →

  • 根据标签查询采集任务(数据准备)

    根据标签查询采集任务(数据准备) 功能介绍 数据准备根据标签查询采集任务。 URI URI格式 GET /softcomai/datalake/collection/v1.0/taskConsole/tasks 参数说明 无。 请求 请求样例 GET https://ip:por

    来自:帮助中心

    查看更多 →

  • 数据目录支持采集哪些对象的资产?

    数据目录支持采集哪些对象的资产? 数据目录目前支持采集数据湖的资产,例如 MRS Hive、 DLI 、DWS等,除此之外也支持采集以下数据源的元数据: 关系型数据库,如MySQL/PostgreSQL等(可使用RDS类型连接,采集其元数据 云搜索服务 CSS 图引擎服务GES 对象存储服务 OBS

    来自:帮助中心

    查看更多 →

  • 评估项目

    评估项目 连接方式该如何选择? 采集源库的方法 数据库权限检查 对象采集失败的原因有哪些? GaussDB中没有Schema名称的对象语句验证失败,该如何设置搜索路径? 原生兼容、转换兼容、部分兼容和不兼容分别是什么意思? 迁移风险(10SQL风险语句)和风险SQL摘要有什么关系?

    来自:帮助中心

    查看更多 →

  • 应用资产

    资产使用场景、提供的功能以及如何使用请参见ISDP+认证管理。 ISDP+权限同步 资产使用场景、提供的功能以及如何使用请参见ISDP+权限同步。 数据处理应用模板 资产使用场景、提供的功能以及如何使用请参见数据处理应用模板。 操作日志 资产使用场景、提供的功能以及如何使用请参见操作日志。

    来自:帮助中心

    查看更多 →

  • 组件资产

    订购方法 使用场景 提供的功能 如何使用 屏Demo 请参见如何订购&部署资产。 资产使用场景、提供的功能以及如何使用请参见屏Demo。 移动端签名 资产使用场景、提供的功能以及如何使用请参见移动端签名。 地铁图 资产使用场景、提供的功能以及如何使用请参见地铁图。 工作票 资产

    来自:帮助中心

    查看更多 →

  • 如何获取Azure对象存储深度采集所需凭证?

    如何获取Azure对象存储深度采集所需凭证? 在对Azure云平台对象存储资源进行深度采集时,需要使用“存储账户”和“密钥”作为采集凭证,本节介绍获取Azure“存储账户”和“密钥”的方法。 登录 Azure 门户中转到存储账户。 在左侧导航栏选择“安全性和网络 > 访问密钥” ,即可看到“存储账户名称”和“密钥”。

    来自:帮助中心

    查看更多 →

共105条
看了本文的人还看了