中软国际数据治理专业服务解决方案实践

数据源采集失败，如何重新采集？ 采集失败的数据源，处理完失败原因后，需要删除后通过新增数据源重新采集。 在任务列表页面，单击采集任务操作列的“查看”，进入任务详情页面。 单击采集项操作列的“新增数据源”，弹出新增数据源窗口。 选择区域和资源类型，单击“确认”按钮。新增数据源成功，系统开始对新增的数据源进行采集。

查看更多 →

图所示： 采集哪些数据 APM仅采集应用的业务调用链数据、资源信息、调用请求的KPI数据，不涉及个人隐私数据。所采集的数据仅用于APM性能分析和故障诊断，不会用于其他商业目的。下表为数据采集范围和用途。 数据类型 采集数据 传输方式 存储方式 数据用途 时限 调用链数据 调用链Span数据

查看更多 →

页面左侧信息栏勾选站点类型、网格风场和站点警告。单击【监测指标】和【数据标记】进行选择。 页面底部可以进行管控区域的选择，包括“重点管控区域”、“大运会场馆”、“大运会场馆重点管控区（1KM）”、“大运会场馆重点缓冲区（1KM）”。单击时间轴的【天】和【时】的按钮进行或者时间控件来进行截止时间的选择，或者单击【最新】按钮，选择当前的时间。

查看更多 →

升级采集机（数据面） 功能介绍 对采集机进行升级。 URI URI格式 POST /softcomai/datalake/collection/v1.0/collector/upgrade 参数说明 无。 请求 请求样例 POST https://ip:port/softcoma

查看更多 →

下载采集数据记录 功能介绍 下载采集数据记录。 URI URI格式 GET /softcomai/datalake/collection/v1.0/collect/download/{taskId} 参数说明 参数名 是否必选 参数类型 备注 taskId 是 String （下载采集记录）任务ID。

查看更多 →

性、内存检测信息、调用请求的KPI数据，不涉及个人隐私数据。所采集的数据仅用于APM性能分析和故障诊断，不会用于其他商业目的。下表为数据采集范围和用途。 数据类型 采集数据 传输方式 存储方式 数据用途 时限 调用链数据 调用链Span数据 通过https加密结合AKSK鉴权的方式传输

查看更多 →

雷达数据采集与上传 堆体服务对雷达点云数据规格约束、云台采集和环境要求 激光雷达点云数据上传 父主题： 堆体测量

查看更多 →

Flume数据采集慢 问题现象 Flume启动后，Flume数据采集慢。 原因分析 Flume堆内存设置不合理，导致Flume进程一直处于频繁GC。查看Flume运行日志： 2019-02-26T13:06:20.666+0800: 1085673.512: [Full GC:[CMS:

查看更多 →

系数：指定取模的数值。 map 是 无 数据处理规则 生成新字段，值为取模后的值。 字段的值须为整数，否则当前行会成为脏数据。 样例 通过“ CS V文件输入”算子，生成两个字段A和B。 源文件如下图： 配置“取模转换”算子，生成两个新字段C和D： 转换后，依次输出A、B、C和D，结果如下：

查看更多 →

系数：指定取模的数值。 map 是 无 数据处理规则 生成新字段，值为取模后的值。 字段的值须为整数，否则当前行会成为脏数据。 样例 通过“CSV文件输入”算子，生成两个字段A和B。 源文件如下图： 配置“取模转换”算子，生成两个新字段C和D： 转换后，依次输出A、B、C和D，结果如下：

查看更多 →

下载采集机日志（数据面） 功能介绍 下载对应采集机上的采集机日志。 URI URI格式 GET /softcomai/datalake/collection/v1.0/download/collectorLog/{collectorId} 参数说明 无。 请求 请求样例 GET

查看更多 →

如何防止采集数据泄露？ MgC通过以下方式确保采集数据的安全： 数据加密传输：采用加密技术来保护数据在传输过程中的安全 本地加密存储凭证：Edge上的凭证信息都会经过加密处理后保存在本地，不会通过网络传输到云端。 本地数据采集与存储：通过Edge线下采集的信息会被安全地保存在本地

查看更多 →

步骤4：元数据采集 为了在 DataArts Studio 平台中对迁移到云上的原始数据进行管理和监控，我们必须先在DataArts Studio数据目录模块中对SDI贴源层数据进行元数据采集并监控。 采集并监控元数据 在DataArts Studio控制台首页，选择对应工作空间的“数据目录”模块，进入数据目录页面。

查看更多 →

采集数据时报错HoodieException 问题 数据采集时报错： com.uber.hoodie.exception.HoodieException: created_at(Part -created_at) field not found in record. Acceptable

查看更多 →

音频自采集和音频自渲染 功能描述 实时音频传输过程中，HWRtcEngine SDK通常会启动默认的音频模块进行采集和渲染。在以下场景中，您可能会发现默认的音频模块无法满足开发需求： app中已有自己的音频模块。 需要使用自定义的采集或播放处理。 某些音频采集设备被系统独占。 注意事项

查看更多 →

在数据容器中查看采集的数据 数据容器，用于应用中的数据存储，数据容器包含数据库和集群，用来展示在元数据采集中采集的数据。 前提条件 需拥有数据管家角色，角色权限请参考DMAP数小二用户角色与权限说明。 已按如下流程执行采集任务。 已新增数据连接。 已创建采集任务。 已启动/执行采集任务。

查看更多 →

采集数据时报错HoodieKeyException 问题 创建Hudi表时，是否可以使用包含空记录的可空字段作为主键？ 回答 不可以。 使用包含空记录的可空字段作为主键时会返回HoodieKeyException异常： Caused by: org.apache.hudi.exception

查看更多 →

模型采集支持采集的数据源类型有哪些？ 当前新版模型采集支持采集的数据源类型有：DAMENG、GAUSSDB、DORIS、MYSQL、OpenGauss、ORACLE、POSTGRESQL、SQL Server、DWS、FI Hive、Hive、OCEANBASE、SFTP，用于模型采集。

查看更多 →

采集数据源的元数据 元数据简介 配置元数据采集任务 查看任务监控 父主题： 数据目录

查看更多 →

0：失败。具体请参见客户端错误码。 如果使用外部输入视频数据，需要在加入房间后，按照一定时间间隔调用pushExternalVideoFrame接口输入视频数据。 format可选格式为yuv420p、rgba和texture2d，如果需要外部传入texture2d编码的数据，需要设置format为tex

查看更多 →

自定义音频采集和渲染 setExternalAudioCapture - (int)setExternalAudioCapture:(BOOL)enable sampleRate:(NSUInteger)sampleRate channels:(NSUInteger)channels;

查看更多 →