全量数据应用 特征操作完成后，需要单击“执行”，应用特征操作流至全量数据。同时支持选择其他数据集和数据集实例，应用当前特征操作流。全量数据应用操作步骤如下。 单击。 弹出“执行”对话框。如图1所示。 图1 全量数据应用 在“数据集”和“数据”下拉框中，分别选择数据集和数据。 支持

查看更多 →

全量数据同步 针对数据增长缓慢、非核心业务相关、无时间戳、无增删改标识、数据量低于十万条的明细表数据，以及码表、维度表等数据，采用全量同步的方式接入数管平台，并存放在贴源层的全量表内。数据初始化全量同步是指第一次从业务源库中采用全量同步的方式获取一次数据。 确定数据源 通过调研获

查看更多 →

系统管理API列表 搜索全量数据服务API 默认情况下，全量数据服务页展示的是当前应用下所有对外可调用的全量数据服务API。为了帮助用户快速搜索出当前应用下对外可调用的全量数据服务API，xDM-F提供搜索全量数据服务API功能，您在搜索框中输入关键字后，即可快速对全量数据服务API展开检索。

查看更多 →

迁移表全量数据 配置DWS数据源连接 配置Oracle数据源连接 表迁移 验证 父主题： Oracle迁移到 GaussDB (DWS)实践

查看更多 →

全量数据服务 查看API详情 查询指定API 导出API 父主题： 数据服务管理

查看更多 →

全量数据服务概述 为提升应用开发人员的开发效率，工业数字模型驱动引擎-数据建模引擎（xDM Foundation，简称xDM-F）提供对应用全量数据服务的管理功能，支持查看所有可调用API的信息，支持调用应用部署后的所有API。全量数据服务API包括系统管理API、数据模型生成A

查看更多 →

节点数据收集 功能 获取当前节点所有与IEF相关的数据，后续IEF运维人员定位使用。 收集的数据清单如下所示。 表1 数据收集清单 分类 收集项 描述 系统数据 硬件架构 收集arch命令输出，并判断IEF安装的类型 CPU信息 解析/proc/cpuinfo文件，输出cpu信息文件

查看更多 →

节点数据血缘 数据血缘方案简介 配置数据血缘 查看数据血缘 父主题： 节点参考

查看更多 →

使用全量数据服务API 全量数据服务概述 创建指定实体的实例 查询满足条件的实例数据 分页查询指定用户的实例数据 比较M-V模型的版本对象 另存版本对象的实例数据 创建多维版本的数据实例

查看更多 →

SFT全参微调数据处理 SFT全参微调（SFT fine-tuning）前需要对数据集进行预处理，转化为.bin和.idx格式文件，以满足训练要求。 下载数据 SFT全参微调涉及的数据下载地址：https://huggingface.co/datasets/silk-road/a

查看更多 →

parquet 如果在准备数据章节已下载数据集，此处无需重复操作。 SFT全参微调和LoRA微调训练使用的是同一个数据集，数据处理一次即可，训练时可以共用。 数据预处理说明 使用数据预处理脚本preprocess_data.py脚本重新生成.bin和.idx格式的SFT全参微调数据。preprocess_data

查看更多 →

SFT全参微调数据处理 SFT全参微调（Supervised Fine-Tuning）前需要对数据集进行预处理，转化为.bin和.idx格式文件，以满足训练要求。 下载数据 SFT全参微调涉及的数据下载地址：https://huggingface.co/datasets/tats

查看更多 →

数据交换节点 组件说明 交换节点用于执行各自的交换作业。 数据库还原 不同部门可能使用不同的交换节点，每个交换节点需要使用单独的数据库。 在 MySQL 实例上面创建数据库，数据库名称为 dxp_node； 中心节点： 部门前置节点： 从数据交换节点部署包中复制出数据库备份文件，还原到上一步创建的数据库中。

查看更多 →

数据集标注节点 功能介绍 属性总览 使用案例 父主题： 节点类型

查看更多 →

数据集创建节点 功能介绍 属性总览 使用案例 父主题： 节点类型

查看更多 →

数据集导入节点 功能介绍 属性总览 使用案例 父主题： 节点类型

查看更多 →

r_ID为6的节点的分区中的数据时，也必须把Broker_ID为5的节点的分区带上。 log_dirs为需要迁移的磁盘路径。此样例迁移的是Broker_ID为6的节点，Broker_ID为5的节点对应的log_dirs可设置为“any”，Broker_ID为6的节点对应的log_

查看更多 →

r_ID为6的节点的分区中的数据时，也必须把Broker_ID为5的节点的分区带上。 log_dirs为需要迁移的磁盘路径。此样例迁移的是Broker_ID为6的节点，Broker_ID为5的节点对应的log_dirs可设置为“any”，Broker_ID为6的节点对应的log_

查看更多 →

全并行的数据查询处理 功能描述 全并行的分布式查询处理是DWS中最核心的技术，它可以最大限度的降低查询时节点之间的数据流动，以提升查询效率。 DWS为达成高性能数据分析目标，实现了一套高性能的分布式执行引擎，执行引擎以SQL引擎生成的执行计划为输入，将元组按执行计划的要求进行加工并将结果返回给客户端。

查看更多 →

通过备份文件恢复全量数据 操作场景 云数据库RDS支持使用已有的自动备份和手动备份，将实例数据恢复到备份被创建时的状态。该操作恢复的为整个实例的数据。 通过备份文件恢复到实例上，会从OBS备份空间中将该备份文件下载到实例上进行全量恢复，恢复时长和实例的数据量有关，平均恢复速率为40MB/s。

查看更多 →

按备份文件恢复全量数据 操作场景 云数据库RDS支持使用已有的自动备份和手动备份，将实例数据恢复到备份被创建时的状态。该操作恢复的为整个实例的数据。 通过备份文件恢复到实例上，会从OBS备份空间中将该备份文件下载到实例上进行全量恢复，恢复时长和实例的数据量有关，平均恢复速率为40MB/s。

查看更多 →