使用数据工程构建NLP大模型数据集 NLP大模型支持接入的数据集类型 盘古NLP大模型仅支持接入文本类数据集，该数据集格式要求请参见文本类数据集格式要求。 构建NLP大模型所需数据量 使用数据工程构建盘古NLP大模型数据集进行模型训练时，所需数据量见表1。 表1 构建NLP大模型所需数据量

查看更多 →

子问题的解的合并。对于大容量数据场景，数据库提供对数据进行“分治处理”的方式即分区，将逻辑数据库或其组成元素划分为不同的独立部分，每一个分区维护逻辑上存在相类似属性的数据，这样就把庞大的数据整体进行了切分，有利于数据的管理、查找和维护。 父主题： 大容量数据库

查看更多 →

子问题的解的合并。对于大容量数据场景，数据库提供对数据进行“分治处理”的方式即分区，将逻辑数据库或其组成元素划分为不同的独立部分，每一个分区维护逻辑上存在相类似属性的数据，这样就把庞大的数据整体进行了切分，有利于数据的管理、查找和维护。 父主题： 大容量数据库

查看更多 →

假设，待导入的表单中包含5条数据，成功执行导入操作后，调用次数算6次，即5条数据加一次导入动作。 图2 数据导入 表单导出，导出任务算一次、数据下载算一次 图3 导出数据 图4 数据下载 表单调用次数（运行态） 表单提交，算一次 图5 表单提交 数据管理页编辑操作，算一次 图6 编辑 数据管理页新增操作，算一次

查看更多 →

支持基于安全密码学(如不经意传输、差分隐私等)的多方样本对齐和训练模型的保护。 数据使用监管 为数据参与方提供可视化的数据使用流图，提供插件化的 区块链 对接存储，实现使用过程的可审计、可追溯。 容器化部署 容器化的多方数据源计算节点、聚合计算节点的部署管理，支持云上、边缘、H CS 多种部署模式。

查看更多 →

如图6所示，选择开发场景为“大屏”，单击右侧区域的“开发”，进入到配置的AppCube大屏开发环境。 图6 进入大屏开发环境 如果使用系统默认提供开发环境，进入到默认环境的业务大屏。 如果使用配置的开发环境，进入到配置的开发地址，配置的地址不是直接进入业务大屏，参见下图进入业务大屏。 如图7所示，单击“导入项目包”。

查看更多 →

数据在云 Sdk::OpenCloudFile Sdk::Save Sdk::SelectSaveAsPath 父主题： 改造功能模块说明

查看更多 →

大模型微调需要的数据有要求吗？ AI原生应用引擎用于大模型微调的数据集任务领域为“ 自然语言处理 ”、数据集格式为“对话文本”。 文件内容要求为标准json数组，例如： [{"instruction": "aaa", "input": "aaa", "output": "aaa"},{"instruction":

查看更多 →

non-schedule]。add-labels：添加计算节点标签。delete-labels：删除计算节点标签。stop：停止节点。reboot：重启节点。start：启动节点。schedulable：设置节点可被调度。non-schedule：设置节点不可被调度 命令示例 删除计算节点标签 health edit

查看更多 →

云端建模与计算 提交体积计算作业 查看作业详情 父主题： 堆体测量

查看更多 →

计算节点扩容 随着业务数据的增加，为了提高实例业务稳定性，您可对DDM实例节点进行扩容。 使用须知 计算节点扩容期间，服务不中断，不影响业务的正常运行。 请在业务低峰时间段进行节点扩容操作。 请确保实例关联的数据节点状态正常并且没有进行其他操作。 一个DDM实例最多支持32个节点。

查看更多 →

，86400]，单位秒，当值为0时，表示时间窗口无穷大。 修改点位配置后，单击“下发配置”，将配置更新给边侧。 修改数据源配置，为了更清晰的看到点位清洗的效果，将数据源的配置进行修改，对点位MotorCurrent对应的数据源地址的值变换规则参数修改。将Min Value=100

查看更多 →

评测分数计算介绍 评分方案介绍 AB类log函数评分方案 AB类均匀权重（Average）评分方案 C类均匀权重评分（Average）方案 父主题： 评测管理

查看更多 →

计算节点API 获取用户token 可信计算节点管理 连接器管理 数据集注册管理 任务管理 通知管理 数据集管理 多方安全计算作业管理 可信联邦学习作业管理 联邦预测作业管理 作业实例管理 联邦学习作业管理

查看更多 →

Token计算器 功能介绍 为了帮助用户更好地管理和优化Token消耗，平台提供了Token计算器工具。Token计算器可以帮助用户在模型推理前评估文本的Token数量，提供费用预估，并优化数据预处理策略。 URI POST /v1/{project_id}/deployment

查看更多 →

创建HetuEngine计算实例 本章节指导用户新创建HetuEngine计算实例。计算实例创建成功后，停止集群前需手动停止计算实例；重启集群后，要使用集群中的计算实例，需要手动启动计算实例。 单个租户可以创建多个计算实例，多个计算实例负载均衡，可以提高性能及容错能力（ MRS 3

查看更多 →

批量计算 在CCE集群中部署使用Kubeflow 在CCE集群中部署使用Caffe 在CCE集群中部署使用Tensorflow 在CCE集群中部署使用Flink 在CCE集群中部署使用ClickHouse 在CCE集群中部署使用Spark

查看更多 →

与“登录密码”保持一致即可。 指定开放端口 计算节点控制台系统的网络端口。 部署配置相关参数 部署方式 当前版本支持云租户部署和边缘节点部署。 云租户部署：数据上云的用户可以选择“云租户部署”，可信计算节点部署在华为云租户的虚拟私有云VPC中，可信计算节点组件部署在基于华为云CCE服务的容器中。关于CCE集群的更多信息可参考CCE。

查看更多 →

与“登录密码”保持一致即可。 指定开放端口 计算节点控制台系统的网络端口。 部署配置相关参数 部署方式 当前版本支持云租户部署和边缘节点部署。 云租户部署：数据上云的用户可以选择“云租户部署”，可信计算节点部署在华为云租户的虚拟私有云VPC中，可信计算节点组件部署在基于华为云CCE服务的容器中。关于CCE集群的更多信息可参考CCE。

查看更多 →

多方安全计算场景 场景描述 组合架构 可验证代码示例 父主题： 使用场景

查看更多 →

作业成绩模块可以批量导出学⽣作业的，包含作业习题、正确答案、学⽣答案以及分数和教师评语，为课程归档提供⽀撑材料。 图7 批量导出作业 答题情况。教师可查看学⽣答题情况，通过上⽅图表选择不同的题⽬，下⾯显示对应该题学⽣的答题情况。需学⽣提交附件的简答题、计算题、编程题。且⽀持批量下载附件。

查看更多 →