数据工程实施流程 本文档介绍如何构建端到端数据处理流程，协助政府进行数据治理，实现政务大数据一体化管理 表1 构建一体化政务大数据平台数据处理端到端流程 序号 类 项目 描述 1 组建专班 首席数据官 首席数据官 业务专员 业务专员 数据专员 数据专员 2 数据架构规划设计 数据调研

查看更多 →

数据工程使用流程 高质量数据是推动大模型不断迭代和优化的根基，它的质量直接决定了模型的性能、泛化能力以及应用场景的适配性。只有通过系统化地准备和处理数据，才能提取出有价值的信息，从而更好地支持模型训练。因此，数据的采集、清洗、标注、评估、发布等环节，成为数据开发中不可或缺的重要步骤。

查看更多 →

主题域分组：基于业务场景对主题域进行分组。 主题域：互不重叠数据的高层面的数据分类，用于管理其下一级的业务对象。 业务对象：指企业运作和管理中不可缺少的重要人、事、物信息。 流程设计：针对流程的一个结构化的整体框架，描述了企业流程的分类、层级以及边界、范围、输入/输出关系等，反映了企业的商业模式及业务特点。 数仓

查看更多 →

删除正在运行的流程实例和活动数据（删除我的待办，但是保留我的申请记录和我参与的流程记录） 仅“状态”为“Actived”和“Suspended”的流程实例可选择。 选择此方式删除流程实例后，流程实例会在“我的流程任务 > 我的待办”中删除，仅可在“我的流程任务 > 我的申请”和“我的流程任务

查看更多 →

提供对数据进行多维筛选的能力，用户可以根据样本属性、标注信息等进行样本筛选。 提供12+标注工具，方便用户进行精细化、场景化和专业化的数据标注。 提供基于样本和标注结果进行特征分析，帮助用户整体了解数据的质量。 提升用户数据准备的效率。 提供数据版本管理能力，帮助用户提升数据管理的效率。 提供

查看更多 →

连接下的数据库、数据表和字段。 单击可以查看数据连接目录树下的数据库、数据表以及字段信息。DWS SQL、 DLI SQL、 MRS Hive SQL、MRS Spark SQL代理模式均支持查看目录树，其他数据连接均不支持。 如果您在使用数据开发前，已创建了数据连接和对应的数据库和

查看更多 →

查询指定的数据集分享流程 功能介绍 查询指定的数据集分享流程 调试 您可以在 API Explorer 中调试该接口，支持自动认证鉴权。API Explorer可以自动生成SDK代码示例，并提供SDK代码示例调试功能。 URI POST /v1/datashare/dataset/query-process

查看更多 →

简单、高效的大模型开发和部署方式。平台配备数据工程、模型开发、应用开发三大工具链，帮助开发者充分利用盘古大模型的功能。通过该平台，企业可根据需求选择合适的盘古NLP大模型、科学计算大模型等服务，便捷地构建自己的模型和应用 数据工程工具链：数据是大模型训练的核心基础。数据工程工具链

查看更多 →

大模型微调需要的数据有要求吗？ AI原生应用引擎用于大模型微调的数据集任务领域为“ 自然语言处理 ”、数据集格式为“对话文本”。 文件内容要求为标准json数组，例如： [{"instruction": "aaa", "input": "aaa", "output": "aaa"},{"instruction":

查看更多 →

模型理解人类语言的基本结构。 微调 关注专业性：微调是对预训练模型的参数进行调整，使其在特定任务中达到更高的精度和效果。微调的核心在于利用少量的特定任务数据，使模型的表现从通用性向具体任务需求过渡。 使用小规模的特定任务数据：微调通常需要小规模但高质量的标注数据，直接与目标任务相

查看更多 →

数据应用 自助分析平台 用户推荐平台 父主题： 实施步骤

查看更多 →

数据应用 使用报表对业务进行实时监控 通过日志检索进行问题定位 通过异常检测上报告警 配置虚拟机异常告警 父主题： 基于运维数仓的数据开发与应用

查看更多 →

AI原生应用引擎使用流程 AI原生应用引擎是企业专属的一站式大模型开发及应用构建平台，其核心是将自创建或平台预置的模型服务、工具、工作流及知识库等编排成具有一定智能性和自主性的Agent。本章节梳理了AI原生应用引擎使用流程，可帮助您快速了解AI原生应用引擎的核心功能。 图1 AI原生应用引擎使用流程

查看更多 →

用户Token。Token认证就是在调用API的时候将Token加到请求消息头，从而通过身份认证，获得操作API的权限， 获取Token 接口响应消息头中X-Subject-Token的值即为Token。 响应参数 状态码： 200 表3 响应Body参数 参数 参数类型 描述 app_count Integer

查看更多 →

ClickHouse应用开发流程介绍 开发流程中各阶段的说明如图1和表1所示。 图1 ClickHouse应用程序开发流程 表1 ClickHouse应用开发的流程说明 阶段 说明 参考文档 了解基本概念 在开始开发应用前，需要了解ClickHouse的基本概念。 基本概念 准备开发和运行环境

查看更多 →

创建业务流程应用 了解构建流程 组织搭建 创建应用 添加表单 流程编排 将应用上架到门户 申请模板并上架到资产中心

查看更多 →

准备开发和运行环境 Alluxio的客户端程序当前推荐使用java语言进行开发，并使用Maven工具构建工程。样例程序运行环境即MRS服务所VPC集群的节点。 Alluxio开发环境简介 根据场景开发工程 提供了Java语言的样例工程和数据查询的样例工程。 Alluxio样例程序开发思路 运行程序及查看结果

查看更多 →

发布流程引擎的流程元模板 发布流程元模板是指将流程元模板正式部署到流程运行服务，让普通用户可以访问处理该流程元模板对应的流程实例数据。在完成流程元模板编排后，您可以将相应的流程元模板进行发布操作，待流程元模板发布成功后，即可使用此流程元模板启动流程。 发布流程元模板 登录流程引擎。

查看更多 →

迁移应用中的对象数据 AstroZero对象数据迁移概述 导入导出应用中对象的元数据 导入导出应用中对象的数据 父主题： 管理AstroZero中已安装应用的资源

查看更多 →

Presto的应用程序支持使用Java进行开发。推荐使用Eclipse工具，请根据指导完成开发环境配置。 Presto应用开发环境简介 根据场景开发工程 提供了Java语言的样例工程和数据查询的样例工程。 Presto样例程序开发思路 运行程序及查看结果 指导用户将开发好的程序编译提交运行并查看结果。

查看更多 →

文件以及用于安全认证的用户文件，可从已创建好的MRS集群中获取相关内容。 用于程序调测或运行的节点，需要与MRS集群内节点网络互通，同时配置hosts 域名 信息。 准备ClickHouse应用运行环境 配置并导入样例工程 ClickHouse提供了不同场景下的样例程序，用户可获取样

查看更多 →