中软国际数据治理专业服务解决方案实践

发布文本类数据集 原始数据集和加工后的数据集不可以直接用于模型训练，需要独立创建一个“发布数据集”。 文本类数据集支持发布的格式为： 默认格式：平台默认的格式。 盘古格式：训练盘古大模型时，需要将数据集格式发布为“盘古格式”。 自定义格式：文本类数据集可以使用自定义脚本进行数据格式转换。

查看更多 →

内容审核-图像 图像内容审核，利用深度神经网络模型对图片内容进行检测，准确识别图像中的暴恐元素、涉黄内容等，帮助业务规避违规风险。 内容审核-文本 文本内容审核，采用人工智能文本检测技术有效识别涉黄、广告、辱骂、违禁品文本内容，提供定制化的文本敏感内容审核方案。 图1 文本内容审核示意图 内容审核-音频

查看更多 →

产品优势 检测准确 基于深度学习技术和大量的样本库，帮助客户快速准确进行违规内容检测，维护内容安全。 功能丰富 提供文本、图像、音频、视频等内容检测，覆盖涉黄、广告、涉暴等多种违规风险的内容检测。 稳定可靠 内容审核 服务已成功应用于各类场景，基于华为等企业客户的长期实践，经受过复杂场景考验。

查看更多 →

旗舰版机器人默认支持重量级深度学习。 专业版和高级版机器人如果需要使用重量级深度学习，需要先单击“重量级深度学习”，然后单击“联系我们”。 图2 重量级深度学习 编辑模型信息。 轻量级深度学习：选填“模型描述”。 图3 轻量级深度学习 重量级深度学习：选择量级“中量级”或“重量级”，选填“模型描述”。

查看更多 →

标注文本分类数据 项目创建完成后，将会自动跳转至新版自动学习页面，并开始运行，当数据标注节点的状态变为“等待操作”时，需要手动进行确认数据集中的数据标注情况，也可以对数据集中的数据进行标签的修改，数据的增加或删减。 图1 数据标注节点状态 双击“数据标注”节点，单击实例详情按钮，打开数据标注页面。

查看更多 →

对业务场景为简单场景的企业或政府单位进行算法原型开发或者优化服务，基于脱敏数据，训练深度学习或机器学习模型，形成相关的验证报告。简单场景工作量预计不超过17人天 300,000.00 每套 AI算法原型开发-标准版 对业务场景为普通场景的企业或政府单位进行算法原型开发或者优化服务，基于脱敏数据，训练深度学习或

查看更多 →

面自动跳转到“自动学习工作流”。 图像分类项目的工作流，将依次运行如下节点： 数据标注：对您的数据标注情况进行确认。 数据集版本发布：将已完成标注的数据进行版本发布。 数据校验：对您的数据集的数据进行校验，是否存在数据异常。 图像分类：将发布好的数据集版本进行训练，生成对应的模型。

查看更多 →

根据数据集查询标签 功能介绍 根据数据集查询标签。 URI URI格式 GET /softcomai/datalake/v1.0/datasets/{id}/datasetTag 参数说明 参数名 是否必选 参数类型 备注 id 是 String 数据集ID。 请求 请求样例 GET

查看更多 →

根据数据集查询标签 功能介绍 根据数据集查询标签。 URI URI格式 GET /softcomai/datalake/v1.0/datasets/{id}/datasetTag 参数说明 参数名 是否必选 参数类型 备注 id 是 String 数据集ID。 请求 请求样例 GET

查看更多 →

根据标签查询数据集 功能介绍 根据标签查询匹配的数据集。 URI URI格式 GET /softcomai/datalake/v1.0/datasetTags 参数说明 无。 请求 请求样例 GET https://ipaddr:port/dataset/softcomai/datalake/v1

查看更多 →

文本类数据集格式要求 ModelArts Studio大模型开发平台支持创建文本类数据集，创建时可导入多种形式的数据，具体格式要求详见表1。 表1 文本类数据集格式要求 文件内容 文件格式 文件要求 文档 txt、mobi、epub、docx、pdf 数据集最大100万个文件，单

查看更多 →

对项目的简要描述。 “数据集” 可在右侧下拉框选择已有数据集，或单击“创建数据集”前往新建数据集。 已有数据集：在“数据集”右侧的下拉框中选择，仅展示同类型的数据集供选择。 创建数据集：前往创建数据集页面创建一个新的数据集。具体操作请参考创建ModelArts数据集。 “标签列” 可自行选择您需要预测的列名。

查看更多 →

面自动跳转到“自动学习工作流”。 物体检测项目的工作流，将依次运行如下节点： 数据标注：对您的数据进行标注情况确认。 数据集版本发布：将已完成标注的数据进行版本发布。 数据校验：对您的数据集的数据进行校验，是否存在数据异常。 物体检测：将发布好的数据集版本进行训练，生成对应的模型。

查看更多 →

文本翻译 功能介绍 文本翻译是为了实现语种间的转换。对于用户输入原始语种的文本，转换为目标语种的文本。本接口不支持对文档进行翻译，文档翻译请见文档翻译任务创建。 文本翻译支持一次性提交多个任务，服务会根据资源排队处理。 文本翻译接口具体Endpoint请参见终端节点。 调用华为云

查看更多 →

文本解析 解析Nginx日志 提取字符串动态键值对 解析 CS V格式日志 加工复杂JSON数据 解析与更新JSON数据 父主题： 日志加工（邀测）

查看更多 →

rue，同时n参数只能设置为1。开启流式开关后，API会在生成文本的过程中，实时地将生成的文本发送给客户端，而不是等到生成完成后一次性将所有文本发送给客户端。 temperature 否 Float 用于控制生成文本的多样性和创造力。 取值接近0表示最低的随机性，1表示最高的随机

查看更多 →

文本上传 开发过程中，您有任何问题可以在github上提交issue，或者在华为云 对象存储服务 论坛中发帖求助。接口参考文档详细介绍了每个接口的参数和使用方法。 文本上传用于直接上传字符串。您可以通过ObsClient->putObject直接上传字符串到OBS。 本示例用于上传字符串“Hello

查看更多 →

颜色：设置阴影的颜色。 数据设置 配置完数据后，请单击“更新数据”进行数据更新。 数据源：下拉框中选择数据源表单。可选择应用中已创建的表单数据，详情请参见如何创建一个表单。 数据汇总指标：指每个类别的数据值，通常表示为一个百分比或一个具体的数值。 单击“添加指标”可添加多个数据汇总指标，最多可添加三个指标。

查看更多 →

面自动跳转到“自动学习工作流”。 声音分类项目的工作流，将依次运行如下节点： 数据标注：对您的数据进行标注情况确认。 数据集版本发布：将已完成确认的数据进行版本发布。 数据校验：对您的数据集的数据进行校验，是否存在数据异常。 声音分类：将发布好的数据集版本进行训练，生成对应的模型。

查看更多 →

文本标注数据集文件说明 OCTOPUS格式文件基本要求（文本标注） 上传的OCTOPUS格式数据集需包含以下文件（以txt格式为例）。文本文件支持的格式包含：txt、yaml、xml、csv。 . ├─ 文件夹1 ├─ text1.txt #文本文件

查看更多 →

标注文本类数据集 创建文本类数据集标注任务 审核文本类数据集标注结果 上线标注后的文本类数据集 父主题： 标注数据集

查看更多 →