中软国际数据治理专业服务解决方案实践

处理非初级SQL数据类型 本节介绍如何处理ecpg应用中非标量以及用户定义的SQL级别的数据类型。注意此处和使用非初级类型的宿主变量章节中介绍的对于非初级类型的宿主变量的处理不同。 数组 ecpg不直接支持多维SQL级别数组。一维SQL数组可以被映射到C语言数组类型的宿主变量，反

查看更多 →

处理非初级SQL数据类型 本节介绍如何处理ecpg应用中非标量以及用户定义的SQL级别的数据类型。注意此处和使用非初级类型的宿主变量章节中介绍的对于非初级类型的宿主变量的处理不同。 数组 ecpg不直接支持多维SQL级别数组。一维SQL数组可以被映射到C语言数组类型的宿主变量，反

查看更多 →

最小长度：32 最大长度：32 表2 Query参数 参数 是否必选 参数类型 描述 id 否 String 待查询模板id,非必填，不传时返回项目下所有自定义结构化模板 最小长度：36 最大长度：36 请求参数 表3 请求Header参数 参数 是否必选 参数类型 描述 X-Auth-Token

查看更多 →

删除结构化配置 功能介绍 该接口用于删除指定日志流下的结构化配置。 调用方法 请参见如何调用API。 URI DELETE /v2/{project_id}/lts/struct/template 表1 路径参数 参数 是否必选 参数类型 描述 project_id 是 String

查看更多 →

云端结构化配置 创建结构化配置（推荐） 修改结构化配置（推荐） 删除结构化配置 查询结构化配置 查询结构化模板简略列表 查询结构化模板 创建结构化配置（不推荐） 修改结构化配置（不推荐） 父主题： API说明

查看更多 →

云端结构化解析 日志结构化概述 设置日志云端结构化解析 设置云端结构化模板 设置云端结构化字段 设置云端结构化自定义日志时间 父主题： 日志搜索与分析（管道符方式-邀测）

查看更多 →

什么是字段抽取函数 基本概念 信息抽取是从基础数据中抽取待创建图谱的实体、属性信息以及实体间的相互关系。目的是从原始数据（包括结构化数据或非结构化数据）中抽取结构化的信息。 在通过普通抽取方式进行信息抽取时，即用交互界面配置或用格式化编辑进行信息抽取时，需要配置字段抽取函数。配置

查看更多 →

插入数据违反非空约束 原因分析 任务执行异常失败，查看日志有如下信息： 解决方案 可参考以下内容进行问题排查解决： 源表中此字段可为null，但创建目标表时设置此字段为非null属性，需修改字段属性保持一致。 用户配置任务时多了一个表映射，将一个相似名称的源表配置采集数据到此目标

查看更多 →

totalFileNumRawData：原始数据总文件数。 double totalSizeRawData：非结构化数据总大小。 String rawDataStatistics：原始数据统计。 int totalFileNumStruData：结构化数据总文件数。 double tota

查看更多 →

如何用ModelArts训练基于结构化数据的模型？ 针对一般用户，ModelArts提供自动学习的预测分析场景来完成结构化数据的模型训练。 针对高阶用户，ModelArts在开发环境提供创建Notebook进行代码开发的功能，在训练作业提供创建大数据量训练任务的功能；用户在开发、训

查看更多 →

创建结构化配置（推荐） 功能介绍 该接口通过结构化模板创建结构化配置，便于参数提取且简化参数结构，推荐您使用。 单个用户每秒仅能调用1次该接口。 调用方法 请参见如何调用API。 URI POST /v3/{project_id}/lts/struct/template 表1 路径参数

查看更多 →

查询结构化日志（新版） 功能介绍 该接口用于查询指定日志流下的结构化日志内容（新版）。 新版查询功能支持的局点信息请参考用户指南-日志可视化里的可视化章节。数据聚合结果不超过100亿条。仅支持分析最近30天内的数据，30天以上的数据不支持SQL分析。如您有更大的使用需求，请提工单申请。

查看更多 →

数据模型作为示例日志。 选择模板后“模板详情”中会自动显示对应的日志解析结果。单击“保存”完成结构化配置。 结构化配置时，如果使用系统模板，则系统模板中的时间为自定义日志时间。支持通过模板名称搜索模板，方便用户快速查询模板信息。 string类型的字段不支持使用运算符（>=<）或

查看更多 →

数据模型作为示例日志。 选择模板后“模板详情”中会自动显示对应的日志解析结果。单击“保存”完成结构化配置。 结构化配置时，如果使用系统模板，则系统模板中的时间为自定义日志时间。支持通过模板名称搜索模板，方便用户快速查询模板信息。 string类型的字段不支持使用运算符（>=<）或

查看更多 →

加工：用户可使用该应用预加工Excel文件。 文档远程下载 该类应用允许用户下载SFTP、FTP、OBS等非结构化数据。 下载：用户下载SFTP、FTP、OBS等非结构化数据。 图片预览 该类应用允许用户预览图片文件。 查看：用户可以使用该应用预览查看图片文件。 父主题： 空间管理员指南

查看更多 →

totalFileNumRawData：原始数据总文件数。 double totalSizeRawData：非结构化数据总大小。 String rawDataStatistics：原始数据统计。 int totalFileNumStruData：结构化数据总文件数。 double tota

查看更多 →

数据 非结构化集成 图17 非结构化集成 新建：操作后跳转到非结构化集成新建任务页面 导出：勾选列表订单批量导出，不勾选默认为当前页面所有订单 刷新：刷新页面订单的最新数据 搜索：支持任务ID，任务名称或源表名称条件搜索，模糊搜索和精确搜索。 父主题： 数据集成平台操作手册

查看更多 →

挂载已有数据的非共享磁盘 操作场景 本章节指导用户挂载已有数据的非共享磁盘（数据盘），非共享磁盘只可以挂载至1台 云服务器 。 您可以在磁盘列表中查看磁盘信息，磁盘信息符合以下条件，支持挂载至云 服务器 用作数据盘。 共享盘：不共享 磁盘属性：启动盘或者数据盘 磁盘状态：可用 卸载后的系

查看更多 →

修改结构化配置（推荐） 功能介绍 该接口通过结构化模板修改结构化配置 调用方法 请参见如何调用API。 URI PUT /v3/{project_id}/lts/struct/template 表1 路径参数 参数 是否必选 参数类型 描述 project_id 是 String

查看更多 →

物理实体支持哪些数据源？ 逻辑实体分为两类，结构化实体（实体类型为表）和非结构化实体（实体类型为图片、视频、音频、文本等）。 其中，结构化实体支持ES、DWS和OBS三种数据源；非结构化实体支持OBS数据源。 如果用户无HIVE和HDFS数据源，则该数据源不开放。 父主题： 数据建模

查看更多 →

在流水线构建页面，单击“信息抽取”，页面下方弹出“信息抽取”对话框，单击右侧按钮可以放大对话框。 填写信息抽取配置信息，如图13所示。 “抽取方式”：默认为“非结构化抽取”。 “抽取模型”：选择创建信息抽取模型用户自定义的模型“Person_Film_Model”。 图13 配置信息抽取 填写完信息后，单击“保存”。

查看更多 →