中软国际数据治理专业服务解决方案实践

非结构化抽取 前提条件 已创建图谱并选择图谱规格，请参见购买 知识图谱 。 已创建并选择本体，详情请参见配置图谱本体。 已完成数据源配置，详情请参见配置数据源。 如果选择使用自己自定义模型，您需要在创建知识图谱之前，自定义用于信息抽取的模型，具体操作请见自定义信息抽取模型。 操作步骤

查看更多 →

非结构化数据创建图谱 创建图谱简介 创建信息抽取模型 使用自定义抽取模型创建图谱

查看更多 →

结构化数据 上传结构化数据 下载失败的条目 搜索结构化数据文件

查看更多 →

上传结构化数据 功能介绍 将结构化数据文件上传到 对象存储服务 OBS中进行结构化数据批处理功能。 URI POST /v1/koosearch/repos/{repo_id}/structured-data 表1 路径参数 参数 是否必选 参数类型 描述 repo_id 是 String

查看更多 →

__name__ == '__main__': # 创建一个名为"myj"的SparkSession对象 odps = create_spark_session() odps.execute_sql=execute_sql # 执行sql # sql_str="""select

查看更多 →

DSC支持识别的非结构化文件类型？ 数据安全中心（DSC）支持识别的非结构化文件类型如表1、表2和表3。 表1 文本文档代码类 序号 文件类型 序号 文件类型 1 Access数据库文件 74 Pdf文档 2 Arff文件 75 Perl源代码 3 Asp文件 76 Pgp文件 4

查看更多 →

，在此界面获取"知识库ID"字段的值，表示该知识库在向量数据库中存储的ID，具有唯一性 最小长度：1 最大长度：64 表2 Query参数 参数 是否必选 参数类型 描述 file_name 是 String 结构化数据的文件名 最小长度：1 最大长度：1024 file_status

查看更多 →

特定结构化数据函数 本文介绍特定结构化数据函数的语法规则，包括参数解释、函数示例等。 类型 函数 说明 JSON json_select 根据JMES语法提取或计算JSON表达式中特定的值。 json_parse 将值解析为JSON对象。 XML xml_to_json 将xml数据转成JSON数据。

查看更多 →

结构化抽取 信息抽取函数 交互界面配置 代码编辑 父主题： 配置信息抽取

查看更多 →

“图谱质检”对话框，单击右侧按钮可以放大对话框。 图19 图谱质检 在“图谱质检”对话框，打开“图谱质检”开关，单击“保存”。 图谱质检为非必选流程，关闭和开启状态均不影响图谱构建。开启质检任务后，后台会对当前版本的知识图谱的知识质量和流水线构建进行评估，并生成质检报告，详见查看质检报告。

查看更多 →

非可信数据库部署 下载最新版本MySQL Community Server数据库zip文件，以8.0.26版本举例： 解压下载的mysql-8.0.26-winx64.zip文件至E盘： 新建E:\mysql-8.0.26-winx64\my.ini文件，文件内容如下： [client]

查看更多 →

查询结构化配置 功能介绍 该接口用于查询指定日志流下的结构化配置内容。 调用方法 请参见如何调用API。 URI GET /v2/{project_id}/lts/struct/template 表1 路径参数 参数 是否必选 参数类型 描述 project_id 是 String

查看更多 →

日志结构化概述 日志数据可分为结构化数据和非结构化数据。结构化数据指能够用数字或统一的数据模型加以描述的数据，具有严格的长度和格式。非结构化数据指不便于用数据库二维逻辑表来表现的数据，数据结构不规则或不完整，没有预定义的数据模型。 日志结构化是以日志流为单位，通过不同的日志提取方

查看更多 →

，日志组ID、日志流ID 表2 Query参数 参数 是否必选 参数类型 描述 id 否 String 待查询模板id,非必填，不传时返回项目下所有自定义结构化模板 请求参数 表3 请求Header参数 参数 是否必选 参数类型 描述 X-Auth-Token 是 String

查看更多 →

删除结构化配置 功能介绍 该接口用于删除指定日志流下的结构化配置。 调用方法 请参见如何调用API。 URI DELETE /v2/{project_id}/lts/struct/template 表1 路径参数 参数 是否必选 参数类型 描述 project_id 是 String

查看更多 →

云端结构化配置 创建结构化配置（推荐） 修改结构化配置（推荐） 删除结构化配置 查询结构化配置 查询结构化模板简略列表 查询结构化模板 创建结构化配置（不推荐） 修改结构化配置（不推荐） 父主题： API说明

查看更多 →

日志结构化概述 日志数据可分为结构化数据和非结构化数据。结构化数据指能够用数字或统一的数据模型加以描述的数据，具有严格的长度和格式。非结构化数据指不便于用数据库二维逻辑表来表现的数据，数据结构不规则或不完整，没有预定义的数据模型。 日志结构化是以日志流为单位，通过不同的日志提取方

查看更多 →

处理非初级SQL数据类型 本节介绍如何处理ecpg应用中非标量以及用户定义的SQL级别的数据类型。注意此处和使用非初级类型的宿主变量章节中介绍的对于非初级类型的宿主变量的处理不同。 数组 ecpg不直接支持多维SQL级别数组。一维SQL数组可以被映射到C语言数组类型的宿主变量，反

查看更多 →

非HDFS数据残留导致数据分布不均衡 问题背景与现象 数据出现不均衡，某磁盘过满而其他磁盘未写满。 HDFS DataNode数据存储目录配置为“/export/data1/dfs--/export/data12/dfs”，看到的现象是大量数据都是存储到了“/export/data1/dfs”，其他盘的数据比较均衡。

查看更多 →

插入数据违反非空约束 原因分析 任务执行异常失败，查看日志有如下信息： 解决方案 可参考以下内容进行问题排查解决： 源表中此字段可为null，但创建目标表时设置此字段为非null属性，需修改字段属性保持一致。 用户配置任务时多了一个表映射，将一个相似名称的源表配置采集数据到此目标

查看更多 →

处理非初级SQL数据类型 本节介绍如何处理ecpg应用中非标量以及用户定义的SQL级别的数据类型。注意此处和使用非初级类型的宿主变量章节中介绍的对于非初级类型的宿主变量的处理不同。 数组 ecpg不直接支持多维SQL级别数组。一维SQL数组可以被映射到C语言数组类型的宿主变量，反

查看更多 →