中软国际数据治理专业服务解决方案实践

参数说明：系统中数据库监控快照数据的保留天数。当数据库运行过程期间所生成的快照量数超过保留天数内允许生成的快照数量的最大值时，系统将每隔wdr_snapshot_interval时间间隔，清理snapshot_id最小的快照数据。 该参数属于SIGHUP类型参数，请参考表1中对应设置方法进行设置。 取值范围：整型，1～8。

查看更多 →

配置信息抽取 配置信息抽取简介 结构化抽取 非结构化抽取

查看更多 →

wdr_snapshot_query_timeout 参数说明：系统执行数据库监控快照操作时，设置快照操作相关的sql语句的执行超时时间。如果语句超过设置的时间没有执行完并返回结果，则本次快照操作失败。 该参数属于SIGHUP类型参数，请参考表1中对应设置方法进行设置，0代表该参数不生效。 取值范围：

查看更多 →

wdr_snapshot_query_timeout 参数说明：系统执行数据库监控快照操作时，设置快照操作相关的sql语句的执行超时时间。如果语句超过设置的时间没有执行完并返回结果，则本次快照操作失败。 该参数属于SIGHUP类型参数，请参考表1中对应设置方法进行设置。 取值范围：整型，100～2147483647‬（秒）。

查看更多 →

附录 配置抽取文件模板 性能数据 CHR/MR数据 配置数据 父主题： 数据解析

查看更多 →

息，完成信息抽取配置。 所支持的信息抽取函数请见信息抽取函数。 代码编辑 非结构化抽取 基础数据格式为txt文本的自然语言短句 通过选择合适的算法，完成信息抽取配置。 可选择已有的预置模型模板，也可选择您自定义的模型。 非结构化抽取 在通过结构化抽取方式进行信息抽取时，交互界面配置与代码编辑配置可以相互切换。

查看更多 →

wdr_snapshot_retention_days 参数说明：系统中数据库监控快照数据的保留天数。当数据库运行过程期间所生成的快照量数超过保留天数内允许生成的快照数量的最大值时，系统将每隔wdr_snapshot_interval时间间隔，清理snapshot_id最小的快照数据。 该参数属于SIGHUP类型参数，请参考表1中对应设置方法进行设置。

查看更多 →

目标表的表结构和OBS上将要导入的数据源文件的字段要保持一一对应，即字段个数、字段类型要一致。并且目标表和创建的外表的表结构也要保持一致，字段名称可以不一样。 （可选）如果导入表存在索引，在数据导入过程中，将增量更新索引信息，影响数据导入性能。建议在执行数据导入前，先删除相关表的索引。在数据导入完成后，再重新创建索引。

查看更多 →

需要确保每一个CN和DN所在 服务器 到GDS服务器的IP和端口是互通的。 操作步骤 在 GaussDB 中创建目标表，用于存储导入的数据。建表语句请参见CREATE TABLE。 （可选）若导入表存在索引，在数据导入过程中，将增量更新索引信息，影响数据导入性能。建议在执行数据导入前，先删除相关表的索引。在数据导入完成后，再重新创建索引。

查看更多 →

单击“确定”，完成负载均衡配置。 单击组件配置页面上方的“配置并部署组件”，在右侧弹框中单击“确定”，待部署执行完成后，配置生效。 查看应用 在左侧导航栏，选择组件列表，返回组件列表页面。 单击“test-dotnet”组件“访问地址”列的公网访问地址。 您还可以访问应用的静态页面。

查看更多 →

执行导出数据 前提条件 需要确保每一个CN和DN所在服务器到GDS服务器的IP和端口是互通的。 导出操作语法 执行数据导出语法： 1 INSERT INTO [foreign table 表名] SELECT * FROM [源表名]; 编写批处理任务脚本，实现并发批量导出数

查看更多 →

在资源许可的情况下，多台GDS服务器并发导入会很大程度上提高数据导入效率。相关案例请参见多数据服务器并行导入。 对于高并发的GDS导入场景，为了保持GDS和DN间的数据连接稳定，可以将GDS服务器环境和DN所在环境的TCP Keepalive检测时间增长（推荐增长至5分钟）。调整集群环境的TCP Keepalive参数会影响故障检测的响应时间。

查看更多 →

执行导出数据 前提条件 需要确保每一个CN和DN所在服务器到GDS服务器的IP和端口是互通的。 操作步骤 执行数据导出。 1 INSERT INTO [foreign table 表名] SELECT * FROM [源表名]; 编写批处理任务脚本，实现并发批量导出数据。并发

查看更多 →

通用实体抽取工作流 工作流介绍 准备数据 选择数据 训练模型 评估模型 部署服务 父主题： 自然语言处理 套件

查看更多 →

字段抽取函数后，KG服务会根据所配置的字段抽取函数进行信息抽取，即从原始数据中抽取结构化的信息。更多详情请见配置信息抽取。 字段抽取函数说明 KG服务支持的信息抽取函数如表1所示。其中，“字段”表示基础数据中的字段名，在抽取函数中引用字段时，使用格式为“${字段}”，例如抽取基础

查看更多 →

RTO是增量同步期间DRS实例上的事务传输到灾备目标库且回放成功的时间差，RTO值较大说明DRS上需要回放到目标实例的事务有积压。一般有以下几种原因： 灾备任务初始化完成不久，启动灾备任务到当前时间累积的增量数据需要回放。 业务数据库对无主键表进行了批量操作，DRS灾备实例正在同步变更数据较大的无主键表

查看更多 →

提高Kafka消息处理效率 消息发送和消费的可靠性必须由分布式消息服务Kafka版和生产者以及消费者协同工作才能保证。同时开发者需要尽量合理使用分布式消息服务Kafka版的Topic，以提高消息发送和消息消费的效率与准确性。 对使用分布式消息服务Kafka版的生产者和消费者有如下的使用建议：

查看更多 →

的数据字段，完成信息抽取配置。 所支持的信息抽取函数请见信息抽取函数。 交互界面配置 代码编辑：将交互界面中的配置转换为json格式配置，通过编辑json配置信息，完成信息抽取配置。 所支持的信息抽取函数请见信息抽取函数。 代码编辑 非结构化抽取 基础数据格式为txt文本的自然语言短句

查看更多 →

大量数据文件，训练过程中读取数据效率低？ 当数据集存在较多数据文件（即海量小文件），数据存储在OBS中，训练过程需反复从OBS中读取文件，导致训练过程一直在等待文件读取，效率低。 解决方法 建议将海量小文件，在本地压缩打包。例如打包成.zip格式。 将此压缩后的文件上传至OBS。

查看更多 →

些作业可能出现未严格按作业“抽取并发数”参数分片的情况。 CDM 依次将Task提交给运行池运行。根据集群配置管理中的“最大抽取并发数”参数，超出规格的Task排队等待运行。 如何调整抽取并发数 集群最大抽取并发数的设置与CDM集群规格有关，并发数上限建议配置为vCPU核数*2，如表1所示。

查看更多 →

开启HTTP监听器的HTTP/2功能 登录管理控制台。 在管理控制台左上角单击图标，选择区域和项目。 单击页面左上角的，选择“网络 > 弹性负载均衡”。 在“负载均衡器”界面，单击需要修改HTTP/2功能的负载均衡器名称。 在“监听器”页签，单击需要修改HTTP/2功能开关的监听器名称。

查看更多 →