中软国际数据治理专业服务解决方案实践

Enclave最低内存规格为128M，并且不能小于Enclave镜像文件（Enclave Image File，简称EIF）文件大小的4倍。 当在配置文件中，为QingTian Enclave配置2M大页的内存管理方式时，QingTian Enclave启动支持的最大内存为512M。 当在配置文件中，为QingTian

查看更多 →

大模型微调需要的数据有要求吗？ AI原生应用引擎用于大模型微调的数据集任务领域为“ 自然语言处理 ”、数据集格式为“对话文本”。 文件内容要求为标准json数组，例如： [{"instruction": "aaa", "input": "aaa", "output": "aaa"},{"instruction":

查看更多 →

准备盘古大模型训练数据集 训练数据集创建流程 模型训练所需数据量与数据格式要求 创建一个新的数据集 检测数据集质量 清洗数据集（可选） 发布数据集 创建一个训练数据集

查看更多 →

在系统运行过程中，不可避免地会产生碎片化内存，使得隔离服务时无法获取连续内存大页。 执行systemctl status qt-enclave-env命令，查看错误日志内是否包含allocating hugepages error。 如果包含该错误日志，则说明此时系统内所提供的可用空闲连续大页资源少于您所

查看更多 →

Redis执行大Key分析后内存使用率降低的原因 Redis执行大Key分析，只会查询占用空间过大的Key，并不会删除Key。如果Redis执行大Key分析后内存使用率降低，可能是因为原Redis中存在较多过期Key，因为过期Key的惰性删除机制，Key过期后如果未被访问和识别到

查看更多 →

运营大屏 所有可进行模糊查询的可视化应用都支持“%”和“_”通配查询，若需要指定查询，请加上“\”进行转义。 操作步骤 单击主菜单的“可视化”，默认进入“运营大屏”页面。 大屏详细说明可参见表1。 选择进入需要查看的大屏。 单击“导出”按钮可将大屏的数据导出至本地查看。 表1 可视化运营大屏

查看更多 →

鲲鹏内存优化型 鲲鹏内存优化型实例类型总览 鲲鹏内存优化型 弹性云服务器 搭载鲲鹏920处理器及25GE智能高速网卡，提供最大480GiB基于DDR4的内存实例和高性能网络，擅长处理大型内存数据集和高网络场景。 该类型弹性 云服务器 默认未开启超线程，每个vCPU对应一个底层物理内核。 在售：kM2、kM1

查看更多 →

内存版样例 点操作 边操作 元数据操作 索引操作 查询语言 路径 图统计 图操作 子图操作 Job管理 自定义操作 Filtered-query 父主题： Python SDK样例参考

查看更多 →

10^11个shuffle文件）。如果磁盘文件数量特别巨大，对文件读写的性能会带来比较大的影响，此外由于同时打开的文件句柄数量多，序列化以及压缩等操作需要占用非常大的临时内存空间，对内存的使用和GC带来很大的压力，从而容易造成Executor无法响应Driver。 因此，建议使用Sort shuffle，而不使用Hash

查看更多 →

10^11个shuffle文件）。如果磁盘文件数量特别巨大，对文件读写的性能会带来比较大的影响，此外由于同时打开的文件句柄数量多，序列化以及压缩等操作需要占用非常大的临时内存空间，对内存的使用和GC带来很大的压力，从而容易造成Executor无法响应Driver。 因此，建议使用Sort shuffle，而不使用Hash

查看更多 →

需要注意的是：qt-enclave-env服务预留大页内存是否成功受父虚拟机本身内存碎片化影响，系统长时间运行或者反复重启qt-enclave-env可能导致无法预留出足够的大页内存。推荐的使用方式是在系统刚启动时，启动一次qt-enclave-env预留足够的内存即可。 父主题： QingTian

查看更多 →

监控数据出现实例已使用内存略大于实例可使用内存是什么原因？ D CS 单机和主备实例已使用内存为redis-server进程统计的已使用内存。集群是基于分片机制实现的，集群的已使用内存为各个分片redis-server的已使用内存的总和。 由于开源redis-server内部机制的原

查看更多 →

系统中使用多个动态内存池时，需对各内存池进行管理和使用情况统计。系统内存机制中通过链表实现对多个内存池的管理。内存池需回收时可调用对应接口进行去初始化。通过多内存池机制，可以获取系统各个内存池的信息和使用情况，也可以检测内存池空间分配交叉情况，当系统两个内存池空间交叉时，第二个内存池会初始化失败，并给出空间交叉的提示信息。通过make m

查看更多 →

配置动态内存 概述 默认情况下，一个函数唯一绑定了一个资源规格。开启动态内存可以让您在处理指定请求时，设置本次处理函数实例使用的资源规格，如果您不指定，函数将使用默认配置的资源规格。 应用场景 以使用函数做视频转码为例：视频文件大小从MB到GB，不同编码格式和分辨率对转码需要的计

查看更多 →

数据库启动缓慢。 解决方案 建议业务侧优化SQL，或适当调大work_mem参数值（会增加内存占用），减少临时文件生成。 场景二 场景描述 使用RDS for PostgreSQL数据库时，业务创建了大量的表。某一时间连接数与业务量激增，数据库进程内存耗尽发生OOM，从而导致数据

查看更多 →

#该文本文件的所有标注信息 ├─ 文件夹2 ├─ text2.txt #文本文件 ├─ text2.json #该文本文件的所有标注信息 标注数据.json文件说明 数据集中必含“.json”文件，用于集合该文本文件的所有标注

查看更多 →

示例：通过本地文件导入导出数据 在使用JAVA语言基于 GaussDB 进行二次开发时，可以使用CopyManager接口，通过流方式，将数据库中的数据导出到本地文件或者将本地文件导入数据库中，文件格式支持CSV、TEXT等格式。 样例程序如下，执行示例前，需要加载驱动，驱动的获取和

查看更多 →

示例：通过本地文件导入导出数据 在使用JAVA语言基于GaussDB进行二次开发时，可以使用CopyManager接口，通过流方式，将数据库中的数据导出到本地文件或者将本地文件导入数据库中，文件支持CSV、TEXT等格式。 示例如下，执行时需要加载GaussDB JDBC驱动，驱

查看更多 →

文件系统之间迁移数据 方案概述 用户可以将SFS容量型文件系统中的数据迁移至SFS Turbo文件系统中，也可以将SFS Turbo文件系统中的数据迁移至SFS容量型文件系统中，进行云上业务拓展。 此方案通过创建一台Linux操作系统的云 服务器 ，来连接SFS容量型文件系统和SFS

查看更多 →

导出表单数据文件 当需要导出表单填报数据时，支持根据筛选条件导出数据或者导出全部数据。 设置筛选条件导出部分数据 参考登录零代码工作台中操作，登录AstroZero零代码工作台。 在全部应用中，单击对应的应用，进入应用开发页面。 在应用开发页面，选择左侧某一表单页面。 参考图1设

查看更多 →

填写数据源名称，方便您快速识别和查找。 描述 填写数据源的描述信息。 扩展ABM集群 选择对应的扩展ABM集群实例来采集该数据源的模型数据。 数据湖分层 选择对应的数据湖分层：业务数据层/操作数据层/明细数据层/汇总数据层/应用数据层/贴源数据层。 上传文件 单击“上传文件”，上传本地文件配置文件。

查看更多 →