内容数据量化 SOW中搬迁资源量以及工作内容描述补充说明内容需数据量化。 父主题： SOW（项目工作说明书）注意事项

查看更多 →

迁移完成后，为什么已迁移数据量小于总数据量？ 问题描述 迁移完成后，已迁移数据量小于总数据量。 问题分析 源端总数据量是通过迁移Agent执行df-Th命令搜集得到的，已迁移数据量是通过记录实际已迁移文件的大小累计得到的。 出现已迁移数据量小于总数据量，可能是因为以下几种情况：

查看更多 →

器 > 资源监视器”查看。 Linux推荐使用sar工具监控，也可以使用/proc/net/dev命令监控网卡的速度。 例如：迁移源端 服务器 数据量100GB，进度为70%，查看到迁移速度是100Mbit/s（速度转换成Mbit/s），则剩余迁移时间为： 迁移时间T = 100GB

查看更多 →

Kafka集群节点内多磁盘数据量占用高 用户问题 Kafka流式集群节点内有多块磁盘的使用量很高。当达到100%时就会造成kafka不可用如何处理？ 问题现象 客户购买的 MRS Kafka流式集群节点内有多块磁盘，由于分区不合理及业务原因导致某几个磁盘的使用量很高。当达到100%时就会造成kafka不可用。

查看更多 →

数据量很大，如何进行快照备份？ 如果快照数据量极大，快照备份要超过一天时，可参考如下方法进行优化。 快照备份的时候指定索引，比如先分批，默认是*，将会备份所有的索引。 使用自定义快照仓库。 创建自定义仓库。 除了使用 云搜索服务 提供的repo_auto之外，客户也可以自己创建一个仓库，接口见如下：

查看更多 →

Delta 数据量较大时，如何优化校验任务？ 本文介绍当源端Delta数据量较大（如超过10000张表）时，如何使用MgC大数据校验功能进行一致性校验的方法。 操作步骤 参考创建元数据连接，创建第一个Delta元数据连接。 使用步骤1.创建的第一个元数据连接，创建元数据同步任务，将源端的元数据同步至迁移中心。

查看更多 →

Broker Load导入任务的数据量超过阈值 现象描述 使用Broker Load导入数据时报错： Scan bytes per broker scanner exceed limit:xxx 原因分析 BE处理的单个导入任务的最大数据量为3GB，超过该值的待导入文件需要通过调整Broker

查看更多 →

数据量足够，为什么盘古大模型微调效果仍然不好 这种情况可能是由于以下原因导致的，建议您排查： 数据质量：请检查训练数据的质量，若训练样本和目标任务不一致或者分布差异较大、样本中存在异常数据、样本的多样性较差，都将影响模型训练的效果，建议提升您的数据质量。 父主题： 大模型微调训练类问题

查看更多 →

CDL复制槽Slot积压数据量超过阈值 告警解释 PostgreSQL或Opengauss（适用于MRS 3.3.0及之后版本）积压过多的WAL日志，可能导致PostgreSQL或Opengauss磁盘空间耗尽。系统每5分钟检查CDL任务配置的复制槽Slot积压数据量是否超过阈值，如果

查看更多 →

执行大数据量的shuffle过程时Executor注册shuffle service失败 问题 执行超过50T数据的shuffle过程时，出现部分Executor注册shuffle service超时然后丢失从而导致任务失败的问题。错误日志如下所示： 2016-10-19 01:33:34

查看更多 →

10亿级数据量场景的解决方案有哪些？ 问： 10亿级数据量场景的解决方案有哪些？ 答： 有数据更新、联机事务处理OLTP、复杂分析的场景，建议使用云数据库 GaussDB (for MySQL)。 MRS的Impala + Kudu也能满足该场景，Impala + Kudu可以在j

查看更多 →

数据库：Oracle11 其他情况说明 用户量少，数据量大：按照对应用户量的应用服务器配置提升一档，数据库服务器以数据量为准； 更多用户，更大数据量：以全国性机构推荐配置为基准，每多3000用户增加一台应用服务器，每多6000用户再增加一台数据库服务器；更大数据量建议咨询大数据产品部； 客户端配置

查看更多 →

在独立服务器中。在搭建Filebeat+ELK系统前，需要对Filebeat和ELK所需的服务器资源进行评估，以准备相关服务器资源。 API调用日志文件最大为200MB，达到上限后会自动生成新的日志文件，以每天产生5个或10个新日志文件为例，Filebeat和ELK对服务器的资源需求如表1所示。

查看更多 →

数据迁移前后数据量不一致是什么问题？ 问题描述 使用 CDM 进行数据迁移，迁移完成后，目标库数据要比原始库多，有的多十几条，有的多几千条。 故障分析 根据故障信息分析，考虑是作业配置限制，检查作业配置，发现目的端配置为导入开始前“不清除”，不清除可能存在多次操作，部分数据重复。 解决方案

查看更多 →

执行大数据量的shuffle过程时Executor注册shuffle service失败 问题 执行超过50T数据的shuffle过程时，出现部分Executor注册shuffle service超时然后丢失从而导致任务失败的问题。错误日志如下所示： 2016-10-19 01:33:34

查看更多 →

无监督领域知识数据量无法支持增量预训练，如何进行模型学习 一般来说，建议采用增量预训练的方式让模型学习领域知识，但预训练对数据量的要求较大，如果您的无监督文档量级过小，达不到预训练要求，您可以通过一些手段将其转换为有监督数据，再将转换后的领域知识与目标任务数据混合，使用微调的方式让模型学习。

查看更多 →

数据盘可以在购买云服务器的时候购买，由系统自动挂载给云服务器。也可以在购买了云服务器之后，单独新购买云硬盘并挂载给云服务器。数据盘的最大容量为32768 GiB。 当您的业务数据量较小时，购买云服务器时自动购买的系统盘如果能满足要求，仅购买系统盘即可。当您的业务数据量较大时，建议您根据需求购买数据盘。

查看更多 →

已使用的容量） 备份保留时长(天) ：30天 磁盘每日变化数据量(GB)：10G 则该公司购买的云服务器备份存储库大小可以通过公式进行估算： 存储库容量=(磁盘容量(GB) +备份保留时长(天)*磁盘每日变化数据量(GB))*120%=(800+30*10)*120%=1320GB

查看更多 →

从 DLI 导入数据到OBS，数据量不一致怎么办？ 问题现象 使用DLI插入数据到OBS临时表文件，数据量有差异。 根因分析 出现该问题可能原因如下： 作业执行过程中，读取数据量错误。 验证数据量的方式不正确。 通常在执行插入数据操作后，如需确认插入数据量是否正确，建议通过查询语句进行查询。

查看更多 →

磁盘问题 迁移过程中目的端为什么多出来一个40G的磁盘？ 目的端系统盘无法挂载该如何处理？ 迁移Windows服务器时如何调整分区、磁盘？ 如何压缩Windows系统源端服务器的磁盘分区？ Windows系统如何排除指定磁盘分区进行迁移 配置目的端时，提示“您选择目的端的磁盘数量比源

查看更多 →

云服务器备份是如何计费的？ 计费项包括云服务器备份功能、数据库服务器备份功能、备份存储和备份跨区域复制。 云服务器备份功能：备份未部署数据库的云服务器时购买，提供崩溃一致性备份，保证云服务器下多个磁盘的数据在同一时间点产生备份。 数据库服务器备份功能：备份部署了数据库的云服务器时

查看更多 →