数据工程常见报错与解决方案
数据工程常见报错及解决方案请详见表1。
功能模块 | 常见报错 | 解决方案 |
|---|---|---|
数据获取 | 数据解析错误，详情请查看日志。 | 进入导入任务详情，切换tab页到日志管理，查看运行日志： 1.File format mismatch, require [XXX] 请检查创建数据集时使用的数据，与平台要求的文件内容格式是否一致。 2. Verification failed. Please check the content format is consistent with the template requirements. Line number: [XXX]. 请检查创建数据集时使用的数据，与平台要求的文件内容格式是否一致。 3.There is no jsonl file in the directory. 缺少JSONL文件。 4.invalid target column: [XXX]. 预测数据集存在无效的目标行。 5.The file [XXX] size exceeds the maximum limit of [XXX] MB. 文件大小超过上限。 |
服务内部异常，请联系技术人员。 | 进入导入任务详情，切换tab页到日志管理，查看运行日志： 1.Internal service error. The error message is: [Corrupted TAR archive.]。 tar包格式错误，请检查tar包格式是否正确。 2.Parse token failed. 解析用户token失败，检查用户信息。 | |
参数配置错误。 | 进入导入任务详情，切换tab页到日志管理，查看运行日志： Illegal argument [%s].检查参数是否正确。 | |
依赖服务(Gallery)错误。 | 进入导入任务详情，切换tab页到日志管理，查看运行日志： 1.Request Gallery failed. Gallery response: [XXX]. 请确认Gallery服务是否正常。 | |
依赖服务(MRS)错误。 | 进入导入任务详情，切换tab页到日志管理，查看运行日志： 1.Call mrs api failed: [XXX].请确认MRS服务是否正常。 2.Mrs job is failed, job id: [XXX].请确认MRS服务是否正常。 3.The user does not order mrs service periodic.请确认是否订购MRS服务。 | |
依赖服务(OBS)错误。 | 进入导入任务详情，切换tab页到日志管理，查看运行日志： The user has not subscribed to OBS-related services.请确认是否订购OBS服务。 | |
数据加工 | 预置算子 [xxx] 运行失败 | 进入加工任务详情，切换到"日志管理"查看运行日志，确认是否报错信息中对应的预置算子所需运行参数填写正确。 |
自定义算子 [xxx] 运行失败 | 进入加工任务详情，切换到"日志管理"查看运行日志，确认是否报错信息中对应的自定义算子所需运行参数填写正确或算子本身是否存在异常。 | |
数据集生成失败，请检查数据管理状态并查看OBS资源是否充足 | 请检查OBS托管单元订单状态是否正常且资源充足。 | |
生成的数据集不能全部为空 | 请检查是否所有的数据均被过滤。 | |
数据合成 | 模型未配置。 | 重新部署模型。 |
依赖服务【MA】错误，请确认服务【MA】是否正常。 | 请确认MA服务是否正常。 | |
执行合成任务失败，详情请查看运行日志。 | 请查看运行日志。 | |
任务不存在。 | 重新创建合成任务。 | |
服务内部异常，请联系技术人员。 | 请联系技术人员。 | |
数据集生成失败，请检查数据管理状态并查看OBS资源是否充足。 | 请检查数据管理状态并查看OBS资源是否充足。 | |
模型调用异常，请检查模型配置，详情请查看日志。 | 查看运行日志，检查模型连通性以及流控等问题。 | |
模型返回内容JSON解析失败，请调整prompt或更换模型重试。 | 1）模型内容审核导致无法返回JSON格式内容，关闭模型内容审核，或更换模型。 2）模型无法理解指令信息，未遵循指令返回内容，调整指令或更换模型。 | |
所有数据都已被过滤，请检查过滤条件是否合理。 | 数据合成任务指令编排页面设置的数据筛选条件不合理，数据都被过滤，请检查过滤条件。 | |
数据标注 | 数据解析错误，详情请查看日志。 | 请检查标注数据集是否符合规范。 |
依赖资源{数据集/任务}错误，请确认{数据集/任务}正常。 | 请确认{数据集/任务}正常。 | |
服务内部异常，请联系技术人员。 | 请联系技术人员。 | |
依赖服务{MRS/MA/OBS/Gallery/TICS}错误，请确认服务{MRS/MA/OBS/Gallery/TICS}是否正常。 | 请确认服务{MRS/MA/OBS/Gallery/TICS}是否正常。 | |
数据库访问异常。 | 请检查数据库是否正常。 | |
数据配比 | 参数配置错误，请调整配置参数。 | 请调整配置参数。 |
权限(本地目录/服务访问)错误，请配置相应权限。 | 请配置相应权限。 | |
依赖资源{数据集/任务}错误，请确认{数据集/任务}正常。 | 请确认{数据集/任务}正常。 | |
服务内部异常，请联系技术人员。 | 请联系技术人员。 | |
依赖服务{MRS/MA/OBS/Gallery/TICS}错误，请确认服务{MRS/MA/OBS/Gallery/TICS}是否正常。 | 请确认服务{MRS/MA/OBS/Gallery/TICS}是否正常。 | |
依赖组件（itep/空间/billingmanager）错误。 | 请确认组件（itep/空间/billingmanager）是否正常。 | |
数据评估 | annotate type is invalid. | 请检查上传的数据中，使用的数据标注类型、数据标注要求与平台要求的是否一致。 |
annotate data not exist. | 待评测数据不存在，请检查数据是否导入成功，OBS桶是否为空。 | |
obs url invalid. | 请检查数据集对应的OBS路径是否有效，是否可正常访问。 | |
standard item not exist. | 请检查评估标准是否存在，是否被删除。 | |
the corresponding data has been marked as deleted. | 请检查评估数据是否被删除。 | |
the current data not exist. | 请检查评估数据是否存在，是否被删除。 | |
dataset file type does not match standard file type. | 请检查上传的数据集文件类型与平台要求的标准文件类型是否一致。 | |
data management query dataset data invalid. | 请检查数据集中是否有异常格式的数据。 | |
dataset obs file empty. | 检查数据集文件是否还存在于原来的OBS桶中。 | |
数据发布 | 参数配置错误，请调整配置参数。 | 请调整配置参数。 |
权限(本地目录/服务访问)错误，请配置相应权限。 | 请配置相应权限。 | |
依赖资源{数据集/任务}错误，请确认{数据集/任务}正常。 | 请确认{数据集/任务}正常。 | |
服务内部异常，请联系技术人员。 | 请联系技术人员。 | |
依赖服务{MRS/MA/OBS/Gallery/TICS}错误，请确认服务{MRS/MA/OBS/Gallery/TICS}是否正常。 | 请确认服务{MRS/MA/OBS/Gallery/TICS}是否正常。 | |
依赖组件（itep/空间/billingmanager）错误。 | 请确认组件（itep/空间/billingmanager）是否正常。 |
