创建科学计算大模型训练任务
创建科学计算大模型中期天气要素预测微调任务
创建科学计算大模型中期天气要素预测微调任务步骤如下:
- 登录ModelArts Studio大模型开发平台,在“我的空间”模块,单击进入所需空间。
图1 我的空间
- 在左侧导航栏中选择“模型开发 > 模型训练”,单击右上角“创建训练任务”。
- 在“选择模型”页面,选择“模型广场 > 科学计算大模型 > 模型”,单击“确定”进入“创建训练任务”页面。
- 在“创建训练任务”页面,参考表1完成训练参数设置。
其中,“数据配置”展示了各训练数据涉及到的全部参数,请根据具体前端页面展示的参数进行设置。
表1 科学计算大模型中期天气要素预测微调训练参数说明 导航页签
参数分类
参数子类
参数名称
参数说明
训练数据配置
训练配置
选择模型
选择模型
可以修改如下信息:
- 来源:选择“模型广场”。
- 类型:选择“科学计算大模型”,并选择训练所用的基础模型和版本。
训练类型
训练类型
选择“微调”。
训练目标
训练目标
选择“全量微调”。
- 全量微调:在模型进行有监督微调时,对大模型的所有参数进行更新。这种方法通常能够实现最佳的模型性能,但需要消耗大量计算资源和时间,计算开销较大。
数据集
选择数据集
选择数据集
选择数据集中已发布的数据集,这里数据集需为再分析类型数据,同时需要完成加工作业,加工时需选择气象预处理算子。
时间范围
训练集
选择训练数据中的部分时间数据,训练数据集尽可能多一些。
验证集
选择验证集中的部分时间数据,验证集数据不能跟训练集数据重合。
数据配置
全球要素
高空层次类型
设置训练数据的高空层次类型,在“微调”场景下仅做展示原模型的高空层次类型。
高空要素
设置训练数据的高空要素信息,“微调”场景中在编辑参数弹窗仅可调整目标模型参数对应权重。
- 预置参数:模型预置的参数列表。
- 来自数据集参数:数据集中识别到的非预置参数列表。
高空层次
设置训练数据的高空层次信息,在“微调”场景下仅做展示原模型的高空层次。
表面要素
设置训练数据的表面要素信息,“微调”场景中在编辑参数弹窗仅可调整目标模型参数对应权重。
- 预置参数:模型预置的参数列表。
- 来自数据集参数:数据集中识别到的非预置参数列表。
表面观测
设置训练数据的表面观测信息,“微调”场景中在编辑参数弹窗仅可调整目标模型参数对应权重。
- 预置参数:模型预置的参数列表。
- 来自数据集参数:数据集中识别到的非预置参数列表。
边界条件
在“微调”场景下仅做展示原模型边界条件。详见表面静态量参数含义。
训练参数配置
训练参数
优化器参数
请参考表20进行配置。
正则化参数
请参考表20进行配置。
高级设置
高级设置
请参考表20进行配置。
训练资源&系统配置
资源配置
计费模式
计费模式
选择训练当前任务的计费模式。
训练单元
训练单元
选择训练模型所需的训练单元。
当前展示的完成本次训练所需要的最低训练单元要求。
单实例训练单元数
单实例训练单元数
选择单实例训练单元数。
实例数
实例数
选择实例数。
优先级
优先级
优先级相同的任务,先创建先执行。
订阅提醒
订阅提醒
订阅提醒
该功能开启后,系统将在任务状态更新时,通过短信或邮件将提醒发送给用户。
发布模型
开启自动发布
开启自动发布
开启自动发布后,模型训练完成的最终产物会自动发布为空间资产,以便对模型进行压缩、部署、评测等操作或共享给其他空间。
基本信息
名称
名称
训练任务名称。
描述
描述
训练任务描述。
- 参数填写完成后,单击“立即创建”。
- 创建好训练任务后,页面将返回“模型训练”页面,可随时查看当前任务的状态。
创建科学计算大模型中期天气要素预测预训练任务
创建科学计算大模型中期天气要素预测预训练任务步骤如下:
- 登录ModelArts Studio大模型开发平台,在“我的空间”模块,单击进入所需空间。
图2 我的空间
- 在左侧导航栏中选择“模型开发 > 模型训练”,单击右上角“创建训练任务”。
- 在“选择模型”页面,选择“模型广场 > 科学计算大模型 > 模型”,单击“确定”进入“创建训练任务”页面。
- 在“创建训练任务”页面,参考表2完成训练参数设置。
其中,“数据配置”展示了各训练数据涉及到的全部参数,请根据具体前端页面展示的参数进行设置。
表2 科学计算大模型中期天气要素预测预训练参数说明 导航页签
参数分类
参数子类
参数名称
参数说明
训练数据配置
训练配置
选择模型
选择模型
可以修改如下信息:
- 来源:选择“模型广场”。
- 类型:选择“科学计算大模型”,并选择训练所用的基础模型和版本。
训练类型
训练类型
选择“预训练”。
数据集
选择数据集
选择数据集
选择数据集中已发布的数据集,这里数据集需为再分析类型数据,同时需要完成加工作业,加工时需选择气象预处理算子。
时间范围
训练集
选择训练数据中的部分时间数据,训练数据集尽可能多一些。
验证集
选择验证集中的部分时间数据,验证集数据不能跟训练集数据重合。
数据配置
全球要素
高空层次类型
设置训练数据的高空层次类型,在“预训练”场景下可下拉选择一种数据集中识别到的层次类型。
高空要素
设置训练数据的高空要素信息,“预训练”场景中在编辑参数弹窗有预置参数和来自数据集参数可供选择,同时在权重配置中可设置参数对应权重。
- 预置参数:模型预置的参数列表,若数据集中不存在相关参数,则对应参数不可选择。
- 来自数据集参数:数据集中识别到的非预置参数列表,可根据需要进行勾选。
高空层次
设置训练数据的模式层信息,在“预训练”的场景中可根据选择的高空层次类型,设置对应类型的高空层次,训练任务会根据您配置的高空层次对模型重新进行训练。
表面要素
设置训练数据的表面要素信息,“预训练”场景中在编辑参数弹窗有预置参数和来自数据集参数可供选择,同时在权重配置中可设置参数对应权重。
- 预置参数:模型预置的参数列表,若数据集中不存在相关参数,则对应参数不可选择。
- 来自数据集参数:数据集中识别到的非预置参数列表,可根据需要进行勾选。
表面观测
设置训练数据的表面观测信息,“预训练”场景中在编辑参数弹窗有预置参数和来自数据集参数可供选择,同时在权重配置中可设置参数对应权重。
- 预置参数:模型预置的参数列表,若数据集中不存在相关参数,则对应参数不可选择。
- 来自数据集参数:数据集中识别到的非预置参数列表,可根据需要进行勾选。
边界条件
在“预训练”场景下可以根据需要勾选表面静态量用于模型训练,详见表面静态量参数含义。
训练参数配置
训练参数
分辨率
时间分辨率
时间分辨率,即模型输入与输出之间的时间间隔。
全球天气时间分辨率
全球天气输入时间分辨率。
优化器参数
请参考表20进行配置。
正则化参数
请参考表20进行配置。
高级设置
高级设置
请参考表20进行配置。
训练资源&系统配置
资源配置
计费模式
计费模式
选择训练当前任务的计费模式。
训练单元
训练单元
选择训练模型所需的训练单元。
当前展示的完成本次训练所需要的最低训练单元要求。
单实例训练单元数
单实例训练单元数
选择单实例训练单元数。
实例数
实例数
选择实例数。
优先级
优先级
优先级相同的任务,先创建先执行。
订阅提醒
订阅提醒
订阅提醒
该功能开启后,系统将在任务状态更新时,通过短信或邮件将提醒发送给用户。
发布模型
开启自动发布
开启自动发布
开启自动发布后,模型训练完成的最终产物会自动发布为空间资产,以便对模型进行压缩、部署、评测等操作或共享给其他空间。
基本信息
名称
名称
训练任务名称。
描述
描述
训练任务描述。
- 参数填写完成后,单击“立即创建”。
- 创建好训练任务后,页面将返回“模型训练”页面,可随时查看当前任务的状态。
创建科学计算大模型区域中期海洋智能预测微调任务
创建科学计算大模型区域中期海洋智能预测微调任务步骤如下:
- 登录ModelArts Studio大模型开发平台,在“我的空间”模块,单击进入所需空间。
图3 我的空间
- 在左侧导航栏中选择“模型开发 > 模型训练”,单击右上角“创建训练任务”。
- 在“选择模型”页面,选择“模型广场 > 科学计算大模型 > 模型”,单击“确定”进入“创建训练任务”页面。
- 在“创建训练任务”页面,参考表3完成训练参数设置。
其中,“数据配置”展示了各训练数据涉及到的全部参数,请根据具体前端页面展示的参数进行设置。
表3 科学计算大模型区域中期海洋智能预测微调参数说明 导航页签
参数分类
参数子类
参数名称
参数说明
训练数据配置
训练配置
选择模型
选择模型
可以修改如下信息:
- 来源:选择“模型广场”。
- 类型:选择“科学计算大模型”,并选择训练所用的基础模型和版本。
训练类型
训练类型
选择“微调”。
训练目标
训练目标
选择“全量微调”。
- 全量微调:在模型进行有监督微调时,对大模型的所有参数进行更新。这种方法通常能够实现最佳的模型性能,但需要消耗大量计算资源和时间,计算开销较大。
数据集
选择数据集
选择数据集
选择数据集中已发布的数据集,这里数据集需为再分析类型数据,同时需要完成加工作业,加工时需选择气象预处理算子。
时间范围
训练集
选择训练数据中的部分时间数据,训练数据集尽可能多一些。
验证集
选择验证集中的部分时间数据,验证集数据不能跟训练集数据重合。
数据配置
区域范围
水平分辨率
水平分辨率,地理数据集或图像中两个不同格点之间可辨识的最小距离,单位为度(°)。
纬度范围
纬度区间,格式为“起点,终点”,单位为度(°)。
经度范围
经度区间,格式为“起点,终点”,单位为度(°)。
区域要素
深海层次类型
设置训练数据的深海层次类型,在“预训练”场景中可下拉选择一种数据集子目录中识别到的层次类型。
深海要素
设置训练数据的深海要素信息,“预训练”场景中在编辑参数弹窗可选择需要用到的特征参数。
深海层次
设置训练数据的模式层信息,在“预训练”的场景中可根据选择的深海层次类型,设置对应类型的深海层次,训练任务会根据您配置的深海层次对模型重新进行训练。
表面要素
设置训练数据的表面要素信息,“预训练”场景中在编辑参数弹窗可选择需要用到的特征参数。
边界条件
在“预训练”场景下可以根据需要勾选表面静态量用于模型训练,详见表面静态量参数含义。
训练参数配置
训练参数
分辨率
时间分辨率
时间分辨率,即模型输入与输出之间的时间间隔。
优化器参数
请参考表20进行配置。
正则化参数
请参考表20进行配置。
高级设置
高级设置
请参考表20进行配置。
训练资源&系统配置
资源配置
计费模式
计费模式
选择训练当前任务的计费模式。
训练单元
训练单元
选择训练模型所需的训练单元。
当前展示的完成本次训练所需要的最低训练单元要求。
单实例训练单元数
单实例训练单元数
选择单实例训练单元数。
实例数
实例数
选择实例数。
优先级
优先级
优先级相同的任务,先创建先执行。
订阅提醒
订阅提醒
订阅提醒
该功能开启后,系统将在任务状态更新时,通过短信或邮件将提醒发送给用户。
发布模型
开启自动发布
开启自动发布
开启自动发布后,模型训练完成的最终产物会自动发布为空间资产,以便对模型进行压缩、部署、评测等操作或共享给其他空间。
基本信息
名称
名称
训练任务名称。
描述
描述
训练任务描述。
- 参数填写完成后,单击“立即创建”。
- 创建好训练任务后,页面将返回“模型训练”页面,可随时查看当前任务的状态。
创建科学计算大模型区域中期海洋智能预测预训练任务
创建科学计算大模型区域中期海洋智能预测预训练任务步骤如下:
- 登录ModelArts Studio大模型开发平台,在“我的空间”模块,单击进入所需空间。
图4 我的空间
- 在左侧导航栏中选择“模型开发 > 模型训练”,单击右上角“创建训练任务”。
- 在“选择模型”页面,选择“模型广场 > 科学计算大模型 > 模型”,单击“确定”进入“创建训练任务”页面。
- 在“创建训练任务”页面,参考表4完成训练参数设置。
其中,“数据配置”展示了各训练数据涉及到的全部参数,请根据具体前端页面展示的参数进行设置。
表4 科学计算大模型区域中期海洋智能预测预训练参数说明 导航页签
参数分类
参数子类
参数名称
参数说明
训练数据配置
训练配置
选择模型
选择模型
可以修改如下信息:
- 来源:选择“模型广场”。
- 类型:选择“科学计算大模型”,并选择训练所用的基础模型和版本。
训练类型
训练类型
选择“预训练”。
数据集
选择数据集
选择数据集
选择数据集中已发布的数据集,这里数据集需为再分析类型数据,同时需要完成加工作业,加工时需选择气象预处理算子。
时间范围
训练集
选择训练数据中的部分时间数据,训练数据集尽可能多一些。
验证集
选择验证集中的部分时间数据,验证集数据不能跟训练集数据重合。
数据配置
区域范围
水平分辨率
水平分辨率,地理数据集或图像中两个不同格点之间可辨识的最小距离,单位为度(°)。
纬度范围
纬度区间,格式为“起点,终点”,单位为度(°)。
经度范围
经度区间,格式为“起点,终点”,单位为度(°)。
区域要素
深海层次类型
设置训练数据的深海层次类型,在“预训练”场景中可下拉选择一种数据集中识别到的层次类型。
深海要素
设置训练数据的深海要素信息,“预训练”场景中在编辑参数弹窗有预置参数和来自数据集参数可供选择,同时在权重配置中可设置参数对应权重。
- 预置参数:模型预置的参数列表,若数据集中不存在相关参数,则对应参数不可选择。
- 来自数据集参数:数据集中识别到的非预置参数列表,可根据需要进行勾选。
深海层次
设置训练数据的模式层信息,在“预训练”的场景中可根据选择的深海层次类型,设置对应类型的深海层次,训练任务会根据您配置的上游模型深海层次对模型重新进行训练。
表面要素
设置训练数据的表面要素信息,“预训练”场景中在编辑参数弹窗有预置参数和来自数据集参数可供选择,同时在权重配置中可设置参数对应权重。
- 预置参数:模型预置的参数列表,若数据集当前模型子目录中不存在相关参数,则对应参数不可选择。
- 来自数据集参数:数据集当前模型子目录中识别到的非预置参数列表,可根据需要进行勾选。
边界条件
在“预训练”场景下可以根据需要勾选表面静态量用于模型训练,详见表面静态量参数含义。
训练参数配置
训练参数
分辨率
时间分辨率
时间分辨率,即模型输入与输出之间的时间间隔。
优化器参数
请参考表20进行配置。
正则化参数
请参考表20进行配置。
高级设置
高级设置
请参考表20进行配置。
训练资源&系统配置
资源配置
计费模式
计费模式
选择训练当前任务的计费模式。
训练单元
训练单元
选择训练模型所需的训练单元。
当前展示的完成本次训练所需要的最低训练单元要求。
单实例训练单元数
单实例训练单元数
选择单实例训练单元数。
实例数
实例数
选择实例数。
优先级
优先级
优先级相同的任务,先创建先执行。
订阅提醒
订阅提醒
订阅提醒
该功能开启后,系统将在任务状态更新时,通过短信或邮件将提醒发送给用户。
发布模型
开启自动发布
开启自动发布
开启自动发布后,模型训练完成的最终产物会自动发布为空间资产,以便对模型进行压缩、部署、评测等操作或共享给其他空间。
基本信息
名称
名称
训练任务名称。
描述
描述
训练任务描述。
- 参数填写完成后,单击“立即创建”。
- 创建好训练任务后,页面将返回“模型训练”页面,可随时查看当前任务的状态。
创建科学计算大模型区域中期海浪智能预测微调任务
创建科学计算大模型区域中期海洋智能预测微调任务步骤如下:
- 登录ModelArts Studio大模型开发平台,在“我的空间”模块,单击进入所需空间。
图5 我的空间
- 在左侧导航栏中选择“模型开发 > 模型训练”,单击右上角“创建训练任务”。
- 在“选择模型”页面,选择“模型广场 > 科学计算大模型 > 模型”,单击“确定”进入“创建训练任务”页面。
- 在“创建训练任务”页面,参考表5完成训练参数设置。
其中,“数据配置”展示了各训练数据涉及到的全部参数,请根据具体前端页面展示的参数进行设置。
表5 科学计算大模型区域中期海浪智能预测微调参数说明 导航页签
参数分类
参数子类
参数名称
参数说明
训练数据配置
训练配置
选择模型
选择模型
可以修改如下信息:
- 来源:选择“模型广场”。
- 类型:选择“科学计算大模型”,并选择训练所用的基础模型和版本。
训练类型
训练类型
选择“预训练”。
数据集
选择数据集
选择数据集
选择数据集中已发布的数据集,这里数据集需为再分析类型数据,同时需要完成加工作业,加工时需选择气象预处理算子。
时间范围
训练集
选择训练数据中的部分时间数据,训练数据集尽可能多一些。
验证集
选择验证集中的部分时间数据,验证集数据不能跟训练集数据重合。
数据配置
区域范围
水平分辨率
水平分辨率,地理数据集或图像中两个不同格点之间可辨识的最小距离,单位为度(°)。
纬度范围
纬度区间,格式为“起点,终点”,单位为度(°)。
经度范围
经度区间,格式为“起点,终点”,单位为度(°)。
上游模型
深海层次类型
设置上游模型训练数据的深海层次类型,在“预训练”场景中可下拉选择一种数据集上游模型子目录中识别到的层次类型。
深海要素
设置上游模型训练数据的深海要素信息,“预训练”场景中在编辑参数弹窗可选择需要用到的上游模型特征参数。
深海层次
设置上游模型训练数据的模式层信息,在“预训练”的场景中可根据选择的深海层次类型,设置对应类型的深海层次,训练任务会根据您配置的上游模型深海层次对模型重新进行训练。
表面要素
设置上游模型训练数据的表面要素信息,“预训练”场景中在编辑参数弹窗可选择需要用到的上游模型特征参数。
区域要素
表面要素
设置训练数据的表面要素信息,“预训练”场景中在编辑参数弹窗有预置参数和来自数据集参数可供选择,同时在权重配置中可设置参数对应权重。
- 预置参数:模型预置的参数列表,若数据集当前模型子目录中不存在相关参数,则对应参数不可选择。
- 来自数据集参数:数据集当前模型子目录中识别到的非预置参数列表,可根据需要进行勾选。
边界条件
在“预训练”场景下可以根据需要勾选表面静态量用于模型训练,详见表面静态量参数含义。
训练参数配置
训练参数
分辨率
时间分辨率
时间分辨率,即模型输入与输出之间的时间间隔。
优化器参数
请参考表20进行配置。
正则化参数
请参考表20进行配置。
高级设置
高级设置
请参考表20进行配置。
训练资源&系统配置
资源配置
计费模式
计费模式
选择训练当前任务的计费模式。
训练单元
训练单元
选择训练模型所需的训练单元。
当前展示的完成本次训练所需要的最低训练单元要求。
单实例训练单元数
单实例训练单元数
选择单实例训练单元数。
实例数
实例数
选择实例数。
优先级
优先级
优先级相同的任务,先创建先执行。
订阅提醒
订阅提醒
订阅提醒
该功能开启后,系统将在任务状态更新时,通过短信或邮件将提醒发送给用户。
发布模型
开启自动发布
开启自动发布
开启自动发布后,模型训练完成的最终产物会自动发布为空间资产,以便对模型进行压缩、部署、评测等操作或共享给其他空间。
基本信息
名称
名称
训练任务名称。
描述
描述
训练任务描述。
- 参数填写完成后,单击“立即创建”。
- 创建好训练任务后,页面将返回“模型训练”页面,可随时查看当前任务的状态。
创建科学计算大模型区域中期海浪智能预测预训练任务
创建科学计算大模型区域中期海洋智能预测预训练任务步骤如下:
- 登录ModelArts Studio大模型开发平台,在“我的空间”模块,单击进入所需空间。
图6 我的空间
- 在左侧导航栏中选择“模型开发 > 模型训练”,单击右上角“创建训练任务”。
- 在“选择模型”页面,选择“模型广场 > 科学计算大模型 > 模型”,单击“确定”进入“创建训练任务”页面。
- 在“创建训练任务”页面,参考表6完成训练参数设置。
其中,“数据配置”展示了各训练数据涉及到的全部参数,请根据具体前端页面展示的参数进行设置。
表6 科学计算大模型区域中期海浪智能预测预训练参数说明 导航页签
参数分类
参数子类
参数名称
参数说明
训练数据配置
训练配置
选择模型
选择模型
可以修改如下信息:
- 来源:选择“模型广场”。
- 类型:选择“科学计算大模型”,并选择训练所用的基础模型和版本。
训练类型
训练类型
选择“预训练”。
数据集
选择数据集
选择数据集
选择数据集中已发布的数据集,这里数据集需为再分析类型数据,同时需要完成加工作业,加工时需选择气象预处理算子。
时间范围
训练集
选择训练数据中的部分时间数据,训练数据集尽可能多一些。
验证集
选择验证集中的部分时间数据,验证集数据不能跟训练集数据重合。
数据配置
区域范围
水平分辨率
水平分辨率,地理数据集或图像中两个不同格点之间可辨识的最小距离,单位为度(°)。
纬度范围
纬度区间,格式为“起点,终点”,单位为度(°)。
经度范围
经度区间,格式为“起点,终点”,单位为度(°)。
上游模型
深海层次类型
设置上游模型训练数据的深海层次类型,在“预训练”场景中可下拉选择一种数据集上游模型子目录中识别到的层次类型。
深海要素
设置上游模型训练数据的深海要素信息,“预训练”场景中在编辑参数弹窗可选择需要用到的上游模型特征参数。
深海层次
设置上游模型训练数据的模式层信息,在“预训练”的场景中可根据选择的深海层次类型,设置对应类型的深海层次,训练任务会根据您配置的上游模型深海层次对模型重新进行训练。
表面要素
设置上游模型训练数据的表面要素信息,“预训练”场景中在编辑参数弹窗可选择需要用到的上游模型特征参数。
区域要素
表面要素
设置训练数据的表面要素信息,“预训练”场景中在编辑参数弹窗有预置参数和来自数据集参数可供选择,同时在权重配置中可设置参数对应权重。
- 预置参数:模型预置的参数列表,若数据集当前模型子目录中不存在相关参数,则对应参数不可选择。
- 来自数据集参数:数据集当前模型子目录中识别到的非预置参数列表,可根据需要进行勾选。
边界条件
在“预训练”场景下可以根据需要勾选表面静态量用于模型训练,详见表面静态量参数含义。
训练参数配置
训练参数
分辨率
时间分辨率
时间分辨率,即模型输入与输出之间的时间间隔。
优化器参数
请参考表20进行配置。
正则化参数
请参考表20进行配置。
高级设置
高级设置
请参考表20进行配置。
训练资源&系统配置
资源配置
计费模式
计费模式
选择训练当前任务的计费模式。
训练单元
训练单元
选择训练模型所需的训练单元。
当前展示的完成本次训练所需要的最低训练单元要求。
单实例训练单元数
单实例训练单元数
选择单实例训练单元数。
实例数
实例数
选择实例数。
优先级
优先级
优先级相同的任务,先创建先执行。
订阅提醒
订阅提醒
订阅提醒
该功能开启后,系统将在任务状态更新时,通过短信或邮件将提醒发送给用户。
发布模型
开启自动发布
开启自动发布
开启自动发布后,模型训练完成的最终产物会自动发布为空间资产,以便对模型进行压缩、部署、评测等操作或共享给其他空间。
基本信息
名称
名称
训练任务名称。
描述
描述
训练任务描述。
- 参数填写完成后,单击“立即创建”。
- 创建好训练任务后,页面将返回“模型训练”页面,可随时查看当前任务的状态。
创建科学计算大模型区域中期海洋生态智能预测微调任务
创建科学计算大模型区域中期海洋生态智能预测微调任务步骤如下:
- 登录ModelArts Studio大模型开发平台,在“我的空间”模块,单击进入所需空间。
图7 我的空间
- 在左侧导航栏中选择“模型开发 > 模型训练”,单击右上角“创建训练任务”。
- 在“选择模型”页面,选择“模型广场 > 科学计算大模型 > 模型”,单击“确定”进入“创建训练任务”页面。
- 在“创建训练任务”页面,参考表7完成训练参数设置。
其中,“数据配置”展示了各训练数据涉及到的全部参数,请根据具体前端页面展示的参数进行设置。
表7 科学计算大模型区域中期海洋生态智能预测微调参数说明 导航页签
参数分类
参数子类
参数名称
参数说明
训练数据配置
训练配置
选择模型
选择模型
可以修改如下信息:
- 来源:选择“模型广场”。
- 类型:选择“科学计算大模型”,并选择训练所用的基础模型和版本。
训练类型
训练类型
选择“预训练”。
数据集
选择数据集
选择数据集
选择数据集中已发布的数据集,这里数据集需为再分析类型数据,同时需要完成加工作业,加工时需选择气象预处理算子。
时间范围
训练集
选择训练数据中的部分时间数据,训练数据集尽可能多一些。
验证集
选择验证集中的部分时间数据,验证集数据不能跟训练集数据重合。
数据配置
区域范围
水平分辨率
水平分辨率,地理数据集或图像中两个不同格点之间可辨识的最小距离,单位为度(°)。
纬度范围
纬度区间,格式为“起点,终点”,单位为度(°)。
经度范围
经度区间,格式为“起点,终点”,单位为度(°)。
上游模型
深海层次类型
设置上游模型训练数据的深海层次类型,在“预训练”场景中可下拉选择一种数据集上游模型子目录中识别到的层次类型。
深海要素
设置上游模型训练数据的深海要素信息,“预训练”场景中在编辑参数弹窗可选择需要用到的上游模型特征参数。
深海层次
设置上游模型训练数据的模式层信息,在“预训练”的场景中可根据选择的深海层次类型,设置对应类型的深海层次,训练任务会根据您配置的上游模型深海层次对模型重新进行训练。
表面要素
设置上游模型训练数据的表面要素信息,“预训练”场景中在编辑参数弹窗可选择需要用到的上游模型特征参数。
区域要素
表面要素
设置训练数据的表面要素信息,“预训练”场景中在编辑参数弹窗有预置参数和来自数据集参数可供选择,同时在权重配置中可设置参数对应权重。
- 预置参数:模型预置的参数列表,若数据集当前模型子目录中不存在相关参数,则对应参数不可选择。
- 来自数据集参数:数据集当前模型子目录中识别到的非预置参数列表,可根据需要进行勾选。
边界条件
在“预训练”场景下可以根据需要勾选表面静态量用于模型训练,详见表面静态量参数含义。
训练参数配置
训练参数
分辨率
时间分辨率
时间分辨率,即模型输入与输出之间的时间间隔。
优化器参数
请参考表20进行配置。
正则化参数
请参考表20进行配置。
高级设置
高级设置
请参考表20进行配置。
训练资源&系统配置
资源配置
计费模式
计费模式
选择训练当前任务的计费模式。
训练单元
训练单元
选择训练模型所需的训练单元。
当前展示的完成本次训练所需要的最低训练单元要求。
单实例训练单元数
单实例训练单元数
选择单实例训练单元数。
实例数
实例数
选择实例数。
优先级
优先级
优先级相同的任务,先创建先执行。
订阅提醒
订阅提醒
订阅提醒
该功能开启后,系统将在任务状态更新时,通过短信或邮件将提醒发送给用户。
发布模型
开启自动发布
开启自动发布
开启自动发布后,模型训练完成的最终产物会自动发布为空间资产,以便对模型进行压缩、部署、评测等操作或共享给其他空间。
基本信息
名称
名称
训练任务名称。
描述
描述
训练任务描述。
- 参数填写完成后,单击“立即创建”。
- 创建好训练任务后,页面将返回“模型训练”页面,可随时查看当前任务的状态。
创建科学计算大模型区域中期海洋生态智能预测预训练任务
创建科学计算大模型区域中期海洋生态智能预测预训练任务步骤如下:
- 登录ModelArts Studio大模型开发平台,在“我的空间”模块,单击进入所需空间。
图8 我的空间
- 在左侧导航栏中选择“模型开发 > 模型训练”,单击右上角“创建训练任务”。
- 在“选择模型”页面,选择“模型广场 > 科学计算大模型 > 模型”,单击“确定”进入“创建训练任务”页面。
- 在“创建训练任务”页面,参考表8完成训练参数设置。
其中,“数据配置”展示了各训练数据涉及到的全部参数,请根据具体前端页面展示的参数进行设置。
表8 科学计算大模型区域中期海洋生态智能预测预训练参数说明 导航页签
参数分类
参数子类
参数名称
参数说明
训练数据配置
训练配置
选择模型
选择模型
可以修改如下信息:
- 来源:选择“模型广场”。
- 类型:选择“科学计算大模型”,并选择训练所用的基础模型和版本。
训练类型
训练类型
选择“预训练”。
数据集
选择数据集
选择数据集
选择数据集中已发布的数据集,这里数据集需为再分析类型数据,同时需要完成加工作业,加工时需选择气象预处理算子。
时间范围
训练集
选择训练数据中的部分时间数据,训练数据集尽可能多一些。
验证集
选择验证集中的部分时间数据,验证集数据不能跟训练集数据重合。
数据配置
区域范围
水平分辨率
水平分辨率,地理数据集或图像中两个不同格点之间可辨识的最小距离,单位为度(°)。
纬度范围
纬度区间,格式为“起点,终点”,单位为度(°)。
经度范围
经度区间,格式为“起点,终点”,单位为度(°)。
上游模型
深海层次类型
设置上游模型训练数据的深海层次类型,在“预训练”场景中可下拉选择一种数据集上游模型子目录中识别到的层次类型。
深海要素
设置上游模型训练数据的深海要素信息,“预训练”场景中在编辑参数弹窗可选择需要用到的上游模型特征参数。
深海层次
设置上游模型训练数据的模式层信息,在“预训练”的场景中可根据选择的深海层次类型,设置对应类型的深海层次,训练任务会根据您配置的上游模型深海层次对模型重新进行训练。
表面要素
设置上游模型训练数据的表面要素信息,“预训练”场景中在编辑参数弹窗可选择需要用到的上游模型特征参数。
区域要素
表面要素
设置训练数据的表面要素信息,“预训练”场景中在编辑参数弹窗有预置参数和来自数据集参数可供选择,同时在权重配置中可设置参数对应权重。
- 预置参数:模型预置的参数列表,若数据集当前模型子目录中不存在相关参数,则对应参数不可选择。
- 来自数据集参数:数据集当前模型子目录中识别到的非预置参数列表,可根据需要进行勾选。
边界条件
在“预训练”场景下可以根据需要勾选表面静态量用于模型训练,详见表面静态量参数含义。
训练参数配置
训练参数
分辨率
时间分辨率
时间分辨率,即模型输入与输出之间的时间间隔。
优化器参数
请参考表20进行配置。
正则化参数
请参考表20进行配置。
高级设置
高级设置
请参考表20进行配置。
训练资源&系统配置
资源配置
计费模式
计费模式
选择训练当前任务的计费模式。
训练单元
训练单元
选择训练模型所需的训练单元。
当前展示的完成本次训练所需要的最低训练单元要求。
单实例训练单元数
单实例训练单元数
选择单实例训练单元数。
实例数
实例数
选择实例数。
优先级
优先级
优先级相同的任务,先创建先执行。
订阅提醒
订阅提醒
订阅提醒
该功能开启后,系统将在任务状态更新时,通过短信或邮件将提醒发送给用户。
发布模型
开启自动发布
开启自动发布
开启自动发布后,模型训练完成的最终产物会自动发布为空间资产,以便对模型进行压缩、部署、评测等操作或共享给其他空间。
基本信息
名称
名称
训练任务名称。
描述
描述
训练任务描述。
- 参数填写完成后,单击“立即创建”。
- 创建好训练任务后,页面将返回“模型训练”页面,可随时查看当前任务的状态。
创建科学计算大模型区域大气污染物预测微调任务
创建科学计算大模型区域大气污染物预测微调任务步骤如下:
- 登录ModelArts Studio大模型开发平台,在“我的空间”模块,单击进入所需空间。
图9 我的空间
- 在左侧导航栏中选择“模型开发 > 模型训练”,单击右上角“创建训练任务”。
- 在“选择模型”页面,选择“模型广场 > 科学计算大模型 > 模型”,单击“确定”进入“创建训练任务”页面。
- 在“创建训练任务”页面,参考表9完成训练参数设置。
其中,“数据配置”展示了各训练数据涉及到的全部参数,请根据具体前端页面展示的参数进行设置。
表9 科学计算大模型区域大气污染物预测微调参数说明 导航页签
参数分类
参数子类
参数名称
参数说明
训练数据配置
训练配置
选择模型
选择模型
可以修改如下信息:
- 来源:选择“模型广场”。
- 类型:选择“科学计算大模型”,并选择训练所用的基础模型和版本。
训练类型
训练类型
选择“微调”。
训练目标
训练目标
选择“全量微调”。
- 全量微调:在模型进行有监督微调时,对大模型的所有参数进行更新。这种方法通常能够实现最佳的模型性能,但需要消耗大量计算资源和时间,计算开销较大。
高级设置
checkpoints
模型训练任务过程中,用于保存模型权重和状态的机制。若因保存过多导致OBS容量不足,则需扩容。当前仅支持基于保存180天内的checkpoints做训练,180天到期后自动删除。
数据集
选择数据集
选择数据集
选择数据集中已发布的数据集,这里数据集需为再分析类型数据,同时需要完成加工作业,加工时需选择气象预处理算子。
时间范围
训练集
选择训练数据中的部分时间数据,训练数据集尽可能多一些。
验证集
选择验证集中的部分时间数据,验证集数据不能跟训练集数据重合。
数据配置
区域要素
表面要素
设置训练数据的表面要素信息,“微调”场景中在编辑参数弹窗仅可调整目标模型参数对应权重。
- 预置参数:模型预置的参数列表。
- 来自数据集参数:数据集中识别到的非预置参数列表。
表面观测
设置训练数据的表面观测信息,“微调”场景中在编辑参数弹窗仅可调整目标模型参数对应权重。
边界条件
在“微调”场景下仅做展示原模型边界条件。详见表面静态量参数含义。
训练参数配置
训练参数
优化器参数
请参考表20进行配置。
正则化参数
请参考表20进行配置。
训练资源&系统配置
资源配置
计费模式
计费模式
选择训练当前任务的计费模式。
训练单元
训练单元
选择训练模型所需的训练单元。
当前展示的完成本次训练所需要的最低训练单元要求。
单实例训练单元数
单实例训练单元数
选择单实例训练单元数。
实例数
实例数
选择实例数。
优先级
优先级
优先级相同的任务,先创建先执行。
订阅提醒
订阅提醒
订阅提醒
该功能开启后,系统将在任务状态更新时,通过短信或邮件将提醒发送给用户。
发布模型
开启自动发布
开启自动发布
开启自动发布后,模型训练完成的最终产物会自动发布为空间资产,以便对模型进行压缩、部署、评测等操作或共享给其他空间。
基本信息
名称
名称
训练任务名称。
描述
描述
训练任务描述。
- 参数填写完成后,单击“立即创建”。
- 创建好训练任务后,页面将返回“模型训练”页面,可随时查看当前任务的状态。
创建科学计算大模型区域大气污染物预测预训练任务
创建科学计算大模型区域大气污染物预测预训练任务步骤如下:
- 登录ModelArts Studio大模型开发平台,在“我的空间”模块,单击进入所需空间。
图10 我的空间
- 在左侧导航栏中选择“模型开发 > 模型训练”,单击右上角“创建训练任务”。
- 在“选择模型”页面,选择“模型广场 > 科学计算大模型 > 模型”,单击“确定”进入“创建训练任务”页面。
- 在“创建训练任务”页面,参考表10完成训练参数设置。
其中,“数据配置”展示了各训练数据涉及到的全部参数,请根据具体前端页面展示的参数进行设置。
表10 科学计算大模型区域大气污染物预测预训练参数说明 导航页签
参数分类
参数子类
参数名称
参数说明
训练数据配置
训练配置
选择模型
选择模型
可以修改如下信息:
- 来源:选择“模型广场”。
- 类型:选择“科学计算大模型”,并选择训练所用的基础模型和版本。
训练类型
训练类型
选择“预训练”。
高级设置
checkpoints
模型训练任务过程中,用于保存模型权重和状态的机制。若因保存过多导致OBS容量不足,则需扩容。当前仅支持基于保存180天内的checkpoints做训练,180天到期后自动删除。
数据集
选择数据集
选择数据集
选择数据集中已发布的数据集,这里数据集需为再分析类型数据,同时需要完成加工作业,加工时需选择气象预处理算子。
时间范围
训练集
选择训练数据中的部分时间数据,训练数据集尽可能多一些。
验证集
选择验证集中的部分时间数据,验证集数据不能跟训练集数据重合。
数据配置
区域范围
水平分辨率
水平分辨率,地理数据集或图像中两个不同格点之间可辨识的最小距离,单位为度(°)。
纬度范围
纬度区间,格式为“起点,终点”,单位为度(°)。
经度范围
经度区间,格式为“起点,终点”,单位为度(°)。
区域要素
表面要素
设置训练数据的表面要素信息,“预训练”场景中在编辑参数弹窗有预置参数和来自数据集参数可供选择,同时在权重配置中可设置参数对应权重。
- 预置参数:模型预置的参数列表,若数据集中不存在相关参数,则对应参数不可选择。
- 来自数据集参数:数据集中识别到的非预置参数列表,可根据需要进行勾选。
表面观测
设置训练数据的表面观测信息,“预训练”场景中在编辑参数弹窗有预置参数和来自数据集参数可供选择,同时在权重配置中可设置参数对应权重。
边界条件
在“预训练”场景下可以根据需要勾选表面静态量用于模型训练,详见表面静态量参数含义。
训练参数配置
训练参数
分辨率
时间分辨率
时间分辨率,即模型输入与输出之间的时间间隔。
优化器参数
请参考表20进行配置。
正则化参数
请参考表20进行配置。
训练资源&系统配置
资源配置
计费模式
计费模式
选择训练当前任务的计费模式。
训练单元
训练单元
选择训练模型所需的训练单元。
当前展示的完成本次训练所需要的最低训练单元要求。
单实例训练单元数
单实例训练单元数
选择单实例训练单元数。
实例数
实例数
选择实例数。
优先级
优先级
优先级相同的任务,先创建先执行。
订阅提醒
订阅提醒
订阅提醒
该功能开启后,系统将在任务状态更新时,通过短信或邮件将提醒发送给用户。
发布模型
开启自动发布
开启自动发布
开启自动发布后,模型训练完成的最终产物会自动发布为空间资产,以便对模型进行压缩、部署、评测等操作或共享给其他空间。
基本信息
名称
名称
训练任务名称。
描述
描述
训练任务描述。
- 参数填写完成后,单击“立即创建”。
- 创建好训练任务后,页面将返回“模型训练”页面,可随时查看当前任务的状态。
创建科学计算大模型区域新能源风预测微调任务
创建科学计算大模型区域新能源风预测微调任务步骤如下:
- 登录ModelArts Studio大模型开发平台,在“我的空间”模块,单击进入所需空间。
图11 我的空间
- 在左侧导航栏中选择“模型开发 > 模型训练”,单击右上角“创建训练任务”。
- 在“选择模型”页面,选择“模型广场 > 科学计算大模型 > 模型”,单击“确定”进入“创建训练任务”页面。
- 在“创建训练任务”页面,参考表11完成训练参数设置。
其中,“数据配置”展示了各训练数据涉及到的全部参数,请根据具体前端页面展示的参数进行设置。
表11 科学计算大模型区域新能源风预测微调参数说明 导航页签
参数分类
参数子类
参数名称
参数说明
训练数据配置
训练配置
选择模型
选择模型
可以修改如下信息:
- 来源:选择“模型广场”。
- 类型:选择“科学计算大模型”,并选择训练所用的基础模型和版本。
训练类型
训练类型
选择“微调”。
训练目标
训练目标
选择“全量微调”。
- 全量微调:在模型进行有监督微调时,对大模型的所有参数进行更新。这种方法通常能够实现最佳的模型性能,但需要消耗大量计算资源和时间,计算开销较大。
高级设置
checkpoints
模型训练任务过程中,用于保存模型权重和状态的机制。若因保存过多导致OBS容量不足,则需扩容。当前仅支持基于保存180天内的checkpoints做训练,180天到期后自动删除。
数据集
选择数据集
选择数据集
选择数据集中已发布的数据集,这里数据集需为再分析类型数据,同时需要完成加工作业,加工时需选择气象预处理算子。
时间范围
训练集
选择训练数据中的部分时间数据,训练数据集尽可能多一些。
验证集
选择验证集中的部分时间数据,验证集数据不能跟训练集数据重合。
数据配置
上游模型
高空层次类型
设置上游模型训练数据的高空层次类型,在“微调”场景下仅做展示原模型的上游模型高空层次类型。
高空要素
设置上游模型训练数据的高空要素信息,“微调”场景下仅做展示原模型的上游模型高空要素。
高空层次
设置上游模型训练数据的高空层次信息,在“微调”场景下仅做展示原模型的上游模型高空层次。
表面要素
设置上游模型训练数据的表面要素信息,“微调”场景下仅做展示原模型的上游模型表面要素。
区域要素
表面要素
设置训练数据的表面要素信息,“微调”场景中在编辑参数弹窗仅可调整目标模型参数对应权重。
- 预置参数:模型预置的参数列表。
- 来自数据集参数:数据集中识别到的非预置参数。
表面观测
设置训练数据的表面观测信息,“微调”场景中在编辑参数弹窗仅可调整目标模型参数对应权重。
- 预置参数:模型预置的参数列表。
- 来自数据集参数:数据集中识别到的非预置参数列表。
边界条件
在“微调”场景下仅做展示原模型边界条件。详见表面静态量参数含义。
训练参数配置
训练参数
优化器参数
请参考表20进行配置。
正则化参数
请参考表20进行配置。
训练资源&系统配置
资源配置
计费模式
计费模式
选择训练当前任务的计费模式。
训练单元
训练单元
选择训练模型所需的训练单元。
当前展示的完成本次训练所需要的最低训练单元要求。
单实例训练单元数
单实例训练单元数
选择单实例训练单元数。
实例数
实例数
选择实例数。
优先级
优先级
优先级相同的任务,先创建先执行。
订阅提醒
订阅提醒
订阅提醒
该功能开启后,系统将在任务状态更新时,通过短信或邮件将提醒发送给用户。
发布模型
开启自动发布
开启自动发布
开启自动发布后,模型训练完成的最终产物会自动发布为空间资产,以便对模型进行压缩、部署、评测等操作或共享给其他空间。
基本信息
名称
名称
训练任务名称。
描述
描述
训练任务描述。
- 参数填写完成后,单击“立即创建”。
- 创建好训练任务后,页面将返回“模型训练”页面,可随时查看当前任务的状态。
创建科学计算大模型区域新能源风预测预训练任务
创建科学计算大模型区域新能源风预测预训练任务步骤如下:
- 登录ModelArts Studio大模型开发平台,在“我的空间”模块,单击进入所需空间。
图12 我的空间
- 在左侧导航栏中选择“模型开发 > 模型训练”,单击右上角“创建训练任务”。
- 在“选择模型”页面,选择“模型广场 > 科学计算大模型 > 模型”,单击“确定”进入“创建训练任务”页面。
- 在“创建训练任务”页面,参考表12完成训练参数设置。
其中,“数据配置”展示了各训练数据涉及到的全部参数,请根据具体前端页面展示的参数进行设置。
表12 科学计算大模型区域新能源风预测预训练参数说明 导航页签
参数分类
参数子类
参数名称
参数说明
训练数据配置
训练配置
选择模型
选择模型
可以修改如下信息:
- 来源:选择“模型广场”。
- 类型:选择“科学计算大模型”,并选择训练所用的基础模型和版本。
训练类型
训练类型
选择“预训练”。
高级设置
checkpoints
模型训练任务过程中,用于保存模型权重和状态的机制。若因保存过多导致OBS容量不足,则需扩容。当前仅支持基于保存180天内的checkpoints做训练,180天到期后自动删除。
数据集
选择数据集
选择数据集
选择数据集中已发布的数据集,这里数据集需为再分析类型数据,同时需要完成加工作业,加工时需选择气象预处理算子。
时间范围
训练集
选择训练数据中的部分时间数据,训练数据集尽可能多一些。
验证集
选择验证集中的部分时间数据,验证集数据不能跟训练集数据重合。
数据配置
区域范围
水平分辨率
水平分辨率,地理数据集或图像中两个不同格点之间可辨识的最小距离,单位为度(°)。
纬度范围
纬度区间,格式为“起点,终点”,单位为度(°)。
经度范围
经度区间,格式为“起点,终点”,单位为度(°)。
区域要素
高空层次类型
设置训练数据的高空层次类型,在“预训练”场景下可下拉选择一种数据集中识别到的层次类型。
高空要素
设置训练数据的高空要素信息,“预训练”场景中在编辑参数弹窗有预置参数和来自数据集参数可供选择,同时在权重配置中可设置参数对应权重。
- 预置参数:模型预置的参数列表,若数据集中不存在相关参数,则对应参数不可选择。
- 来自数据集参数:数据集中识别到的非预置参数列表,可根据需要进行勾选。
高空层次
设置训练数据的模式层信息,在“预训练”的场景中可根据选择的高空层次类型,设置对应类型的高空层次,训练任务会根据您配置的高空层次对模型重新进行训练。
表面要素
设置训练数据的表面要素信息,“预训练”场景中在编辑参数弹窗有预置参数和来自数据集参数可供选择,同时在权重配置中可设置参数对应权重。
- 预置参数:模型预置的参数列表,若数据集中不存在相关参数,则对应参数不可选择。
- 来自数据集参数:数据集中识别到的非预置参数列表,可根据需要进行勾选。
表面观测
设置训练数据的表面观测信息,“预训练”场景中在编辑参数弹窗有预置参数和来自数据集参数可供选择,同时在权重配置中可设置参数对应权重。
- 预置参数:模型预置的参数列表,若数据集中不存在相关参数,则对应参数不可选择。
- 来自数据集参数:数据集中识别到的非预置参数列表,可根据需要进行勾选。
边界条件
在“预训练”场景下可以根据需要勾选表面静态量用于模型训练,详见表面静态量参数含义。
训练参数配置
训练参数
分辨率
时间分辨率
时间分辨率,即模型输入与输出之间的时间间隔。
全球天气时间分辨率
全球天气输入时间分辨率。
优化器参数
请参考表20进行配置。
正则化参数
请参考表20进行配置。
训练资源&系统配置
资源配置
计费模式
计费模式
选择训练当前任务的计费模式。
训练单元
训练单元
选择训练模型所需的训练单元。
当前展示的完成本次训练所需要的最低训练单元要求。
单实例训练单元数
单实例训练单元数
选择单实例训练单元数。
实例数
实例数
选择实例数。
优先级
优先级
优先级相同的任务,先创建先执行。
订阅提醒
订阅提醒
订阅提醒
该功能开启后,系统将在任务状态更新时,通过短信或邮件将提醒发送给用户。
发布模型
开启自动发布
开启自动发布
开启自动发布后,模型训练完成的最终产物会自动发布为空间资产,以便对模型进行压缩、部署、评测等操作或共享给其他空间。
基本信息
名称
名称
训练任务名称。
描述
描述
训练任务描述。
- 参数填写完成后,单击“立即创建”。
- 创建好训练任务后,页面将返回“模型训练”页面,可随时查看当前任务的状态。
创建科学计算大模型区域新能源光预测微调任务
创建科学计算大模型区域新能源光预测微调任务步骤如下:
- 登录ModelArts Studio大模型开发平台,在“我的空间”模块,单击进入所需空间。
图13 我的空间
- 在左侧导航栏中选择“模型开发 > 模型训练”,单击右上角“创建训练任务”。
- 在“选择模型”页面,选择“模型广场 > 科学计算大模型 > 模型”,单击“确定”进入“创建训练任务”页面。
- 在“创建训练任务”页面,参考表13完成训练参数设置。
其中,“数据配置”展示了各训练数据涉及到的全部参数,请根据具体前端页面展示的参数进行设置。
表13 科学计算大模型区域新能源光预测微调参数说明 导航页签
参数分类
参数子类
参数名称
参数说明
训练数据配置
训练配置
选择模型
选择模型
可以修改如下信息:
- 来源:选择“模型广场”。
- 类型:选择“科学计算大模型”,并选择训练所用的基础模型和版本。
训练类型
训练类型
选择“微调”。
训练目标
训练目标
选择“全量微调”。
- 全量微调:在模型进行有监督微调时,对大模型的所有参数进行更新。这种方法通常能够实现最佳的模型性能,但需要消耗大量计算资源和时间,计算开销较大。
高级设置
checkpoints
模型训练任务过程中,用于保存模型权重和状态的机制。若因保存过多导致OBS容量不足,则需扩容。当前仅支持基于保存180天内的checkpoints做训练,180天到期后自动删除。
数据集
选择数据集
选择数据集
选择数据集中已发布的数据集,这里数据集需为再分析类型数据,同时需要完成加工作业,加工时需选择气象预处理算子。
时间范围
训练集
选择训练数据中的部分时间数据,训练数据集尽可能多一些。
验证集
选择验证集中的部分时间数据,验证集数据不能跟训练集数据重合。
数据配置
上游模型
高空层次类型
设置上游模型训练数据的高空层次类型,在“微调”场景下仅做展示原模型的上游模型高空层次类型。
高空要素
设置上游模型训练数据的高空要素信息,“微调”场景下仅做展示原模型的上游模型高空要素。
高空层次
设置上游模型训练数据的高空层次信息,在“微调”场景下仅做展示原模型的上游模型高空层次。
表面要素
设置上游模型训练数据的表面要素信息,“微调”场景下仅做展示原模型的上游模型表面要素。
区域要素
表面要素
设置训练数据的表面要素信息,“微调”场景中在编辑参数弹窗仅可调整目标模型参数对应权重。
- 预置参数:模型预置的参数列表。
- 来自数据集参数:数据集中识别到的非预置参数。
表面观测
设置训练数据的表面观测信息,“微调”场景中在编辑参数弹窗仅可调整目标模型参数对应权重。
- 预置参数:模型预置的参数列表。
- 来自数据集参数:数据集中识别到的非预置参数列表。
边界条件
在“微调”场景下仅做展示原模型边界条件。详见表面静态量参数含义。
训练参数配置
训练参数
优化器参数
请参考表20进行配置。
正则化参数
请参考表20进行配置。
训练资源&系统配置
资源配置
计费模式
计费模式
选择训练当前任务的计费模式。
训练单元
训练单元
选择训练模型所需的训练单元。
当前展示的完成本次训练所需要的最低训练单元要求。
单实例训练单元数
单实例训练单元数
选择单实例训练单元数。
实例数
实例数
选择实例数。
优先级
优先级
优先级相同的任务,先创建先执行。
订阅提醒
订阅提醒
订阅提醒
该功能开启后,系统将在任务状态更新时,通过短信或邮件将提醒发送给用户。
发布模型
开启自动发布
开启自动发布
开启自动发布后,模型训练完成的最终产物会自动发布为空间资产,以便对模型进行压缩、部署、评测等操作或共享给其他空间。
基本信息
名称
名称
训练任务名称。
描述
描述
训练任务描述。
- 参数填写完成后,单击“立即创建”。
- 创建好训练任务后,页面将返回“模型训练”页面,可随时查看当前任务的状态。
创建科学计算大模型区域新能源光预测预训练任务
创建科学计算大模型区域新能源风预测预训练任务步骤如下:
- 登录ModelArts Studio大模型开发平台,在“我的空间”模块,单击进入所需空间。
图14 我的空间
- 在左侧导航栏中选择“模型开发 > 模型训练”,单击右上角“创建训练任务”。
- 在“选择模型”页面,选择“模型广场 > 科学计算大模型 > 模型”,单击“确定”进入“创建训练任务”页面。
- 在“创建训练任务”页面,参考表14完成训练参数设置。
其中,“数据配置”展示了各训练数据涉及到的全部参数,请根据具体前端页面展示的参数进行设置。
表14 科学计算大模型区域新能源光预测预训练参数说明 导航页签
参数分类
参数子类
参数名称
参数说明
训练数据配置
训练配置
选择模型
选择模型
可以修改如下信息:
- 来源:选择“模型广场”。
- 类型:选择“科学计算大模型”,并选择训练所用的基础模型和版本。
训练类型
训练类型
选择“预训练”。
高级设置
checkpoints
模型训练任务过程中,用于保存模型权重和状态的机制。若因保存过多导致OBS容量不足,则需扩容。当前仅支持基于保存180天内的checkpoints做训练,180天到期后自动删除。
数据集
选择数据集
选择数据集
选择数据集中已发布的数据集,这里数据集需为再分析类型数据,同时需要完成加工作业,加工时需选择气象预处理算子。
时间范围
训练集
选择训练数据中的部分时间数据,训练数据集尽可能多一些。
验证集
选择验证集中的部分时间数据,验证集数据不能跟训练集数据重合。
数据配置
区域范围
水平分辨率
水平分辨率,地理数据集或图像中两个不同格点之间可辨识的最小距离,单位为度(°)。
纬度范围
纬度区间,格式为“起点,终点”,单位为度(°)。
经度范围
经度区间,格式为“起点,终点”,单位为度(°)。
区域要素
高空层次类型
设置训练数据的高空层次类型,在“预训练”场景下可下拉选择一种数据集中识别到的层次类型。
高空要素
设置训练数据的高空要素信息,“预训练”场景中在编辑参数弹窗有预置参数和来自数据集参数可供选择,同时在权重配置中可设置参数对应权重。
- 预置参数:模型预置的参数列表,若数据集中不存在相关参数,则对应参数不可选择。
- 来自数据集参数:数据集中识别到的非预置参数列表,可根据需要进行勾选。
高空层次
设置训练数据的模式层信息,在“预训练”的场景中可根据选择的高空层次类型,设置对应类型的高空层次,训练任务会根据您配置的高空层次对模型重新进行训练。
表面要素
设置训练数据的表面要素信息,“预训练”场景中在编辑参数弹窗有预置参数和来自数据集参数可供选择,同时在权重配置中可设置参数对应权重。
- 预置参数:模型预置的参数列表,若数据集中不存在相关参数,则对应参数不可选择。
- 来自数据集参数:数据集中识别到的非预置参数列表,可根据需要进行勾选。
表面观测
设置训练数据的表面观测信息,“预训练”场景中在编辑参数弹窗有预置参数和来自数据集参数可供选择,同时在权重配置中可设置参数对应权重。
- 预置参数:模型预置的参数列表,若数据集中不存在相关参数,则对应参数不可选择。
- 来自数据集参数:数据集中识别到的非预置参数列表,可根据需要进行勾选。
边界条件
在“预训练”场景下可以根据需要勾选表面静态量用于模型训练,详见表面静态量参数含义。
训练参数配置
训练参数
分辨率
时间分辨率
时间分辨率,即模型输入与输出之间的时间间隔。
全球天气时间分辨率
全球天气输入时间分辨率。
优化器参数
请参考表20进行配置。
正则化参数
请参考表20进行配置。
训练资源&系统配置
资源配置
计费模式
计费模式
选择训练当前任务的计费模式。
训练单元
训练单元
选择训练模型所需的训练单元。
当前展示的完成本次训练所需要的最低训练单元要求。
单实例训练单元数
单实例训练单元数
选择单实例训练单元数。
实例数
实例数
选择实例数。
优先级
优先级
优先级相同的任务,先创建先执行。
订阅提醒
订阅提醒
订阅提醒
该功能开启后,系统将在任务状态更新时,通过短信或邮件将提醒发送给用户。
发布模型
开启自动发布
开启自动发布
开启自动发布后,模型训练完成的最终产物会自动发布为空间资产,以便对模型进行压缩、部署、评测等操作或共享给其他空间。
基本信息
名称
名称
训练任务名称。
描述
描述
训练任务描述。
- 参数填写完成后,单击“立即创建”。
- 创建好训练任务后,页面将返回“模型训练”页面,可随时查看当前任务的状态。
创建科学计算大模型区域中期天气要素预测微调任务
创建科学计算大模型区域中期天气要素预测微调任务步骤如下:
- 登录ModelArts Studio大模型开发平台,在“我的空间”模块,单击进入所需空间。
图15 我的空间
- 在左侧导航栏中选择“模型开发 > 模型训练”,单击右上角“创建训练任务”。
- 在“选择模型”页面,选择“模型广场 > 科学计算大模型 > 模型”,单击“确定”进入“创建训练任务”页面。
- 在“创建训练任务”页面,参考表15完成训练参数设置。
其中,“数据配置”展示了各训练数据涉及到的全部参数,请根据具体前端页面展示的参数进行设置。
表15 科学计算大模型区域中期天气要素预测微调参数说明 导航页签
参数分类
参数子类
参数名称
参数说明
训练数据配置
训练配置
选择模型
选择模型
可以修改如下信息:
- 来源:选择“模型广场”。
- 类型:选择“科学计算大模型”,并选择训练所用的基础模型和版本。
训练类型
训练类型
选择“微调”。
训练目标
训练目标
选择“全量微调”。
- 全量微调:在模型进行有监督微调时,对大模型的所有参数进行更新。这种方法通常能够实现最佳的模型性能,但需要消耗大量计算资源和时间,计算开销较大。
数据集
选择数据集
选择数据集
选择数据集中已发布的数据集,这里数据集需为再分析类型数据,同时需要完成加工作业,加工时需选择气象预处理算子。
时间范围
训练集
选择训练数据中的部分时间数据,训练数据集尽可能多一些。
验证集
选择验证集中的部分时间数据,验证集数据不能跟训练集数据重合。
数据配置
区域要素
高空层次类型
设置训练数据的高空层次类型,在“微调”场景下仅做展示原模型的高空层次类型。
高空要素
设置训练数据的高空要素信息,“微调”场景中在编辑参数弹窗仅可调整目标模型参数对应权重。
- 预置参数:模型预置的参数列表。
- 来自数据集参数:数据集中识别到的非预置参数列表。
高空层次
设置训练数据的高空层次信息,在“微调”场景下仅做展示原模型的高空层次。
表面要素
设置训练数据的表面要素信息,“微调”场景中在编辑参数弹窗仅可调整目标模型参数对应权重。
- 预置参数:模型预置的参数列表。
- 来自数据集参数:数据集中识别到的非预置参数列表。
表面观测
设置训练数据的表面观测信息,“微调”场景中在编辑参数弹窗仅可调整目标模型参数对应权重。
- 预置参数:模型预置的参数列表。
- 来自数据集参数:数据集中识别到的非预置参数列表。
边界条件
在“微调”场景下仅做展示原模型边界条件。详见表面静态量参数含义。
训练参数配置
训练参数
优化器参数
请参考表20进行配置。
正则化参数
请参考表20进行配置。
高级设置
高级设置
请参考表20进行配置。
训练资源&系统配置
资源配置
计费模式
计费模式
选择训练当前任务的计费模式。
训练单元
训练单元
选择训练模型所需的训练单元。
当前展示的完成本次训练所需要的最低训练单元要求。
单实例训练单元数
单实例训练单元数
选择单实例训练单元数。
实例数
实例数
选择实例数。
优先级
优先级
优先级相同的任务,先创建先执行。
订阅提醒
订阅提醒
订阅提醒
该功能开启后,系统将在任务状态更新时,通过短信或邮件将提醒发送给用户。
发布模型
开启自动发布
开启自动发布
开启自动发布后,模型训练完成的最终产物会自动发布为空间资产,以便对模型进行压缩、部署、评测等操作或共享给其他空间。
基本信息
名称
名称
训练任务名称。
描述
描述
训练任务描述。
- 参数填写完成后,单击“立即创建”。
- 创建好训练任务后,页面将返回“模型训练”页面,可随时查看当前任务的状态。
创建科学计算大模型区域中期天气要素预测预训练任务
创建科学计算大模型区域中期天气要素预测预训练任务步骤如下:
- 登录ModelArts Studio大模型开发平台,在“我的空间”模块,单击进入所需空间。
图16 我的空间
- 在左侧导航栏中选择“模型开发 > 模型训练”,单击右上角“创建训练任务”。
- 在“选择模型”页面,选择“模型广场 > 科学计算大模型 > 模型”,单击“确定”进入“创建训练任务”页面。
- 在“创建训练任务”页面,参考表16完成训练参数设置。
其中,“数据配置”展示了各训练数据涉及到的全部参数,请根据具体前端页面展示的参数进行设置。
表16 科学计算大模型区域中期天气要素预测预训练参数说明 导航页签
参数分类
参数子类
参数名称
参数说明
训练数据配置
训练配置
选择模型
选择模型
可以修改如下信息:
- 来源:选择“模型广场”。
- 类型:选择“科学计算大模型”,并选择训练所用的基础模型和版本。
训练类型
训练类型
选择“预训练”。
数据集
选择数据集
选择数据集
选择数据集中已发布的数据集,这里数据集需为再分析类型数据,同时需要完成加工作业,加工时需选择气象预处理算子。
时间范围
训练集
选择训练数据中的部分时间数据,训练数据集尽可能多一些。
验证集
选择验证集中的部分时间数据,验证集数据不能跟训练集数据重合。
数据配置
区域范围
水平分辨率
水平分辨率,地理数据集或图像中两个不同格点之间可辨识的最小距离,单位为度(°)。
纬度范围
纬度区间,格式为“起点,终点”,单位为度(°)。
经度范围
经度区间,格式为“起点,终点”,单位为度(°)。
区域要素
高空层次类型
设置训练数据的高空层次类型,在“预训练”场景下可下拉选择一种数据集中识别到的层次类型。
高空要素
设置训练数据的高空要素信息,“预训练”场景中在编辑参数弹窗有预置参数和来自数据集参数可供选择,同时在权重配置中可设置参数对应权重。
- 预置参数:模型预置的参数列表,若数据集中不存在相关参数,则对应参数不可选择。
- 来自数据集参数:数据集中识别到的非预置参数列表,可根据需要进行勾选。
高空层次
设置训练数据的模式层信息,在“预训练”的场景中可根据选择的高空层次类型,设置对应类型的高空层次,训练任务会根据您配置的高空层次对模型重新进行训练。
表面要素
设置训练数据的表面要素信息,“预训练”场景中在编辑参数弹窗有预置参数和来自数据集参数可供选择,同时在权重配置中可设置参数对应权重。
- 预置参数:模型预置的参数列表,若数据集中不存在相关参数,则对应参数不可选择。
- 来自数据集参数:数据集中识别到的非预置参数列表,可根据需要进行勾选。
表面观测
设置训练数据的表面观测信息,“预训练”场景中在编辑参数弹窗有预置参数和来自数据集参数可供选择,同时在权重配置中可设置参数对应权重。
- 预置参数:模型预置的参数列表,若数据集中不存在相关参数,则对应参数不可选择。
- 来自数据集参数:数据集中识别到的非预置参数列表,可根据需要进行勾选。
边界条件
在“预训练”场景下可以根据需要勾选表面静态量用于模型训练,详见表面静态量参数含义。
训练参数配置
训练参数
分辨率
时间分辨率
时间分辨率,即模型输入与输出之间的时间间隔。
全球天气时间分辨率
全球天气输入时间分辨率。
优化器参数
请参考表20进行配置。
正则化参数
请参考表20进行配置。
高级设置
高级设置
请参考表20进行配置。
训练资源&系统配置
资源配置
计费模式
计费模式
选择训练当前任务的计费模式。
训练单元
训练单元
选择训练模型所需的训练单元。
当前展示的完成本次训练所需要的最低训练单元要求。
单实例训练单元数
单实例训练单元数
选择单实例训练单元数。
实例数
实例数
选择实例数。
优先级
优先级
优先级相同的任务,先创建先执行。
订阅提醒
订阅提醒
订阅提醒
该功能开启后,系统将在任务状态更新时,通过短信或邮件将提醒发送给用户。
发布模型
开启自动发布
开启自动发布
开启自动发布后,模型训练完成的最终产物会自动发布为空间资产,以便对模型进行压缩、部署、评测等操作或共享给其他空间。
基本信息
名称
名称
训练任务名称。
描述
描述
训练任务描述。
- 参数填写完成后,单击“立即创建”。
- 创建好训练任务后,页面将返回“模型训练”页面,可随时查看当前任务的状态。
创建科学计算大模型区域降水预测微调任务
创建科学计算大模型区域降水预测微调任务步骤如下:
- 登录ModelArts Studio大模型开发平台,在“我的空间”模块,单击进入所需空间。
图17 我的空间
- 在左侧导航栏中选择“模型开发 > 模型训练”,单击右上角“创建训练任务”。
- 在“选择模型”页面,选择“模型广场 > 科学计算大模型 > 模型”,单击“确定”进入“创建训练任务”页面。
- 在“创建训练任务”页面,参考表17完成训练参数设置。
其中,“数据配置”展示了各训练数据涉及到的全部参数,请根据具体前端页面展示的参数进行设置。
表17 科学计算大模型区域降水预测微调参数说明 导航页签
参数分类
参数子类
参数名称
参数说明
训练数据配置
训练配置
选择模型
选择模型
可以修改如下信息:
- 来源:选择“模型广场”。
- 类型:选择“科学计算大模型”,并选择训练所用的基础模型和版本。
训练类型
训练类型
选择“微调”。
训练目标
训练目标
选择“全量微调”。
- 全量微调:在模型进行有监督微调时,对大模型的所有参数进行更新。这种方法通常能够实现最佳的模型性能,但需要消耗大量计算资源和时间,计算开销较大。
数据集
选择数据集
选择数据集
选择数据集中已发布的数据集,这里数据集需为再分析类型数据,同时需要完成加工作业,加工时需选择气象预处理算子。
时间范围
训练集
选择训练数据中的部分时间数据,训练数据集尽可能多一些。
验证集
选择验证集中的部分时间数据,验证集数据不能跟训练集数据重合。
数据配置
上游模型
高空层次类型
设置上游模型训练数据的高空层次类型,在“微调”场景下仅做展示原模型的上游模型高空层次类型。
高空要素
设置上游模型训练数据的高空要素信息,“微调”场景下仅做展示原模型的上游模型高空要素。
高空层次
设置上游模型训练数据的高空层次信息,在“微调”场景下仅做展示原模型的上游模型高空层次。
表面要素
设置上游模型训练数据的表面要素信息,“微调”场景下仅做展示原模型的上游模型表面要素。
区域要素
表面要素
设置训练数据的表面要素信息,“微调”场景中在编辑参数弹窗仅可调整目标模型参数对应权重。
- 预置参数:模型预置的参数列表。
- 来自数据集参数:数据集中识别到的非预置参数。
表面观测
设置训练数据的表面观测信息,“微调”场景中在编辑参数弹窗仅可调整目标模型参数对应权重。
- 预置参数:模型预置的参数列表。
- 来自数据集参数:数据集中识别到的非预置参数列表。
边界条件
在“微调”场景下仅做展示原模型边界条件。详见表面静态量参数含义。
训练参数配置
训练参数
优化器参数
请参考表20进行配置。
正则化参数
请参考表20进行配置。
高级设置
高级设置
请参考表20进行配置。
训练资源&系统配置
资源配置
计费模式
计费模式
选择训练当前任务的计费模式。
训练单元
训练单元
选择训练模型所需的训练单元。
当前展示的完成本次训练所需要的最低训练单元要求。
单实例训练单元数
单实例训练单元数
选择单实例训练单元数。
实例数
实例数
选择实例数。
优先级
优先级
优先级相同的任务,先创建先执行。
订阅提醒
订阅提醒
订阅提醒
该功能开启后,系统将在任务状态更新时,通过短信或邮件将提醒发送给用户。
发布模型
开启自动发布
开启自动发布
开启自动发布后,模型训练完成的最终产物会自动发布为空间资产,以便对模型进行压缩、部署、评测等操作或共享给其他空间。
基本信息
名称
名称
训练任务名称。
描述
描述
训练任务描述。
- 参数填写完成后,单击“立即创建”。
- 创建好训练任务后,页面将返回“模型训练”页面,可随时查看当前任务的状态。
创建科学计算大模型区域降水预测预训练任务
创建科学计算大模型区域降水预测预训练任务步骤如下:
- 登录ModelArts Studio大模型开发平台,在“我的空间”模块,单击进入所需空间。
图18 我的空间
- 在左侧导航栏中选择“模型开发 > 模型训练”,单击右上角“创建训练任务”。
- 在“选择模型”页面,选择“模型广场 > 科学计算大模型 > 模型”,单击“确定”进入“创建训练任务”页面。
- 在“创建训练任务”页面,参考表18完成训练参数设置。
其中,“数据配置”展示了各训练数据涉及到的全部参数,请根据具体前端页面展示的参数进行设置。
表18 科学计算大模型区域降水预测预训练参数说明 导航页签
参数分类
参数子类
参数名称
参数说明
训练数据配置
训练配置
选择模型
选择模型
可以修改如下信息:
- 来源:选择“模型广场”。
- 类型:选择“科学计算大模型”,并选择训练所用的基础模型和版本。
训练类型
训练类型
选择“预训练”。
数据集
选择数据集
选择数据集
选择数据集中已发布的数据集,这里数据集需为再分析类型数据,同时需要完成加工作业,加工时需选择气象预处理算子。
时间范围
训练集
选择训练数据中的部分时间数据,训练数据集尽可能多一些。
验证集
选择验证集中的部分时间数据,验证集数据不能跟训练集数据重合。
数据配置
区域范围
水平分辨率
水平分辨率,地理数据集或图像中两个不同格点之间可辨识的最小距离,单位为度(°)。
纬度范围
纬度区间,格式为“起点,终点”,单位为度(°)。
经度范围
经度区间,格式为“起点,终点”,单位为度(°)。
上游模型
高空层次类型
设置上游模型训练数据的高空层次类型,在“预训练”场景中可下拉选择一种数据集上游模型子目录中识别到的层次类型。
高空要素
设置上游模型训练数据的高空要素信息,“预训练”场景中在编辑参数弹窗可选择需要用到的上游模型特征参数。
高空层次
设置上游模型训练数据的模式层信息,在“预训练”的场景中可根据选择的高空层次类型,设置对应类型的高空层次,训练任务会根据您配置的上游模型高空层次对模型重新进行训练。
表面要素
设置上游模型训练数据的表面要素信息,“预训练”场景中在编辑参数弹窗可选择需要用到的上游模型特征参数。
区域要素
表面要素
设置训练数据的表面要素信息,“预训练”场景中在编辑参数弹窗有预置参数和来自数据集参数可供选择,同时在权重配置中可设置参数对应权重。
- 预置参数:模型预置的参数列表,若数据集当前模型子目录中不存在相关参数,则对应参数不可选择。
- 来自数据集参数:数据集当前模型子目录中识别到的非预置参数列表,可根据需要进行勾选。
表面观测
设置训练数据的表面观测信息,“预训练”场景中在编辑参数弹窗有预置参数和来自数据集参数可供选择,同时在权重配置中可设置参数对应权重。
- 预置参数:模型预置的参数列表,若数据集当前模型子目录中不存在相关参数,则对应参数不可选择。
- 来自数据集参数:数据集当前模型子目录中识别到的非预置参数列表,可根据需要进行勾选。
边界条件
在“预训练”场景下可以根据需要勾选表面静态量用于模型训练,详见表面静态量参数含义。
训练参数配置
训练参数
分辨率
时间分辨率
时间分辨率,即模型输入与输出之间的时间间隔。
全球天气时间分辨率
全球天气输入时间分辨率。
优化器参数
请参考表20进行配置。
正则化参数
请参考表20进行配置。
高级设置
高级设置
请参考表20进行配置。
训练资源&系统配置
资源配置
计费模式
计费模式
选择训练当前任务的计费模式。
训练单元
训练单元
选择训练模型所需的训练单元。
当前展示的完成本次训练所需要的最低训练单元要求。
单实例训练单元数
单实例训练单元数
选择单实例训练单元数。
实例数
实例数
选择实例数。
优先级
优先级
优先级相同的任务,先创建先执行。
订阅提醒
订阅提醒
订阅提醒
该功能开启后,系统将在任务状态更新时,通过短信或邮件将提醒发送给用户。
发布模型
开启自动发布
开启自动发布
开启自动发布后,模型训练完成的最终产物会自动发布为空间资产,以便对模型进行压缩、部署、评测等操作或共享给其他空间。
基本信息
名称
名称
训练任务名称。
描述
描述
训练任务描述。
- 参数填写完成后,单击“立即创建”。
- 创建好训练任务后,页面将返回“模型训练”页面,可随时查看当前任务的状态。
参数名 |
区域范围 |
水平分辨率 |
参数含义 |
---|---|---|---|
TERRAIN_HEIGHT_025 |
全球 |
0.25 |
地形高度。 |
SOIL_TYPE_025 |
全球 |
0.25 |
地表土壤的分类,它影响土壤的物理和化学特性,如土壤的水分保持能力、热容量和导热性。 |
LAND_MASK_025 |
全球 |
0.25 |
二维数组,用于表示模型网格中每个单元格是否是陆地。 |
OCEAN_MASK_025 |
全球 |
0.25 |
二维数组,用于表示模型网格中每个单元格是否是海洋。 |
SOIL_TYPE_1_120 |
全球 |
1/120 |
地表土壤的分类,它影响土壤的物理和化学特性,如土壤的水分保持能力、热容量和导热性。 |
LAND_MASK_1_120 |
全球 |
1/120 |
二维数组,用于表示模型网格中每个单元格是否是陆地。 |
TERRAIN_HEIGHT_1_120 |
中国区域 |
1/120 |
地形高度。 |
DAY_PROGRESS |
全球 |
0.25 |
日变化。 |
YEAR_PROGRESS |
全球 |
0.25 |
季节变化。 |
TISR |
全球 |
0.25 |
天顶辐射功率。 |
TISR_1H |
全球 |
0.25 |
天顶辐射1小时累计能量。 |
TISR_3H |
全球 |
0.25 |
天顶辐射3小时累计能量。 |
TISR_6H |
全球 |
0.25 |
天顶辐射6小时累计能量。 |
TISR_24H |
全球 |
0.25 |
天顶辐射24小时累计能量。 |
通用参数
参数分类 |
参数名称 |
参数说明 |
---|---|---|
正则化参数 |
路径删除概率 |
用于定义路径删除机制中的删除概率。路径删除是一种正则化技术,它在训练过程中随机删除一部分的网络连接,以防止模型过拟合。这个值越大,删除的路径越多,模型的正则化效果越强,但同时也可能会降低模型的拟合能力。取值范围:[0,1)。 |
特征删除概率 |
用于定义特征删除机制中的删除概率。特征删除(也称为特征丢弃)是另一种正则化技术,它在训练过程中随机删除一部分的输入特征,以防止模型过拟合。这个值越大,删除的特征越多,模型的正则化效果越强,但同时也可能会降低模型的拟合能力。取值范围:[0,1)。 |
|
注意力丢弃率 |
注意力丢弃率,是一种用于正则化技术。 |
|
输入加噪概率 |
定义了给输入数据加噪音的概率,定义了给输入数据加噪音的概率。加噪音是一种正则化技术,它通过在输入数据中添加随机噪音来增强模型的泛化能力。取值范围:[0,1]。 |
|
输入加噪尺度 |
给输入数据加噪音的尺度,定义了给输入数据加噪音的尺度。这个值越大,添加的噪音越强烈,模型的正则化效果越强,但同时也可能会降低模型的拟合能力。取值范围:[0,1]。 |
|
输出加噪概率 |
给输出数据加噪音的概率,定义了给输出数据加噪音的概率。加噪音是一种正则化技术,它通过在模型的输出中添加随机噪音来增强模型的泛化能力。取值范围:[0,1]。 |
|
输出加噪尺度 |
给输出数据加噪音的尺度,定义了给输出数据加噪音的尺度。这个值越大,添加的噪音越强烈,模型的正则化效果越强,但同时也可能会降低模型的拟合能力。取值范围:[0,1]。 |
|
优化器参数 |
训练轮数 |
表示完成全部训练数据集训练的次数。每个轮次都会遍历整个数据集一次。取值范围:[1-1000]。 |
损失类型 |
用来衡量模型预测结果与真实结果之间的差距的函数,提供MAE(平均绝对误差)、MSE(均方误差)两种损失函数。
|
|
优化器类型 |
优化器种类。优化器是用于更新模型参数的算法,目前支持ADAM优化器。 |
|
Adam一阶矩估计的指数衰减率(beta1) |
用于定义ADAM优化器中的一阶矩估计的指数衰减率。一阶矩估计相当于动量,可以加速梯度在相关方向的下降并抑制震荡。取值范围:(0,1)。 |
|
Adam二阶矩估计的指数衰减率(beta2) |
用于定义ADAM优化器中的二阶矩估计的指数衰减率。二阶矩估计相当于RMSProp,可以调整学习率。取值范围:(0,1)。 |
|
权重衰减 |
通过在损失函数中加入与模型权重大小相关的惩罚项,鼓励模型保持较小的权重,防止过拟合或模型过于复杂,取值需≥0。 |
|
学习率 |
学习率决定每次训练中模型参数更新的幅度。 选择合适的学习率至关重要:
预训练时,默认值为:0.00001,范围为[0, 0.001]。 |
|
学习率调节器类型 |
用于选择学习率调度器的类型。学习率调度器可以在训练过程中动态地调整学习率,以改善模型的训练效果。目前支持CosineDecayLR调度器。 |
|
高级设置 |
checkpoints |
模型训练任务过程中,用于保存模型权重和状态的机制。若因保存过多导致OBS容量不足,则需扩容。当前仅支持基于保存180天内的checkpoints做训练,180天到期后自动删除。 |