-
分隔转换
![]()
string 是 无 分割后的字段 配置分隔后的字段，可为多个： 位置：分隔后字段的位置。 输出字段名：分隔后的字段名。 map 是 无 数据处理规则 将输入字段的值按指定的分隔符分隔后，依次赋给配置的新字段。 配置分割后字段列数，大于原始数据实际可分割出来的字段列数，当前行成为脏数据。
来自：帮助中心 -
类型转换
![]()
-
获取集群访问的地址
![]()
获取集群访问的地址 功能介绍 该API用于通过集群ID获取集群访问的地址，包括PrivateIP与PublicIP 集群管理的URL格式为：https://Endpoint/uri。其中uri为资源路径，也即API访问的路径。 调用方法 请参见如何调用API。 URI GET /
来自：帮助中心 -
GROUP BY转换
![]()
GROUP BY转换 MySQL/ADB分组查询的时候允许查询非分组字段，不报错；DWS分组查询时只能查询分组字段和聚集函数，报错。因此补齐没有group by的查询分组字段。 输入示例 1 SELECT e.department_id, department_name, ROUND(AVG(salary)
来自：帮助中心 -
类型转换
![]()
-
类型转换
![]()
-
类型转换
![]()
-
拼接转换
![]()
拼接转换 概述 “拼接转换”算子，将已有字段的值通过连接符拼接，生成新的字段。 输入与输出 输入：需要拼接的字段 输出：拼接后的字段 参数说明 表1 算子参数说明 参数 含义 类型 是否必填 默认值 输出字段名 配置拼接后的字段名。 string 是 无 分隔符 配置拼接符，可为空。
来自：帮助中心 -
类型转换
![]()
-
线下IDC使用EIP对外提供IPv6服务
![]()
扩展到云上的主机为互联网提供服务。 购买公网NAT网关。 虚拟私有云：选择2.a中创建的VPC。 子网：选择2.a中创建的VPC下的子网。 具体操作请参见购买公网NAT网关。 添加DNAT规则。 选择1中购买的EIP，并根据线下IDC的私网IP地址和端口，设置DNAT规则。例如选
来自：帮助中心 -
查看预定义地址组
![]()
每天自动更新地址组中的IP地址。 添加至黑/白名单，如果回源IP改变，您需手动修改对应黑/白名单中的IP地址。 预定义地址组仅支持查看，不支持添加、修改、删除操作。 查看预定义地址组 登录管理控制台。 单击管理控制台左上角的，选择区域。 在左侧导航栏中，单击左上方的，选择“安全与合规
来自：帮助中心 -
管理IP地址组内的IP地址条目
![]()
管理IP地址组内的IP地址条目 在IP地址组内添加IP地址条目 在IP地址组内修改IP地址条目 在IP地址组内批量导入IP地址条目 删除IP地址组内的IP地址条目 父主题： IP地址组
来自：帮助中心 -
训练中的权重转换说明
![]()
mg_hf.sh脚本，自定义环境变量的值，并在脚本的首行中添加 cd /home/ma-user/ws/llm_train/AscendSpeed/ModelLink 命令，随后运行该脚本。 其中环境变量详细介绍如下： 表1 权重转换脚本中的环境变量 参数 示例 参数说明 $1 hf2hg、mg2hf
来自：帮助中心 -
训练中的权重转换说明
![]()
--model-type：模型类型。 --loader：选择对应加载模型脚本的名称。 --saver：选择模型保存脚本的名称。 --tensor-model-parallel-size：${TP}张量并行数，需要与训练脚本中的TP值配置一样。 --pipeline-model-paralle
来自：帮助中心 -
训练中的权重转换说明
![]()
--model-type：模型类型。 --loader：选择对应加载模型脚本的名称。 --saver：选择模型保存脚本的名称。 --tensor-model-parallel-size：${TP}张量并行数，需要与训练脚本中的TP值配置一样。 --pipeline-model-paralle
来自：帮助中心 -
训练中的权重转换说明
![]()
mg_hf.sh脚本，自定义环境变量的值，并在脚本的首行中添加 cd /home/ma-user/ws/llm_train/AscendSpeed/ModelLink 命令，随后运行该脚本。 其中环境变量详细介绍如下： 表1 权重转换脚本中的环境变量 参数 示例 参数说明 $1 hf2hg、mg2hf
来自：帮助中心 -
训练中的权重转换说明
![]()
mg_hf.sh脚本，自定义环境变量的值，并在脚本的首行中添加 cd /home/ma-user/ws/llm_train/AscendSpeed/ModelLink 命令，随后运行该脚本。 其中环境变量详细介绍如下： 表1 权重转换脚本中的环境变量 参数 示例 参数说明 $1 hf2hg、mg2hf
来自：帮助中心 -
训练中的权重转换说明
![]()
mg_hf.sh脚本，自定义环境变量的值，并在脚本的首行中添加 cd /home/ma-user/ws/llm_train/AscendSpeed/ModelLink 命令，随后运行该脚本。 其中环境变量详细介绍如下： 表1 权重转换脚本中的环境变量 参数 示例 参数说明 $1 hf2hg、mg2hf
来自：帮助中心 -
训练中的权重转换说明
![]()
mg_hf.sh脚本，自定义环境变量的值，并在脚本的首行中添加 cd /home/ma-user/ws/llm_train/AscendSpeed/ModelLink 命令，随后运行该脚本。 其中环境变量详细介绍如下： 表1 权重转换脚本中的环境变量 参数 示例 参数说明 $1 hf2hg、mg2hf
来自：帮助中心 -
训练中的权重转换说明
![]()
mg_hf.sh脚本，自定义环境变量的值，并在脚本的首行中添加 cd /home/ma-user/ws/llm_train/AscendSpeed/ModelLink 命令，随后运行该脚本。 其中环境变量详细介绍如下： 表1 权重转换脚本中的环境变量 参数 示例 参数说明 $1 hf2hg、mg2hf
来自：帮助中心 -
训练中的权重转换说明
![]()
--model-type：模型类型。 --loader：选择对应加载模型脚本的名称。 --saver：选择模型保存脚本的名称。 --tensor-model-parallel-size：${TP}张量并行数，需要与训练脚本中的TP值配置一样。 --pipeline-model-paralle
来自：帮助中心
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
