# 支持的模型列表 模型列表分为[表1 大语言模型列表]和[表2 多模态模型列表]，详细如下。 表1支持的大语言模型列表和权重获取地址 | **模型系列** | **训练模型** | **训练场景** | **训练框架** | **支持版本** | **开源权重文件获取地址** | |:---|:---|:---|:---|:---|:---| | DeepSeek系列 | DeepSeek-V3-671B | 预训练、微调 | MindSpeed-LLM | \>=6.5.902版本 | | | DeepSeek系列 | DeepSeek-V2-Lite 16B | 预训练、Full微调 | MindSpeed-LLM | \>=6.5.906版本 | | | Qwen2系列 | Qwen2-0.5B | 预训练、微调 | MindSpeed-LLM | \>=6.5.902版本 | | | Qwen2系列 | Qwen2-0.5B | 预训练、微调 | LlamaFactory | \>=6.5.902版本 | | | Qwen2系列 | Qwen2-1.5B | 预训练、微调 | MindSpeed-LLM | \>=6.5.902版本 | | | Qwen2系列 | Qwen2-7B | 预训练、微调 | MindSpeed-LLM | \>=6.5.902版本 | | | Qwen2系列 | Qwen2-7B | 预训练、微调 | LlamaFactory | \>=6.5.902版本 | | | Qwen2系列 | Qwen2-72B | 预训练、微调 | MindSpeed-LLM | \>=6.5.902版本 | | | Qwen2系列 | Qwen2-72B | 预训练、微调 | LlamaFactory | \>=6.5.902版本 | | | Qwen2.5系列 | Qwen2.5-0.5B | 预训练、微调 | MindSpeed-LLM | \>=6.5.902版本 | | | Qwen2.5系列 | Qwen2.5-0.5B | 预训练、微调 | LlamaFactory | \>=6.5.902版本 | | | Qwen2.5系列 | Qwen2.5-7B | 预训练、微调 | MindSpeed-LLM | \>=6.5.902版本 | | | Qwen2.5系列 | Qwen2.5-7B | 预训练、微调 | LlamaFactory | \>=6.5.902版本 | | | Qwen2.5系列 | Qwen2.5-14B | 预训练、微调 | MindSpeed-LLM | \>=6.5.902版本 | | | Qwen2.5系列 | Qwen2.5-14B | 预训练、微调 | LlamaFactory | \>=6.5.902版本 | | | Qwen2.5系列 | Qwen2.5-14B | 强化学习 | LlamaFactory | \>=6.5.907版本 | | | Qwen2.5系列 | Qwen2.5-32B | 预训练、微调 | MindSpeed-LLM | \>=6.5.902版本 | | | Qwen2.5系列 | Qwen2.5-32B | 预训练、微调 | LlamaFactory | \>=6.5.902版本 | | | Qwen2.5系列 | Qwen2.5-32B | 强化学习 | VeRL | \>=6.5.907版本 | | | Qwen2.5系列 | Qwen2.5-72B | 预训练、微调 | LlamaFactory | \>=6.5.902版本 | | | Qwen2.5系列 | Qwen2.5-72B | 预训练、微调 | MindSpeed-LLM | \>=6.5.902版本 | | | Qwen2.5系列 | Qwen2.5-72B | 强化学习 | LlamaFactory | \>=6.5.907版本 | | | Qwen3系列 | Qwen3-0.6B | 预训练、微调 | MindSpeed-LLM | \>=6.5.905版本 | | | Qwen3系列 | Qwen3-0.6B | 预训练、微调 | LlamaFactory | \>=6.5.905版本 | | | Qwen3系列 | Qwen3-1.7B | 预训练、微调 | MindSpeed-LLM | \>=6.5.905版本 | | | Qwen3系列 | Qwen3-1.7B | 预训练、微调 | LlamaFactory | \>=6.5.905版本 | | | Qwen3系列 | Qwen3-4B | 预训练、微调 | MindSpeed-LLM | \>=6.5.905版本 | | | Qwen3系列 | Qwen3-4B | 预训练、微调 | LlamaFactory | \>=6.5.905版本 | | | Qwen3系列 | Qwen3-4B | 强化学习 | VeRL | \>=6.5.907版本 | | | Qwen3系列 | Qwen3-8B | 强化学习 | VeRL | \>=6.5.906版本 | | | Qwen3系列 | Qwen3-8B | 预训练、微调 | MindSpeed-LLM | \>=6.5.905版本 | | | Qwen3系列 | Qwen3-8B | 预训练、微调 | LlamaFactory | \>=6.5.905版本 | | | Qwen3系列 | Qwen3-14B | 预训练、微调 | MindSpeed-LLM | \>=6.5.905版本 | | | Qwen3系列 | Qwen3-14B | 预训练、微调 | LlamaFactory | \>=6.5.905版本 | | | Qwen3系列 | Qwen3-32B | 强化学习 | VeRL | \>=6.5.906版本 | | | Qwen3系列 | Qwen3-32B | 预训练、微调 | MindSpeed-LLM | \>=6.5.905版本 | | | Qwen3系列 | Qwen3-32B | 预训练、微调 | LlamaFactory | \>=6.5.905版本 | | | Qwen3系列 | Qwen3-30B-A3B | 预训练、Full微调 | MindSpeed-LLM | \>=6.5.905版本 | | | Qwen3系列 | Qwen3-30B-A3B | 预训练、微调 | LlamaFactory | \>=6.5.905版本 | | | Qwen3系列 | Qwen3-235b-A22B | 预训练、Full微调 | MindSpeed-LLM | \>=6.5.905版本 | | | Qwen3系列 | Qwen3-235b-A22B | 预训练、微调 | LlamaFactory | \>=6.5.905版本 | | | Llama系列 | Llama3.1 -8B/70B | 预训练、微调 | MindSpeed-LLM | \>=6.5.902版本 | | | Llama系列 | Llama3.1 -8B/70B | 预训练、微调 | LlamaFactory | \>=6.5.902版本 | | | Llama系列 | Llama3.2 -1B/3B | 预训练、微调 | MindSpeed-LLM | \>=6.5.902版本 | | | Llama系列 | Llama3.2 -1B/3B | 预训练、微调 | LlamaFactory | \>=6.5.902版本 | | | glm系列 | glm-4-9b-chat | 预训练、微调 | MindSpeed-LLM | \>=6.5.902版本 | | | glm系列 | glm-4-9b-chat | 预训练、微调 | LlamaFactory | \>=6.5.902版本 | | | Mistral AI系列 | Mixtral-8x7B-Instruct-v0.1 | 预训练、微调 | MindSpeed-LLM | \>=6.5.902版本 | | 表2支持的多模态模型列表和权重获取地址 | **模型系列** | **模型名称** | **训练场景** | **训练框架** | **支持版本** | **开源权重文件获取地址**↵ | |:---|:---|:---|:---|:---|:---| | Qwen2 VL系列 | Qwen2-VL-2B | 预训练、微调 | LlamaFactory | \>=6.5.902版本 | | | Qwen2 VL系列 | Qwen2-VL-7B | 预训练、微调 | LlamaFactory | \>=6.5.902版本 | | | Qwen2 VL系列 | Qwen2-VL-72B | 预训练、微调 | LlamaFactory | \>=6.5.902版本 | [https://huggingface.co/Qwen/Qwen2-VL-72B-Instruct](https://huggingface.co/Qwen/Qwen2-VL-72B-Instruct/tree/main) | | Qwen2.5 VL系列 | Qwen2.5-VL-3B | 强化学习 | VeRL | \>=6.5.906版本 | | | Qwen2.5 VL系列 | Qwen2.5-VL-3B | 预训练、微调 | MindSpeed-MM | \>=6.5.907版本 | | | Qwen2.5 VL系列 | Qwen2.5-VL-3B | 预训练、微调 | LlamaFactory | \>=6.5.907版本 | | | Qwen2.5 VL系列 | Qwen2.5-VL-7B | 预训练、微调 | LlamaFactory | \>=6.5.905版本 | | | Qwen2.5 VL系列 | Qwen2.5-VL-7B | 预训练、微调 | MindSpeed-MM | \>=6.5.907版本 | | | Qwen2.5 VL系列 | Qwen2.5-VL-7B | 强化学习 | VeRL | \>=6.5.906版本 | | | Qwen2.5 VL系列 | Qwen2.5-VL-32B | 预训练、微调 | LlamaFactory | \>=6.5.906版本 | | | Qwen2.5 VL系列 | Qwen2.5-VL-32B | 强化学习 | VeRL | \>=6.5.905版本 | | | Qwen2.5 VL系列 | Qwen2.5-VL-72B | 预训练、微调 | LlamaFactory | \>=6.5.905版本 | | | Qwen2.5 VL系列 | Qwen2.5-VL-72B | 强化学习 | VeRL | \>=6.5.906版本 | | | Qwen3 VL系列 | Qwen3-VL-8B | 微调 | LlamaFactory | \>=6.5.912版本 | | | Qwen3 VL系列 | Qwen3-VL-8B | 微调 | MindSpeed-MM | \>=6.5.912版本 | | | Qwen3 VL系列 | Qwen3-VL-30B-A3B-Instruct | 强化学习 | VeRL | \>=6.5.911版本 | [Qwen/Qwen3-VL-30B-A3B-Instruct · Hugging Face](https://huggingface.co/Qwen/Qwen3-VL-30B-A3B-Instruct) | | Gemma系列 | Gemma3-27b | 预训练、微调 | LlamaFactory | \>=6.5.905版本 | | | InternVL2.5系列 | InternVL2.5-1b | 预训练、微调 | LlamaFactory | \>=6.5.911版本 | | | InternVL2.5系列 | InternVL2.5-2b | 预训练、微调 | LlamaFactory | \>=6.5.911版本 | https://huggingface.co/OpenGVLab/InternVL2_5-2B | | InternVL2.5系列 | InternVL2.5-8b | 预训练、微调 | LlamaFactory | \>=6.5.911版本 | https://huggingface.co/OpenGVLab/InternVL2_5-8B | | InternVL3系列 | InternVL3-1b | 预训练、微调 | LlamaFactory | \>=6.5.911版本 | https://huggingface.co/OpenGVLab/InternVL3-1B-hf | | InternVL3系列 | InternVL3-8b | 预训练、微调 | LlamaFactory | \>=6.5.911版本 | https://huggingface.co/OpenGVLab/InternVL3-8B-hf | | InternVL3系列 | InternVL3-8b | 预训练、微调 | MindSpeed-MM | \>=6.5.910版本 | | | Intern-lm系列 | Intern-S1 | 预训练、微调 | LlamaFactory | \>=6.5.912版本 | | | Intern-lm系列 | Intern-S1-mini | 预训练、微调 | LlamaFactory | \>=6.5.912版本 | |