# 低内存微调

Qwen2.5是通义大语言模型的最新系列，提供从5亿到720亿参数的多种模型，在编码、数学、指令遵循和长文本处理方面有显著改进。

Llama-3.2-3B是Meta推出的多语言大语言模型，包含3B参数的预训练和指令调优生成模型，针对多语言对话用例进行了优化。