LlamaFactory可视化微调大模型 - 参数详解_开发测试

创始人

2025-01-15 13:05:45

0次

LLaMA Factory 是一个用于微调大型语言模型的强大工具，特别是针对 LLaMA 系列模型。

可以适应不同的模型架构和大小。

支持多种微调技术，如全参数微调、LoRA（ Low-Rank Adaptation ）、QLoRA（ Quantized LoRA ）等。

还给我们提供了简单实用的命令行接口。

支持多 cpu 训练，多任务微调，还有各种内存优化技术，如梯度检查点、梯度累积等。

支持混合精度训练，提高训练效率。

本文不再赘述 LlamaFactory 的安装过程

打开我们 LlamaFactory 的 web 运行界面，进入根目录执行下列命令：

llamafactory-cli webui

看到下列界面

在浏览器打开我们开启的 webui 界面 http://127.0.0.1:7860：

我们依次来解释每个参数的选择：

这里是语言选择

选择 zh 即可。

模型选择

选择适合自己的模型，这里都会从 Hugging Face 里面下载，

这一步是自定义路径

一般就用选择好的默认路径即可。

微调方法：

这里有三种，full全参数微调， Freeze（冻结部分参数） LoRA&

真的有挂！wepoker有辅助... 真的有挂！wepoker有辅助插件吗，上饶辅助设备出租，攻略教程（原来真的有挂）；上饶辅助设备出租最...

真的是有挂！大菠萝789辅助器... 真的是有挂！大菠萝789辅助器下载，巴蜀长牌辅助，必备教程（原来真的是有挂）；1.巴蜀长牌辅助 ai...

真的是有挂！hhpoker有辅... 真的是有挂！hhpoker有辅助的吗，钱柜麻将辅助器，新版2026教程（一直真的是有挂）；超受欢迎的...

有挂！哈糖大菠萝软件下载，微乐... 【福星临门，好运相随】；有挂！哈糖大菠萝软件下载，微乐广西麻辣，wpk教程（原来有挂）；暗藏猫腻，小...

是有挂的！pokerworld... 是有挂的！pokerworld破解版下载，陕西微乐挖坑控制器，详细教程（一直是有挂的）；致您一封信；...

是有挂的！pokemmo脚本辅... 是有挂的！pokemmo脚本辅助，闲逸斗地主辅助，德州论坛（原来是有挂的）;AI辅助机器人普及解说快...

是有挂！hhpoker德州真的... 是有挂！hhpoker德州真的假的，广东闲来辅助免费，科技教程（原来是有挂）;人气非常高，ai更新快...

真的有挂！wepoker手机插... 【福星临门，好运相随】；真的有挂！wepoker手机插件，亲友联盟能开挂不，必胜教程（一贯真的有挂）...

是有挂的！wepoker游戏安... 是有挂的！wepoker游戏安装教程，超级三加一控制，必赢方法（一直是有挂的）;亲，有的，ai轻松简...

真的是有挂！hhpoker到底... 真的是有挂！hhpoker到底可以辅助吗，微乐小程序微乐家乡辅助器，教你攻略（其实真的是有挂）；大家...