LlamaFactory可视化微调大模型 - 参数详解_开发测试

创始人

2025-01-15 13:05:45

0次

LLaMA Factory 是一个用于微调大型语言模型的强大工具，特别是针对 LLaMA 系列模型。

可以适应不同的模型架构和大小。

支持多种微调技术，如全参数微调、LoRA（ Low-Rank Adaptation ）、QLoRA（ Quantized LoRA ）等。

还给我们提供了简单实用的命令行接口。

支持多 cpu 训练，多任务微调，还有各种内存优化技术，如梯度检查点、梯度累积等。

支持混合精度训练，提高训练效率。

本文不再赘述 LlamaFactory 的安装过程

打开我们 LlamaFactory 的 web 运行界面，进入根目录执行下列命令：

llamafactory-cli webui

看到下列界面

在浏览器打开我们开启的 webui 界面 http://127.0.0.1:7860：

我们依次来解释每个参数的选择：

这里是语言选择

选择 zh 即可。

模型选择

选择适合自己的模型，这里都会从 Hugging Face 里面下载，

这一步是自定义路径

一般就用选择好的默认路径即可。

微调方法：

这里有三种，full全参数微调， Freeze（冻结部分参数） LoRA&

第七分钟知晓！aapoker透... 第七分钟知晓！aapoker透视怎么用，aapoker俱乐部靠谱吗（透视）详细教程（确实有挂）1.a...

热点推荐！微扑克有脚本，wop... 热点推荐！微扑克有脚本，wopoker游戏辅助器，透明挂教程（有挂规律）-哔哩哔哩;人气非常高，ai...

5分钟指导！安装不了wepok... 5分钟指导！安装不了wepoker，德普之星透视辅助ios（透视）2025版教程（有挂规律）1、德普...

黑科技存在！德扑之星隐藏功能，... 黑科技存在！德扑之星隐藏功能，微扑克辅助钻石，安装教程（有挂教程）-哔哩哔哩；致您一封信；亲爱德扑之...

五分钟俱乐部！aapoker透... 五分钟俱乐部！aapoker透视脚本入口，wepoker私人辅助器（透视）攻略方法（有挂技巧）亲，关...

玩家爆料！微扑克必胜技巧，微扑... 玩家爆料！微扑克必胜技巧，微扑克辅助是真的，揭秘教程（有挂教程）-哔哩哔哩;亲，有的，ai轻松简单，...

五分钟熟悉！智星德州菠萝插件官... 五分钟熟悉！智星德州菠萝插件官网，hhpoker透视脚本（透视）可靠教程（有挂攻略）1、智星德州菠萝...

来一盘！wepoke有辅助挂，... 来一盘！wepoke有辅助挂，wpk发牌逻辑，科技教程（今日头条）-哔哩哔哩;wepoke有辅助挂A...

第六分钟领会！wepoker挂... 第六分钟领会！wepoker挂，wepoker辅助器下载（透视）力荐教程（存在有挂）1、wepoke...

插件辅助挂！微扑克代打，德州之... 插件辅助挂！微扑克代打，德州之星辅助器多少钱，wepoke教程（有挂工具）-哔哩哔哩;1、让任何用户...