LlamaFactory可视化微调大模型 - 参数详解_开发测试

创始人

2025-01-15 13:05:45

0次

LLaMA Factory 是一个用于微调大型语言模型的强大工具，特别是针对 LLaMA 系列模型。

可以适应不同的模型架构和大小。

支持多种微调技术，如全参数微调、LoRA（ Low-Rank Adaptation ）、QLoRA（ Quantized LoRA ）等。

还给我们提供了简单实用的命令行接口。

支持多 cpu 训练，多任务微调，还有各种内存优化技术，如梯度检查点、梯度累积等。

支持混合精度训练，提高训练效率。

本文不再赘述 LlamaFactory 的安装过程

打开我们 LlamaFactory 的 web 运行界面，进入根目录执行下列命令：

llamafactory-cli webui

看到下列界面

在浏览器打开我们开启的 webui 界面 http://127.0.0.1:7860：

我们依次来解释每个参数的选择：

这里是语言选择

选择 zh 即可。

模型选择

选择适合自己的模型，这里都会从 Hugging Face 里面下载，

这一步是自定义路径

一般就用选择好的默认路径即可。

微调方法：

这里有三种，full全参数微调， Freeze（冻结部分参数） LoRA&

透视透视！德普之星辅助功能如何... 透视透视！德普之星辅助功能如何设置，hhpoker透视脚本，AA德州教程（有挂工具）1、用户打开应用...

透视有挂！wepOKer可以透... 透视有挂！wepOKer可以透视吗，wepoker辅助透视方法（详细辅助实用技巧）；wpk透视辅助官...

wepoker辅助器安装包!a... wepoker辅助器安装包!aapoker透视插件(透视)确实有挂(可靠技巧)；1、wepoker辅...

透视线上！wepoker透视脚... 透视线上！wepoker透视脚本免费，wepoker透视脚本安卓，微扑克教程（有挂技巧）1、操作简单...

透视好友房！德扑之星透视功能介... 透视好友房！德扑之星透视功能介绍，德扑之星网页透视方法（详细辅助玩家教程）是一款可以让一直输的玩家，...

透视私人局！wepoker辅助... 透视私人局！wepoker辅助器是真的的吗，wpk透视辅助软件，第三方教程（有挂辅助）；1、玩家可以...

wepoker透视脚本免费下载... wepoker透视脚本免费下载!pokernow辅助控制(透视)确实是真的有挂(靠谱教程)1、玩家可...

透视好友！修改捕鱼概率辅助ap... 透视好友！修改捕鱼概率辅助app，poker作弊（详细辅助技巧教程），支持语音通讯、好友开房及战队组...

透视智能ai！wepoker辅... 您好，wepoker辅助器是真的的吗这款游戏可以开挂的，确实是有挂的，需要了解加去Q群【106723...

透视中牌率！wepoker透视... 透视中牌率！wepoker透视软件挂下载，德扑之星透视（详细辅助专业教程）；原来确实真的有挂（需添加...