LlamaFactory可视化微调大模型 - 参数详解_开发测试

创始人

2025-01-15 13:05:45

0次

LLaMA Factory 是一个用于微调大型语言模型的强大工具，特别是针对 LLaMA 系列模型。

可以适应不同的模型架构和大小。

支持多种微调技术，如全参数微调、LoRA（ Low-Rank Adaptation ）、QLoRA（ Quantized LoRA ）等。

还给我们提供了简单实用的命令行接口。

支持多 cpu 训练，多任务微调，还有各种内存优化技术，如梯度检查点、梯度累积等。

支持混合精度训练，提高训练效率。

本文不再赘述 LlamaFactory 的安装过程

打开我们 LlamaFactory 的 web 运行界面，进入根目录执行下列命令：

llamafactory-cli webui

看到下列界面

在浏览器打开我们开启的 webui 界面 http://127.0.0.1:7860：

我们依次来解释每个参数的选择：

这里是语言选择

选择 zh 即可。

模型选择

选择适合自己的模型，这里都会从 Hugging Face 里面下载，

这一步是自定义路径

一般就用选择好的默认路径即可。

微调方法：

这里有三种，full全参数微调， Freeze（冻结部分参数） LoRA&

阶段f辅助！wepoker透视... 阶段f辅助！wepoker透视方法，hhpoker德州有挂吗，解密教程（有挂工具）hhpoker德州...

诀窍f辅助！hhpoker德州... 诀窍f辅助！hhpoker德州作弊，wejoker手机版透视脚本，关于教程（讲解有挂）1、首先打开w...

教材f辅助！werplan怎么... 教材f辅助！werplan怎么透视，悟空黑桃a有挂嘛，解密教程（讲解有挂）1、悟空黑桃a有挂嘛公共底...

诀窍f辅助！如何下载wepok... 诀窍f辅助！如何下载wepoker安装包，hhpoker德州真的假的，分享教程（有挂透视）如何下载w...

总结f辅助！wepoker辅助... 总结f辅助！wepoker辅助器怎么弄，pokernow辅助工具，推荐教程（确实有挂）进入游戏-大厅...

要领f辅助！约局吧游戏挂，xp... 要领f辅助！约局吧游戏挂，xpoker怎么作弊，辅助教程（真实有挂）1、进入到约局吧游戏挂是否有挂之...

总结f辅助！德州私人局脚本，a... 总结f辅助！德州私人局脚本，aapoker破解侠是真的吗，关于教程（有挂解密）1、上手简单，内置详细...

绝活f辅助！wepoker轻量... 绝活f辅助！wepoker轻量版辅助，hhpoker透视工具，解迷教程（有挂猫腻）一、wepoker...

大纲f辅助！拱趴大菠萝挂哪里，... 大纲f辅助！拱趴大菠萝挂哪里，wepoker线上大神，普及教程（有挂存在）1、在拱趴大菠萝挂哪里插件...

技法f辅助！哈糖大菠萝能开挂吗... 技法f辅助！哈糖大菠萝能开挂吗，hhpoker德州机器人，曝光教程（有挂分析）1、上手简单，内置详细...