LLaMA Factory：修订间差异

2025年1月23日 (四) 16:32的最新版本

LLaMA-Factory 是一个开源项目，它提供了一套全面的工具和脚本，用于微调、服务和基准测试 LLaMA 模型。LLaMA 是 Meta AI 开发的一组基础语言模型。

LLaMA-Factory提供以下内容：

方法	精度	7B	13B	30B	70B	110B	8x7B	8x22B
Full	32	120GB	240GB	600GB	1200GB	2000GB	900GB	2400GB
Full	16	60GB	120GB	300GB	600GB	900GB	400GB	1200GB
Freeze	16	20GB	40GB	80GB	200GB	360GB	160GB	400GB
LoRA/GaLore/APOLLO/BAdam	16	16GB	32GB	64GB	160GB	240GB	120GB	320GB
QLoRA	8	10GB	20GB	40GB	80GB	140GB	60GB	160GB
QLoRA	4	6GB	12GB	24GB	48GB	72GB	30GB	96GB

2025年1月23日 (四) 16:31的版本（查看源代码）阿奔（讨论 \| 贡献）（创建页面，内容为“LLaMA-Factory 是一个开源项目，它提供了一套全面的工具和脚本，用于微调、服务和基准测试 LLaMA 模型。LLaMA 是 Meta AI 开发的一组基础语言模型，在各种自然语言任务上表现出色。 [https://github.com/hiyouga/LLaMA-Factory LLaMA-Factory]提供以下内容：数据预处理和标记化的脚本用于微调 LLaMA 模型的训练流程使用经过训练的模型生成文本的推理脚本评估模型…”）标签：可视化编辑		2025年1月23日 (四) 16:32的最新版本（查看源代码）阿奔（讨论 \| 贡献）无编辑摘要标签：可视化编辑
第1行：		第1行：
	LLaMA-Factory 是一个开源项目，它提供了一套全面的工具和脚本，用于微调、服务和基准测试 LLaMA ~~模型。LLaMA~~ 是 Meta AI ~~开发的一组基础语言模型，在各种自然语言任务上表现出色。~~		LLaMA-Factory 是一个开源项目，它提供了一套全面的工具和脚本，用于微调、服务和基准测试 LLaMA 模型。[[Ollama\|LLaMA]] 是 Meta AI 开发的一组基础语言模型。

	[https://github.com/hiyouga/LLaMA-Factory LLaMA-Factory]提供以下内容：		[https://github.com/hiyouga/LLaMA-Factory LLaMA-Factory]提供以下内容：