�单，其中的模型架构是自行实现的，因此能够像 NeMo 那样做许多优化，不过这也导致模型数量较少。</li></ul><p>因此，笔者建议可以先使用 TRL 及相关的库进行实验，尝试多种微调方法，等效果稳定后再迁移到 torchtune 或 NeMo 上以提升性能。</p><p>因此，本书主要使用更为流行的 LLaMA-Factory 工具，同时也会介绍 torchtune 中的相关配置。</p><h2 id="使用-llama-factory-在本地微调大模型" tabindex="-1">�