�理]中介绍。</li><li><strong>准备硬件资源</strong>，根据模型预估所需的 GPU 资源，具体内容将在[微调所需资源]中介绍。</li><li><strong>「可选」继续预训练</strong>，判断是否需要进行继续预训练，具体内容将在[继续预训练]中介绍。</li><li><strong>指令微调训练</strong>，具体内容将在[微调训练]中介绍。</li><li><strong>「可选」偏好训练</strong>，可以使用 RLHF 或 DPO，具体内容将在[偏好训练]中介�