文章详情
技巧1:快速验证数据格式 技巧2:多实验管理 技巧3:混合精度选择 技巧4:预加载数据到内存 技巧5:断点续训 技巧6:LoRA目标层精细控制 lora_target: all lora_target: q_proj,k_proj,v_proj,o_proj,gate_proj,up_proj,down_proj 技巧7:训练时动态调整超参 cosine +
3 阅读
请输入邀请码解锁全文内容