文章详情

TRL

近年来，大语言模型（LLMs）的快速发展推动了下游应用的繁荣，但如何高效地对这些模型进行对齐和微调，依然是研究与应用的热点。Hugging Face 开源的 TRL（Transformer Reinforcement Learning） 框架，提供了基于强化学习的语言模型训练方法，并支持 SFT（监督微调）、PPO（近端策略优化）、DPO（直接偏好优化）等多

4 阅读