TRL Releases· albertvillanova·· 14 天前AI 评分28
TRL v1.14.0 发布:移除 trl.losses,DPO/KTO/GRPO 改用分块 log-probs
v1.14.0
AI 导读
TRL v1.14.0 移除了 v1.13 引入的 trl.losses 模块,DPO、KTO、GRPO 改为通过 _ChunkedLogProbFunction 流式计算所选 token 的 log-probs,各自复用原有损失代码,不再重复实现损失数学。
来源:TRL Releases · github.com