#7245·trl当 use_liger_kernel=True 时, DPO 和 KTO 会跳过 DDP 梯度同步作者: qgallouedec创建于 2026年9月16日更新于 2026年9月16日USE_LIGER=1 torchrun --nproc_per_node=2内容来源: huggingface/trl查看 GitHub 原文在 GitHub 查看讨论