Entity

DPO（Direct Preference Optimization）

直接偏好优化算法，用于根据人类偏好数据微调语言模型，无需显式的奖励模型训练。