Шкала отличия оптимизации от шкалы предпочтений в DPO
arXiv:2608.27032v1 Announce Type: new Abstract: Direct Preference Optimization (DPO) является широко используемой целью для выравнивания языковых моделей из данных о предпочтениях с коэффициентом $\be...