Direct Preference Optimization

🎓 Как аналитический метод DPO изменил выравнивание LLM и столкнулся со взломом наград