直接偏好优化测验

测试您对直接偏好优化如何工作以及它为何简化对齐的理解。