DPO可否拆分为两个阶段的SFT，一个最小化正样本loss，一个最大化负样本loss？ 一、DPO是什么？ DPO（Direct …