Pergunta de entrevista da empresa TikTok

Explain PPO, loss function of DPO