PACT：从信用分配到 Critic 对齐，LLM 强化学习后训练新方法

研究者提出 PACT（Policy Aligned Critic Training），通过 Actor-then-Critic 更新顺序对 critic 训练施加重要性采样校正，使 critic 与更新后的策略更好对齐。