PPO

VC-PPO

摘要

• What’s Behind PPO’s Collapse in Long-CoT? Value Optimization Holds the Secret

❓问题背景

问题背景

📕核心方法

核心方法

✍️实验设置

实验配置

🍑关键结果

关键结果

⛳未来方向

未来方向