标签: post-train | 随缘随笔 <br> Insights Flow

0%

post-train 标签

2025

12-14

学习笔记：ppo，deepseek ppo和reinforce loss的异同，以及不同形式loss对lm_head层梯度的影响和数值稳定性