Unverified50% confidenceTradeoffExact time
GRPO及其变体在实际训练中往往会遇到训练崩溃、奖励震荡、后期性能下降等问题
1
Sources
50%
Confidence
Long-term
Relevance
9/12/2026
First Seen
Sources
Related Entities
Related Claims
UnverifiedGRPO相比PPO省去了价值网络（Critic），直接在组内样本间比较奖励来估计优势函数，显著降低训练计算成本70% similarUnverified加入DINO目标后CAPI原本平滑的训练损失曲线变得明显更加跳跃，训练稳定性下降69% similarUnverifiedGAIL借鉴GAN思想用对抗训练隐式恢复专家行为分布，理论基础是将模仿学习转化为占用度量匹配问题，但受GAN模式崩塌问题影响训练稳定性69% similarUnverified针对特定工具做专项强化训练的副作用是对非训练分布工具的泛化能力下降，学术上称为分布外泛化失败68% similarUnverified训练强度应可自适应调节（根据答题正确率动态升降难度），固定难度的产品会导致能力强者无挑战、能力弱者持续挫败而放弃67% similar
Cite This Claim
Stable URI
https://kongchang.com/claim/910345API
curl https://kongchang.com/api/v1/knowledge/claims/910345MCP
get_claim(id=910345)