[控场AI]
概念

GradNorm

一种多任务学习中的梯度平衡策略,动态调整各任务损失权重使梯度范数趋于一致,以缓解任务间梯度拉扯。

时间轴 (近 90 天)

10月22日

GradNorm 动态调整各任务损失权重使梯度范数趋于一致,PCGrad 在梯度方向冲突时做投影消解。

待验证50%

全部知识事实 (1)

来源文章