概念Self-supervised Learning / SSL
自监督学习
无需人工标注标签的机器学习范式,通过数据自身的结构构造监督信号,DINOv2等模型的训练方法
核心事实
时间轴 (近 90 天)
5月31日
大语言模型的预训练阶段本质上属于自监督学习,是一种特殊的非监督学习,模型通过预测下一个词来从海量文本中自动学习语言规律
已验证80%
无需人工标注标签的机器学习范式,通过数据自身的结构构造监督信号,DINOv2等模型的训练方法
大语言模型的预训练阶段本质上属于自监督学习,是一种特殊的非监督学习,模型通过预测下一个词来从海量文本中自动学习语言规律