arxiv Provable Guarantees for Self-Supervised Deep Learning with Spectral Contrastive Loss

名称
Provable Guarantees for Self-Supervised Deep Learning with Spectral Contrastive Loss
首页
https://yiyibooks.cn/arxiv/2106.04156v7/index.html
原始地址
https://arxiv.org/pdf/2106.04156
描述
最近的自我监督学习工作依靠对比学习范式推进了最先进的技术,该范式通过将正对或来自同一类的相似示例推得更近,同时保持负对远离来学习表示。尽管取得了实证上的成功,但理论基础仍然有限——先前的分析假设给定相同类别标签的正对的条件独立,但最近的实证应用使用高度相关的正对(即, ...