【无监督学习】关于Hinton团队无监督新作SimCLR的所思所想

公众号关注 “ML_NLP”设为 “星标”，重磅干货，第一时间送达！来自 | 知乎地址 | https://zhuanlan.zhihu.com/p/107269105编辑 | 机器学习算法与自然语言处理公众号本文已获作者授权，未经允许，禁止二次转载方法SimCLR伪代码[2]SimCLR示意图[1]具体而言就是：随机采样一个batch；对batch里每张图像做两种增强，可以认为是两个view；让同一张图的不同view在latent space里靠近，不同图的view在latent space里远离，通过NT-Xent实现。方法的确蛮简单的，想起了我们2017年的一篇文章Unsupervised Triplet Hashing for Fast Image Retrieval。方法见下图：Unsupervised Triplet Hashing for Fast Image Retrieval示意图即：随机采样一个batch；对batch里每张图像，原图和随机旋转可以认为是两个view；让同一张图的不同view在latent s ………………………………