2 个月前

Grafit:使用粗标签学习细粒度图像表示

Touvron, Hugo ; Sablayrolles, Alexandre ; Douze, Matthijs ; Cord, Matthieu ; Jégou, Hervé
Grafit:使用粗标签学习细粒度图像表示
摘要

本文解决了学习比训练标签所提供的表示更为精细的问题。这使得在仅用粗略标签注释的图像集合中实现细粒度类别检索成为可能。我们的网络通过最近邻分类器目标进行学习,并采用了一种受自监督学习启发的实例损失。通过共同利用粗略标签和潜在的细粒度隐空间,该方法显著提高了类别级检索方法的准确性。我们的策略在检索或分类图像时,其细粒度超过了训练时可用的细粒度,优于所有竞争方法。此外,它还提高了向细粒度数据集迁移学习任务的准确性,从而在五个公开基准测试(如iNaturalist-2018)上确立了新的最先进水平。