文 / Google Research 软件工程师 André Araujo 和 Tobias Weyand
图像分类技术在过去几年取得了显著进步,例如在Imagenet分类挑战赛中,错误率每年都在大幅下降。为了继续推进计算机视觉的发展,许多研究员现在将更多精力放在精细和实例级识别问题上 - 许多人都在设计能够识别埃菲尔铁塔、富士山或波斯猫的机器学习算法,而不是识别建筑物、山峰和猫等一般实体。不过,这个领域一个比较大的研究障碍是缺乏大型的标注数据集。
我们高兴地宣布 Google-Landmarks,它是全世界最大的人造和自然地标识别数据集,希望这个工具能推动实例级识别的发展。Google-Landmarks 将作为地标识别和地标检索 Kaggle 挑战赛的一部分发布,这两个挑战赛将是 CVPR’18 Landmarks 专题讲座的重点。
地标识别挑战赛:https://www.kaggle.com/c/landmark-recognition-challenge
地标检索挑战赛:https://www.kaggle.com/c/landmark-retrieval-challenge
数据集包含超过 200 万个图像,这些图像描绘了全世界 3 万个独特的地标(它们的地理分布如下图所示),许多类别要比现在的常用数据集大 30 倍左右。此外,为了激励这个领域的研究,我们将开源 Deep Local Features (DELF):
http://arxiv.org/abs/1612.06321
这个具有专用的本地特征描述符的数据库,我们认为它非常适合这种任务。
我们数据集中的地标的地理分布
地标识别具有一些与其他问题显著不同的差异。例如,即使在一个大型标注数据集中,也可能没有很多用于一些不知名地标的训练数据。此外,由于地标通常是不可移动的刚性对象,类别内变化非常小(换句话说,地标的外观在它的不同图像中不会发生很大变化)。因此,变化仅来自于拍照条件(例如遮蔽、不同的视角、天气和光照),这就让地标与其他图像识别数据集不同,在其他数据集中,某种类别图像(例如狗)的差异可能非常大。其他实例级识别问题(例如艺术品识别)也有这些特性 - 因此,我们希望新数据集也能为其他图像识别问题的研究提供帮助。
两个 Kaggle 挑战赛会提供标注数据的访问权限,以便帮助研究人员解决这些问题。识别挑战赛的任务是构建识别正确地标的模型,它可以处理具有挑战性测试图像组成的数据集,而检索挑战赛的参与者需要检索包含相同地标的图像。
Google-Landmarks 数据集中的一些示例图像,包括大本钟、圣心堂、Decebalus 岩石雕塑和迈杰里桥等地标
如果您计划参加今年的 CVPR,我们希望您能出席 CVPR’18 Landmarks 专题讲座:
https://landmarkscvprw18.github.io
不过,所有人都可以参与挑战赛,以及通过 Kaggle 网站访问新数据集。我们希望这个资源可以为您的研究提供帮助,我们已经迫不及待地想要倾听大家对地标识别的想法了。
致谢
Jack Sim、Will Cukierski、Maggie Demkin、Hartwig Adam、Bohyung Han、Shih-Fu Chang、Ondrej Chum、Torsten Sattler、Giorgos Tolias、Xu Zhang、Fernando Brucher、Marco Andreetto 和 Gursheesh Kour。
领取专属 10元无门槛券
私享最新 技术干货