We propose a method for the weakly supervised detection of objects in paintings. At training time, only image-level annotations are needed. This, combined with the efficiency of our multiple-instance learning method, enables one to learn new classes on-the-fly from globally annotated databases, avoiding the tedious task of manually marking objects. We show on several databases that dropping the instance-level annotations only yields mild performance losses. We also introduce a new database, IconArt, on which we perform detection experiments on classes that could not be learned on photographs, such as Jesus Child or Saint Sebastian. To the best of our knowledge, these are the first experiments dealing with the automatic (and in our case weakly supervised) detection of iconographic elements in paintings. We believe that such a method is of great benefit for helping art historians to explore large digital databases.


翻译:我们建议一种方法,用于对绘画中的物体进行监督不力的探测。在培训时间,只需要图像水平的注释。这与我们多层次学习方法的效率相结合,使得人们能够从全球注解的数据库中学习实时的新课程,避免人工标记物体的烦琐任务。我们在几个数据库中显示,放弃实例水平的注释只会造成轻微的性能损失。我们还引入一个新的数据库,即“图例艺术”,我们在这个数据库上对无法在照片上学习的类类进行检测实验,如耶稣·柴尔德或圣塞巴斯蒂安。据我们所知,这些是有关自动(和在我们的情况中监督不力的情况下)探测绘画中图标元素的首次实验。我们认为,这种方法对帮助艺术历史学家探索大型数字数据库很有帮助。

4
下载
关闭预览

相关内容

100+篇《自监督学习(Self-Supervised Learning)》论文最新合集
专知会员服务
167+阅读 · 2020年3月18日
机器学习入门的经验与建议
专知会员服务
94+阅读 · 2019年10月10日
强化学习的Unsupervised Meta-Learning
CreateAMind
18+阅读 · 2019年1月7日
Unsupervised Learning via Meta-Learning
CreateAMind
43+阅读 · 2019年1月3日
ResNet, AlexNet, VGG, Inception:各种卷积网络架构的理解
全球人工智能
20+阅读 · 2017年12月17日
【推荐】YOLO实时目标检测(6fps)
机器学习研究会
20+阅读 · 2017年11月5日
Arxiv
9+阅读 · 2018年4月12日
Arxiv
7+阅读 · 2018年3月19日
VIP会员
相关资讯
相关论文
Arxiv
9+阅读 · 2018年4月12日
Arxiv
7+阅读 · 2018年3月19日
Top
微信扫码咨询专知VIP会员