论文题目:SOLQ: Segmenting Objects by Learning Queries

中文题目:SOLQ:基于学习查询的物体分割

论文链接:https://www.zhuanzhi.ai/paper/aa83650733efb14101109ce1162e6636

DETR 通过引入 Transformer 和匈牙利匹配,实现了端到端的目标检测。然而,将其拓展至实例分割任务时,会引入过大的计算量,导致无法进行端到端训练,且性能无法满足真实需求。

为解决这一问题,我们结合 DETR 和压缩编码技术,提出端到端的实例分割框架 SOLQ。SOLQ 提出统一的查询(query)表征方式,使用压缩编码方法如DCT等,将二维高分辨率掩码压缩为低维向量,使得三项子任务(分类、定位和分割)能够并行预测。

实验结果表明,SOLQ 能够实现先进的实例分割性能,超越大多数现有方法。此外,我们发现统一的查询(query)表征可以大大提高 DETR 的检测性能。我们希望 SOLQ 可以作为基于 Transformer 的实例分割框架的强大基线。

成为VIP会员查看完整内容
10

相关内容

【AAAI2022】锚点DETR:基于transformer检测器的查询设计
专知会员服务
13+阅读 · 2021年12月31日
NeurIPS 2021丨K-Net: 迈向统一的图像分割
专知会员服务
17+阅读 · 2021年11月25日
【NeurIPS2021】去栅格化的矢量图识别
专知会员服务
16+阅读 · 2021年11月18日
【NeurIPS 2020】通过双向传播的可扩展图神经网络
专知会员服务
30+阅读 · 2020年11月3日
WWW 2020 开源论文 | 异构图Transformer
PaperWeekly
13+阅读 · 2020年4月3日
基于 GNN 的图表示学习
DataFunTalk
9+阅读 · 2020年1月17日
论文浅尝 | 基于复杂查询图编码的知识库问答
开放知识图谱
17+阅读 · 2019年7月22日
非平衡数据集 focal loss 多类分类
AI研习社
33+阅读 · 2019年4月23日
基于二进制哈希编码快速学习的快速图像检索
极市平台
12+阅读 · 2018年5月17日
Arxiv
8+阅读 · 2021年9月30日
VIP会员
相关VIP内容
【AAAI2022】锚点DETR:基于transformer检测器的查询设计
专知会员服务
13+阅读 · 2021年12月31日
NeurIPS 2021丨K-Net: 迈向统一的图像分割
专知会员服务
17+阅读 · 2021年11月25日
【NeurIPS2021】去栅格化的矢量图识别
专知会员服务
16+阅读 · 2021年11月18日
【NeurIPS 2020】通过双向传播的可扩展图神经网络
专知会员服务
30+阅读 · 2020年11月3日
相关资讯
WWW 2020 开源论文 | 异构图Transformer
PaperWeekly
13+阅读 · 2020年4月3日
基于 GNN 的图表示学习
DataFunTalk
9+阅读 · 2020年1月17日
论文浅尝 | 基于复杂查询图编码的知识库问答
开放知识图谱
17+阅读 · 2019年7月22日
非平衡数据集 focal loss 多类分类
AI研习社
33+阅读 · 2019年4月23日
基于二进制哈希编码快速学习的快速图像检索
极市平台
12+阅读 · 2018年5月17日
微信扫码咨询专知VIP会员