【CVPR2021】一种基于知识蒸馏的弱监督图像文本匹配模型

2021 年 4 月 8 日 专知

一种基于知识蒸馏的弱监督图像文本匹配模型

Improving Weakly Supervised Visual Grounding by Contrastive Knowledge Distillation


本文由腾讯 AI Lab 主导完成。弱监督的图像文本匹配旨在学习仅使用图像句子的对应来得到细颗粒度的图像区域和短语的对应. 因此,主要的挑战在于训练期间图像区域和句子短语之间缺少匹配的数据。


为了应对这一挑战,我们在训练时利用了通用的物体检测器知识蒸馏,并提出了利用对比学习来得到图像和文本细颗粒度匹配的新方法。我们的方法在弱监督的视觉区域和短语匹配任务上超越了以前的方法。


https://www.zhuanzhi.ai/paper/d59e9b614122852f5a78b38a14d43921



专知便捷查看

便捷下载,请关注专知公众号(点击上方蓝色专知关注)

  • 后台回复“CKD” 就可以获取【CVPR2021】一种基于知识蒸馏的弱监督图像文本匹配模型》专知下载链接


专知,专业可信的人工智能知识分发 ,让认知协作更快更好!欢迎注册登录专知www.zhuanzhi.ai,获取5000+AI主题干货知识资料!
欢迎微信扫一扫加入专知人工智能知识星球群,获取最新AI专业干货知识教程资料和与专家交流咨询
点击“ 阅读原文 ”,了解使用 专知 ,查看获取5000+AI主题知识资源
登录查看更多
3

相关内容

专知会员服务
38+阅读 · 2021年5月16日
专知会员服务
22+阅读 · 2021年5月1日
【CVPR2021】基于Transformer的视频分割领域
专知会员服务
36+阅读 · 2021年4月16日
【CVPR2021】基于端到端预训练的视觉-语言表征学习
专知会员服务
37+阅读 · 2021年4月9日
专知会员服务
61+阅读 · 2021年3月12日
【CVPR2021】细粒度多标签分类
专知会员服务
59+阅读 · 2021年3月8日
【AAAI2021】基于双任务一致性的半监督医学图像分割
专知会员服务
30+阅读 · 2021年2月7日
【CVPR2021】细粒度多标签分类
专知
44+阅读 · 2021年3月8日
【AAAI2021】自监督对应学习的对比转换
专知
12+阅读 · 2020年12月11日
【ICML2020】小样本目标检测
专知
7+阅读 · 2020年6月2日
Arxiv
0+阅读 · 2021年6月10日
Arxiv
0+阅读 · 2021年5月15日
Arxiv
19+阅读 · 2021年4月8日
Arxiv
3+阅读 · 2018年3月21日
Arxiv
4+阅读 · 2018年3月14日
VIP会员
相关VIP内容
专知会员服务
38+阅读 · 2021年5月16日
专知会员服务
22+阅读 · 2021年5月1日
【CVPR2021】基于Transformer的视频分割领域
专知会员服务
36+阅读 · 2021年4月16日
【CVPR2021】基于端到端预训练的视觉-语言表征学习
专知会员服务
37+阅读 · 2021年4月9日
专知会员服务
61+阅读 · 2021年3月12日
【CVPR2021】细粒度多标签分类
专知会员服务
59+阅读 · 2021年3月8日
【AAAI2021】基于双任务一致性的半监督医学图像分割
专知会员服务
30+阅读 · 2021年2月7日
相关论文
Top
微信扫码咨询专知VIP会员