Curriculum Learning for Vision-and-Language Navigation 视觉语言导航的课程学习

作者:Jiwen Zhang, Zhongyu Wei, Jianqing Fan, Jiajie Peng

类型:NeurIPS 2021,Poster Paper

视觉和语言导航 (VLN) 是指智能体在人类语言的指导下进行室内导航的一项任务。我们发现以前的工作忽略了数据集中样本难度的分布。我们认为这潜在降低了那些智能体的性能。为此,我们为 VLN 任务提出了一种新的基于课程学习的训练范式。该训练范式可以平衡人类先验知识和智能体对训练样本的学习进度。我们制定了课程设计原则,并重新排列了基准 Room-to-Room (R2R) 数据集,使其适合课程培训。实验表明,我们的方法与模型无关,并且可以在不增加模型复杂度的情况下显着提高当前最先进导航代理的性能、通用性和训练效率。

https://www.zhuanzhi.ai/paper/ff17c28e135334c82edabc43efdcd6b1

成为VIP会员查看完整内容
23

相关内容

【AAAI2022】混合课程学习对话情绪识别
专知会员服务
25+阅读 · 2021年12月24日
【NeurIPS2021】用于视频分割的密集无监督学习
专知会员服务
14+阅读 · 2021年11月14日
【NeurIPS2021】序一致因果图的多任务学习
专知会员服务
19+阅读 · 2021年11月7日
专知会员服务
14+阅读 · 2021年10月16日
专知会员服务
24+阅读 · 2021年6月15日
首篇「课程学习(Curriculum Learning)」2021综述论文
专知会员服务
49+阅读 · 2021年1月31日
【NeurIPS2020-北大】非凸优化裁剪算法的改进分析
专知会员服务
28+阅读 · 2020年10月11日
【AAAI2021】自监督对应学习的对比转换
专知
12+阅读 · 2020年12月11日
【NeurIPS2020】无限可能的联合对比学习
专知
3+阅读 · 2020年10月2日
Arxiv
8+阅读 · 2021年11月14日
A General and Adaptive Robust Loss Function
Arxiv
8+阅读 · 2018年11月5日
VIP会员
相关VIP内容
【AAAI2022】混合课程学习对话情绪识别
专知会员服务
25+阅读 · 2021年12月24日
【NeurIPS2021】用于视频分割的密集无监督学习
专知会员服务
14+阅读 · 2021年11月14日
【NeurIPS2021】序一致因果图的多任务学习
专知会员服务
19+阅读 · 2021年11月7日
专知会员服务
14+阅读 · 2021年10月16日
专知会员服务
24+阅读 · 2021年6月15日
首篇「课程学习(Curriculum Learning)」2021综述论文
专知会员服务
49+阅读 · 2021年1月31日
【NeurIPS2020-北大】非凸优化裁剪算法的改进分析
专知会员服务
28+阅读 · 2020年10月11日
微信扫码咨询专知VIP会员