项目名称: 多目标跟踪中的注意模型研究

项目编号: No.61473031

项目类型: 面上项目

立项/批准年度: 2015

项目学科: 其他

项目作者: 邹琪

作者单位: 北京交通大学

项目金额: 80万元

中文摘要: 人类视觉如何在被跟踪的多个目标中分配注意,一直是认知和神经科学非常关注的问题。它既具有自底向上和自顶向下注意的共性,还体现了多目标跟踪的特性。借鉴人类视觉在多目标跟踪中注意机理,利用视频跟踪中的眼动的研究成果,研究复杂动态环境的注意模型。一方面,我们从动态变化的场景中学习到空间布局等场景上下文;也将学习目标有区分度的表观特征和高阶运动模型,用于形成对场景和特定任务的有效表达。将学习到的先验作为知识和熟悉性,推广到未曾学习过的、新出现的目标。另一方面,借鉴多目标跟踪的注意理论,通过时空组织形成目标组,利用在线随机森林学习目标与任务的相关性,构建多目标跟踪的自顶向下注意模型。将所构建的注意模型应用在基于高阶运动量和多维数据关联的多目标跟踪中,解决遮挡和场景动态变化的干扰,实现鲁棒的跟踪。预计这一成果将缩小跟踪计算模型与人类视觉跟踪之间的鸿沟,加深我们对自顶向下注意的理解

中文关键词: 多目标跟踪;自顶向下注意;眼动;动态感知;时空组织

英文摘要: How visual attention is deployed in multi-object tracking(MOT)? It has been noticed in perceptual and neural science for a long time. It has common properties of bottom-up and top-down attention, and has properties specific to MOT.Inspired by attention mechanism of MOT in human vision, we will biuld computational attention models in complex dynamic scenes.On the one hand, we learn scene context in dynamic scenes, and discriminative appearance and high-order motion models of objects, to represent scenes and tasks efficiently. On the other hand,based on attention and eye movement theories and learning relations of objects with tasks by online random forest, we will build a top-down attention model. Applying the attention model in MOT which combines spatial-temporal grouping and multidimentional data association,coping with occlusion and distractors from dynamic background, we try to realize robust tracking. The research is expected to reduce gaps between computational tracking models and human visual tracking,and at the same time deepen our understanding to top-down attention.

英文关键词: multiple object tracking;top-down attention;eye movememts;dynamic perception;spatial temporal grouping

成为VIP会员查看完整内容
0

相关内容

视频分析中的人工智能 (AI)白皮书,16页pdf
专知会员服务
62+阅读 · 2021年5月6日
专知会员服务
20+阅读 · 2021年4月2日
专知会员服务
79+阅读 · 2020年12月18日
专知会员服务
48+阅读 · 2020年10月21日
【CMU】基于图神经网络的联合检测与多目标跟踪
专知会员服务
54+阅读 · 2020年6月24日
深度学习视频中多目标跟踪:论文综述
专知会员服务
90+阅读 · 2019年10月13日
多任务多目标CTR预估技术
阿里技术
1+阅读 · 2021年10月11日
综述:基于GAN的图像翻译模型盘点
GAN生成式对抗网络
21+阅读 · 2019年9月2日
计算机视觉方向简介 | 多目标跟踪算法(附源码)
计算机视觉life
15+阅读 · 2019年6月26日
多目标跟踪:SORT和Deep SORT
极市平台
47+阅读 · 2019年3月18日
视频中的多目标跟踪【附PPT与视频资料】
人工智能前沿讲习班
30+阅读 · 2018年11月29日
一种轻量级在线多目标车辆跟踪方法
极市平台
13+阅读 · 2018年8月18日
论文笔记之attention mechanism专题1:SA-Net(CVPR 2018)
统计学习与视觉计算组
16+阅读 · 2018年4月5日
论文 | 基于RNN的在线多目标跟踪
七月在线实验室
30+阅读 · 2017年12月27日
国家自然科学基金
5+阅读 · 2014年12月31日
国家自然科学基金
7+阅读 · 2013年12月31日
国家自然科学基金
3+阅读 · 2013年12月31日
国家自然科学基金
3+阅读 · 2013年12月31日
国家自然科学基金
0+阅读 · 2013年12月31日
国家自然科学基金
1+阅读 · 2012年12月31日
国家自然科学基金
1+阅读 · 2012年12月31日
国家自然科学基金
0+阅读 · 2012年12月31日
国家自然科学基金
1+阅读 · 2009年12月31日
Arxiv
1+阅读 · 2022年5月3日
Arxiv
0+阅读 · 2022年5月3日
A Grammar for Hypothesis-Driven Visual Analysis
Arxiv
0+阅读 · 2022年4月29日
Arxiv
17+阅读 · 2021年3月29日
小贴士
相关VIP内容
视频分析中的人工智能 (AI)白皮书,16页pdf
专知会员服务
62+阅读 · 2021年5月6日
专知会员服务
20+阅读 · 2021年4月2日
专知会员服务
79+阅读 · 2020年12月18日
专知会员服务
48+阅读 · 2020年10月21日
【CMU】基于图神经网络的联合检测与多目标跟踪
专知会员服务
54+阅读 · 2020年6月24日
深度学习视频中多目标跟踪:论文综述
专知会员服务
90+阅读 · 2019年10月13日
相关资讯
多任务多目标CTR预估技术
阿里技术
1+阅读 · 2021年10月11日
综述:基于GAN的图像翻译模型盘点
GAN生成式对抗网络
21+阅读 · 2019年9月2日
计算机视觉方向简介 | 多目标跟踪算法(附源码)
计算机视觉life
15+阅读 · 2019年6月26日
多目标跟踪:SORT和Deep SORT
极市平台
47+阅读 · 2019年3月18日
视频中的多目标跟踪【附PPT与视频资料】
人工智能前沿讲习班
30+阅读 · 2018年11月29日
一种轻量级在线多目标车辆跟踪方法
极市平台
13+阅读 · 2018年8月18日
论文笔记之attention mechanism专题1:SA-Net(CVPR 2018)
统计学习与视觉计算组
16+阅读 · 2018年4月5日
论文 | 基于RNN的在线多目标跟踪
七月在线实验室
30+阅读 · 2017年12月27日
相关基金
国家自然科学基金
5+阅读 · 2014年12月31日
国家自然科学基金
7+阅读 · 2013年12月31日
国家自然科学基金
3+阅读 · 2013年12月31日
国家自然科学基金
3+阅读 · 2013年12月31日
国家自然科学基金
0+阅读 · 2013年12月31日
国家自然科学基金
1+阅读 · 2012年12月31日
国家自然科学基金
1+阅读 · 2012年12月31日
国家自然科学基金
0+阅读 · 2012年12月31日
国家自然科学基金
1+阅读 · 2009年12月31日
微信扫码咨询专知VIP会员