SiamCross:孪生交叉的目标跟踪对象感知网络
2022-10-29 20:35:33   来源：    点击：

摘要 近来﹐基于孪生架构的方法因其能在保持良好速度的同时取得较显著的性能,引起了视觉跟踪领域的广泛关注.然而,孪生网络分支通常是独立的,缺乏信息交互,这限制了模型性能的进一步提升.为了增强孪生网络分支的协作能力,本文提出基于孪生架构的交叉感知网络模型——SiamCross(Siamcse Cross Object-Aware Network).孪生网络双分支特征提取是提升模型性能的首要核心操作,区分目标和语义背景在很大程度上依赖模型挖掘的特征鲁棒性.在SiamCross 中,我们首先基于孪生网络分支的互监督,设计了全新的孪生交叉感知子网络(SiameseCross-Aware Network,SCAN)用来提取鲁棒特征.SCAN允许孪生分支彼此全方位高效协同工作,使模板分支可充分利用特征丰富的上下文语义信息﹐对目标产生更具有区分性的表示;搜索分支结合模板特征﹐也主动学习到了目标的本质信息.另一方面,无锚框算法将跟踪任务直接映射为对每个像素的分类和回归,网络分支特征可各自聚焦于目标的局部与全局空间信息.以上两种特征具有很好的潜在局部-全局互补性.具体而言,回归特征学习到了更多的目标全局尺寸信息,但同时也引人了周围背景信息,而分类分支专注于学习局部中心定位信息.二者结合，有利于抑制回归特征的背景信息表达.同时﹐回归特征会在目标周边位置进行突出响应,揭示目标所在区域,也为分类分支进行定位提供了有益参考.为充分初用以上不同的分支空间特征信息来获得更精确的跟踪结果,我们又提出了新型的目标注意力交互网络(Obejct-Affention Interaction Network,OAIN),并将其融入到SiamCross 中.OAIN包含并行交叉注意力模块(Parallel Cross AttentionModule,PCA)和自适应可形变交叉对齐模块(AdaptiveDeformable Cross Align Module,ADCA).PCA模块通过对分支中局部与全局信息的巧妙融合,提升了目标状态估计的准确性.为了进一步使回归特征和目标区域对齐,缓解特征对齐失焦导致的分类分支参考信源可靠性大幅度降低﹐我们为ADCA模块设计了自适应空间转换操作,可以使得问归特征更好反映目标所在区域.最终，ADCA模块完善了无锚框网络的高效交互机制.最后,我们在OTE2015,vOT2018/2019,GOT-10k和 LaSOT五个具有挑战性的公开基准中对SiamCross进行了详尽的实验评估.实验结果显示,Siamross与当前先进的跟踪器SiamRPN++、ATOM 及 DiMP相比,均取得了更优异的综合表现,并且可实现实时踉踪.