针对目标跟踪算法在目标外观变化等复杂场景下鲁棒性差的问题,提出一种基于孪生网络的双分支目标跟踪算法.首先,通过相似性学习训练判别分支生成目标外观的特征表达;然后,通过图像分类任务训练鲁棒分支生成目标语义的特征表达,同时在鲁棒分支中加入沙漏结构的残差注意力模块进一步编码目标全局信息;最后,对两个独立分支生成的响应图进行加权融合.在跟踪基准数据集OTB2015上进行实验,结果表明,该算法的成功率较基准算法SiamFC提升了8.2%,精度提升了10.2%,同时在光照变化、遮挡、尺度变化等多种复杂场景中均具有良好表现.