一种基于双重暹罗网络的实时追踪方法

摘要

本发明中提出的一种基于双重暹罗网络的实时追踪方法，其主要内容包括：双重暹罗网络架构、语义分支的通道注意力模块和网络设计方案选择，其过程为，先将目标图像块和搜索区域图像块输入到网络中；然后，将每个图像块的语义特征和表观特征分别在网络的语义分支(运用了通道注意力机制)和表观分支中进行训练和融合，以得到语义分支和表观分支的响应图；最后，将上述两个响应图通过加权平均法合并起来即为本方法的追踪响应图。本方法采用了双重网络设计并且引入了注意力机制，实现了异相追踪和目标自适应，相比现有的追踪方法在追踪的目标类别数量和追踪准确性方面都有显著的提升。