基于相干约束图长短时记忆网络的群体活动识别方法

摘要

本发明提供了一种基于相干约束图长短时记忆网络的群体活动识别方法，包括以下步骤：(1)将所有人的CNN特征作为相干约束图长短时记忆网络的输入，共同学习所有人在时空上下文相干性约束下随时间的个体运动状态；(2)利用全局上下文相干性的注意力机制，通过学习不同运动对应的注意力因子，量化相关运动的贡献；(3)在每个时间步中采用聚合LSTM将所有由不同注意力因素加权的单个运动状态聚合为整个活动的隐藏表示，并将每个活动的隐藏表示输入到softmax分类器中；(4)对每个时间步的softmax分类器的输出进行平均，得到群体活动的概率类向量，从而推断出群体活动的类别。