一种基于姿态外形和运动信息的双通道红外行为识别方法

摘要

本发明涉及一种基于姿态外形和运动信息的双通道红外行为识别方法。该方法包含以下步骤，S1：在运动信息通道中，对原始的红外图像序列提取变分光流特征，得到光流图像序列。S2：将光流图像序列分为训练集和测试集，微调C3D网络后，提取网络特征。S3：在姿势外形通道中，对红外图像做姿势估计，提取出人体骨架图。S4：对人体骨架图作高斯平滑，得出姿态特征图。S5：将姿态特征图分成训练测试集，微调C3D网络后，提取网络特征。S6：对两个网络特征作前期融合，得到最终特征。S7：用SVM分类器对最终特征进行分类识别，得出识别结果。本发明全面地利用视频信息，一方面在空间上采取姿势特征图作为更有效的外形信息，另一方面提高识别效果，为后续研究提供了技术支撑。