自然环境视频中基于显著鲁棒轨迹的行为识别

摘要

目的 人类行为识别是计算机视觉领域的一个重要研究课题.由于背景复杂、摄像机抖动等原因,在自然环境视频中识别人类行为存在困难.针对上述问题,提出一种基于显著鲁棒轨迹的人类行为识别算法.方法 该算法使用稠密光流技术在多尺度空间中跟踪显著特征点,并使用梯度直方图(HOG)、光流直方图(HOF)和运动边界直方图(MBH)特征描述显著轨迹.为了有效消除摄像机运动带来的影响,使用基于自适应背景分割的摄像机运动估计技术增强显著轨迹的鲁棒性.然后,对于每一类特征分别使用Fisher Vector模型将一个视频表示为一个Fisher向量,并使用线性支持向量机对视频进行分类.结果 在4个公开数据集上,显著轨迹算法比Dense轨迹算法的实验结果平均高1％.增加摄像机运动消除技术后,显著鲁棒轨迹算法比显著轨迹算法的实验结果平均高2％.在4个数据集(即Hollywood2、YouTube、Olympic Sports和UCF50)上,显著鲁棒轨迹算法的实验结果分别是65.8％、91.6％、93.6％和92.1％,比目前最好的实验结果分别高1.5％、2.6％、2.5％和0.9％.结论 实验结果表明,该算法能够有效地识别自然环境视频中的人类行为,并且具有较低的时间复杂度.