用于视频理解的使用基于运动的注意力的递归网络

摘要

一种预测视频流的动作标签的方法包括：接收该视频流以及计算该视频流的连贯帧的光流。从该视频流的当前帧和计算出的光流生成注意力图。基于光流、先前隐藏状态和注意力图来预测当前帧的动作标签。