一种带红外热成像辅助的人体运动姿态与运动意图的预测方法

摘要

本申请公开了一种带红外热成像辅助的人体运动姿态与运动意图的预测方法，所述预测方法包括如下步骤：(1)将红外热成像转为灰度图并与groundtruth相乘，结果称之为softgroundtruth，作为训练标签，(2)softgroundtruth和摄像头采集的RGB图像称分别经过FCN网络取下采样最后一层输出作为图像特征序列，将得到的两种图像特征序列经过attention，以从RGB图像中抽取出和带有红外热成像信息的分割图有关的信息，(3)将上一步得到的向量通过attention,以对抽取到的信息与所有历史图像时间的相关性进行建模。通过该种方法可以对当前运动姿态与运动意图进行识别，并可以对未来的运动姿态与运动意图进行预测。