一种基于视觉显著性的注视点估计方法及装置

摘要

本发明公开了一种基于视觉显著性的注视点估计方法及装置，所述方法包括以下步骤：将当前场景的RGB图像和光流图像输入由卷积神经网络和长短时记忆网络构成的显著图生成模块中，提取来自单个RGB图像和连续的光流图像中的特征信息，生成显著图；将当前人脸或人眼图像输入由卷积神经网络构成的注视点预测模块中，预测注视点；将显著图输入校正模块中，使用最小二乘算法对预测的注视点进行校正，输出最终注视点。装置包括：存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序。本发明将视觉显著性用于眼动跟踪，使用显著图对预测的注视点进行校正，提高注视点估计的准确率。