一种基于2D视频序列的手势识别及人机交互方法和系统

摘要

本发明公开了一种基于2D视频序列的手势识别及人机交互方法和系统，所述方法包括以下步骤：S1，获取单目2D视频帧序列图像，并提取该图像中的运动前景；S2，在所述的运动前景中检测人手，并构建人手的联合特征模型；S3，预测人手目标出现的位置区域，在该位置区域中利用人手的联合特征模型搜索、定位人手目标，获得人手在当前帧中的位置；S4，根据人手在当前帧中的位置判断当前的操作模式类型；S5，对人手进行跟踪，识别当前操作模式下人手的姿态和手势；将所述的姿态和手势转换为相应的指令，实现人机交互。本发明的人机交互方法，不仅可以实现在复杂背景下的目标人手甄选，而且还可以实现对人手的精确度、高稳定性的跟踪。