一种基于手势识别的增强现实交互方法

摘要

本发明涉及一种基于手势识别的增强现实交互方法，包括：根据需要识别的动态手势类型，建立复杂背景下多人多角度的静态手势数据集，利用MobileNet基础深度神经网络并结合SSD目标检测算法框架，在该数据集上进行训练，生成手势检测模型，以对获取到的静态手势进行识别；基于视频分帧进行动态手势识别；设计动态手势识别算法；基于动态手势识别进行人机交互，包括：捕获使用者的手势影像，在将短视频进行分帧处理后，将截取到的帧图像进行静态手势识别，并将识别到的结果记录下来，并结合动态手势识别算法进行判断，得到对应动态手势类别变化识别算法中的四种变化手势以及动态手势轨迹变化识别算法中的6种轨迹变化手势的类别和对应的位移量以及面积比。