基于视频流的手势捕捉和纹理融合方法及系统

摘要

本发明提出了一种基于视频流的手势捕捉和纹理融合方法及系统，包括：采用摄像头系统扫描用户的手掌，根据扫描图像建立手部模型；对VR头盔相对VR定位摄像头的位置进行标定，根据标定结果设置虚拟空间中的VR头盔位置；根据建立的手部模型，利用摄像头系统获取手掌骨骼的位置信息和旋转信息；获取所述VR头盔在世界坐标系的姿态矩阵，计算手掌在三维场景中的骨骼姿态矩阵；根据所述手掌在三维场景中的骨骼姿态矩阵，驱动三维场景中的手掌进行运动。本发明具有手势捕捉速度很快，捕捉精准，并且具有模型真实度高和用户体验好。