基于外部相机和穿戴式显控设备的全息人体重建方法

摘要

本发明公开了一种结合外部相机和穿戴式显控设备的全息人体重建方法，其步骤为：将四个外部RGBD相机分别放置于要重建场景的四个角落；在无干扰的场景中，获取要重建的人的点云特征，进行非刚体特征提取；利用霍夫变换获得瞳孔位置及中心坐标，将左右眼图片以及瞳孔中心坐标输入神经网络中预测注视点坐标；将预先采集好的肌电信号与指令相对应的数据集，输入到长短时记忆网络中进行训练；将肌电信号输入到训练好的模型中，识别出与之相对应的指令并传递给计算机，进行细节部分拟合来得到最终的重建模型；最后用增强现实技术对最终的重建模型进行显示。本发明中只需要利用一组多视角点云图就可以完成相机的标定得出外参矩阵，省时省力。