一种三目视觉手语识别装置及多信息融合手语识别方法

摘要

本发明公开了一种三目视觉手语识别装置及多信息融合手语识别方法，涉及手语的智能翻译技术领域；解决双目设备的视觉盲区缺陷，以及独立的手势识别方案无法准确地获取聋哑人手语所要传达的信息的问题；本发明在双目设备的垂直平面增加一个单目摄像装置，采集视觉盲区中的信息，作为双目设备视觉盲区的数据补足；提出由手语表达者表情、正在进行手语交流时手在人身体的相对位置以及手语手势识别共同定义一组手语手势，这样组合定义手语的方式增加了可识别手势的数量，扩大了手语库的丰富性；同时，多种组合要素细化了每个手语，提高了每个手语的特异性，避免相似、相近手势造成手语判断错误，提高了手语识别的准确度。