面向协同装配的混合现实手眼交互技术研究

摘要

针对MR协同装配工作中存在的复杂人机交互问题,提出一种基于眼动追踪和手势识别的多通道交互方法.采用注视线检测和注视点检测对目标物体进行预选取.通过手势识别完成对候选目标物体的确认和相关操作.实验结果表明,该方法能实现对遮挡、微小尺寸、远距离目标对象的选取和操作.同时,协同装配实验验证了该方法在协同工作中的可行性.