利用运动捕捉的虚拟手的增强现实学习系统和方法

摘要

本公开针对扩展现实(XR)学习系统，该系统使用XR设备向用户提供指导者或专家的动手视觉指导。XR学习系统包括运动捕捉系统，用于记录执行任务的专家手；以及处理器，用于从记录中生成专家手的(逐骨)表示。处理器然后可以基于该表示来生成专家手的模型。该模型可以针对特定用户进行修改和校准。一旦用户请求内容，处理器就可以将记录传输到用户的XR系统，然后XR系统可以显示覆盖在用户手上的专家手的模型，以帮助视觉地指导用户执行任务。