基于捏和拉手势检测人工现实系统中的输入

摘要

描述了一种人工现实系统，其在人工现实环境中渲染、呈现和控制用户界面元素，并响应于检测到的用户的一个或更多个手势来执行动作。在一个示例中，人工现实系统包括被配置为捕获代表物理环境的图像数据的图像捕获设备；被配置为输出人工现实内容的头戴式显示器(HMD)；手势检测器，该手势检测器被配置为从图像数据中识别手势，该手势包括来自手的两个手指的运动以形成捏构形，以及当处于捏构形时的后续拉动运动；被配置为响应于识别手势而生成UI输入元素的用户界面(UI)引擎；以及被配置为将UI输入元素渲染为对人工现实内容的至少一些的叠加的渲染引擎。