利用具有图形用户界面的手术工具器械的系统和方法

摘要

本披露提供了一种系统，所述系统：可以经由显示器显示图形用户界面(GUI)；可以接收第一用户输入，所述第一用户输入指示将使用手术工具器械作为与所述GUI相关联的指针；可以接收来自图像传感器的第一多个图像；并且可以根据所述第一多个图像来确定所述手术工具器械的数字模型，所述数字模型包括所述手术工具器械的模式。所述系统可以进一步至少基于所述第一多个图像来训练所述数字模型。所述系统可以进一步经由所述图像传感器来接收第二多个图像。所述系统可以进一步根据所述第二多个图像和所述数字模型来确定所述手术工具器械的移动模式，所述移动模式可用于选择所述GUI的图标。所述系统可以包括含有所述显示器的显微镜集成显示器。