提供包括延伸出进入引导器远端的可联接器械的运动限制范围的辅助视图的医疗机器人系统

摘要

一种医疗机器人系统(100)，其包括具有手术工具(231、241)的进入引导器(200)，以及延伸出其远端的相机(211)。为了补充由相机捕捉的图像提供的视图，包括手术工具的可联接手臂和/或相机的辅助视图根据从指定观察点透视图的传感的或其他方式确定的关于其位置和方向的信息产生，其位置和取向的信息和运动限制范围指示一起显示在显示屏(140)。

说明书

本申请是申请日为2010年6月11日、名称为“提供包括延伸出 进入引导器远端的可联接器械的运动限制范围的辅助视图的医疗机器 人系统”的中国专利申请201080028525.6的分案申请。

技术领域

本发明主要涉及医疗机器人系统，并且尤其涉及提供辅助视图的 医疗机器人系统，辅助视图包括延伸出进入引导器远端的可联接器械 (instrument)的运动限制范围。

背景技术

在执行微创手术程序中使用的医疗机器人系统，例如遥控操控系 统，提供优于传统开放式手术技术的许多好处，包括：痛苦较少、住 院时间较短、恢复正常活动更快、疤痕最小、缩短康复时间、以及对 组织损伤较少。因此，对该医疗机器人系统的需求强并且在增加。

该医疗机器人系统的一个例子是美国加利福尼亚州森尼韦尔市 IntuitiveSurgical公司的da手术系统，其为微创机器人手术系 统。da手术系统具有许多机器人手臂，其响应通过手术部位的 图像捕捉装置捕捉的外科医生观察图像对输入装置的移动，而移动所 连接的医疗装置，例如图像捕捉装置和IntuitiveSurgical公司所有的 Endo可联接手术器械。每个医疗装置都被通过其自己的微创切 口插入患者体内并定位，从而执行手术部位上的医疗程序。切口关于 患者的身体定位，以便可使用多个手术器械共同执行医疗程序，并且 在程序期间，图像捕捉装置可观察它，而不与其机器人手臂碰撞。

为了执行某些医疗程序，使用单进入孔从而进入患者体内执行医 疗程序可有利，例如微创切口或自然身体口。例如，可首先将进入引 导器插入、定位并且保持在进入孔中的适当位置。然后可将这样的器 械插入进入引导器的近端，以便从其远端伸出，该器械是诸如可联接 相机和多个可联接手术工具，其可用于执行医疗程序。因而，进入引 导器为多个器械提供单进入孔，而同时随着进入引导器将多个器械朝 着工作点引导，还这些器械捆在一起。进入引导器可为刚性或柔性的。

因为进入引导器为了适合通过微创切口或自然身体口而通常具有 相对小的直径，所以在遥控操控手术工具以及遥控操控相机执行医疗 程序从而对其观察时，可产生许多问题。例如，由于相机与手术工具 捆绑，因此其相对于手术工具的定位受限，并且因此对手术工具的观 察受限。

因而，虽然可将可联接手术工具的尖端保持在相机的视场内，但 是促进手术工具可联接性的可控联接可不在相机的视场内。结果，手 术工具的可控联接可在执行手术程序期间，不注意地相互碰撞(或与 相机的链接碰撞)，并且结果，引起对患者的伤害，或者引起其他不 利地影响医疗程序的执行。

同样地，因为可联接相机通常不能观察其自身的可控联接，所以 当避免与手术工具链接的碰撞时，尤其关注相机的操作者运动。此外， 当提供直觉控制，从而帮助操作者遥控移动手术工具和相机时，产生 此工具尖端和相机的直觉运动所需的联接运动对于操作者来说不明显 或不直觉，因而使操作者甚至更难避免相机视场外的联接之间的碰撞。

进入引导器以及延伸出其远端的可联接器械的良好定位布置允许 器械无障碍运动并且大范围运动，以便能够使用这些器械在目标点执 行医疗程序。然而，由于相机提供的受限观察，操作者难以确定进入 引导器的良好定位布置，或者延伸出进入引导器远端的可联接器械的 良好定位布置。此外，大部分由于相机器械的摇动和倾斜能力，该捆 绑器械布置倾向于在平常使用中进入非最优工具工作方向。

发明内容

因此，本发明一个或多于一个方面的目标是这样一种方法，其向 操作者提供辅助视图，从而帮助操作者使用医疗机器人系统对患者执 行医疗程序操作者，该医疗机器人系统具有可联接的器械，其延伸出 经患者身上的单进入孔而插入的进入引导器的远端。

本发明一个或多于一个方面的另一目标是一种在该医疗机器人系 统中实施的方法，该医疗机器人系统向操作者提供视觉指示，其指示 可联接器械的可控接点何时接近其各自运动范围内的限制。

本发明一个或多于一个方面的另一目标是一种在医疗机器人系统 中实施的方法，该医疗机器人系统向操作者提供视觉指示，其指示可 联接器械的接点和/或链接和/或其部分何时接近不良或期望事件或条 件。

通过本发明的各个方面完成这些及其他的目标，其中简要说明， 一个方面是这样一种方法，其提供一种计算机产生的视图，该视图指 示一个或多于一个可联接器械的接点位置和运动限制范围，该方法包 含：接收一个或多于一个可联接器械的状态信息；通过包括一个或多 于一个可联接器械的接点图示以及一个或多于一个接点的运动限制范 围的指示而产生视图，其中，图示和指示通过使用一个或多于一个可 联接器械的接收信息和向前运动而产生；以及在显示屏上显示产生的 视图。

医疗机器人系统的另一方面包含：进入引导器；可控延伸出进入 引导器远端的多个可联接器械；显示屏；以及处理器，其被配置成接 收可联接器械的状态信息，通过包括可联接器械的接点图示以及一个 或多于一个接点的运动限制范围的指示而产生视图，其中，图示和指 示通过使用可联接器械的接收信息和向前运动而产生，以及在显示屏 上显示产生的视图。

根据以下本发明优选实施例的说明书，其各个方面的其他目标、 特征和优点将变得明显，其说明书应结合附图。

附图说明

图1示出使用利用本发明方面的医疗机器人系统的手术室的顶视 图。

图2示出利用本发明方面的医疗机器人系统中，用于控制和选择 性地关联装置操纵者操控左和右手可操纵的输入装置操控的组件的方 框图。

图3-4分别示出利用本发明方面的医疗机器人系统中使用的，可联 接相机和延伸出进入引导器远端的一对可联接手术工具的顶视图和侧 视图。

图5示出利用本发明方面的医疗机器人系统中使用的进入引导器 及其四个自由度运动的透视图。

图6示出利用本发明方面的医疗机器人系统中使用的，具有限定 在其近端和远端之间延伸的通道的进入引导器的横截面图。

图7示出利用本发明方面的医疗机器人系统中使用的进入引导器 操控器的相互作用组件的方框图。

图8示出利用本发明方面的医疗机器人系统中使用的进入引导器 操控器和可联接器械的相互作用组件的方框图。

图9示出利用本发明方面的，用于提供计算机产生的辅助视图的 方法的流程图。

图10示出利用本发明方面的医疗机器人系统中使用的，使用器械 接点位置和向前运动而确定器械链接位置和方向的数据和过程流程 图。

图11示出利用本发明方面的医疗机器人系统中使用的，使用感测 到的器械尖端位置和反向运动从而确定器械接点位置的数据和过程流 程图。

图12-13分别示出通过在利用本发明方面的医疗机器人系统中实 施的方法，在显示屏上产生和显示的顶部和侧部辅助视图。

图14示出通过在利用本发明方面的医疗机器人系统中实施的方 法，在显示屏上以单独窗口产生和显示的顶部和侧部辅助视图。

图15示出邻近利用本发明方面的医疗机器人系统中的监控器上的 可联接相机捕捉的图像显示的辅助视图。

图16示出具有通过在利用本发明方面的医疗机器人系统中实施的 方法在显示器上产生和显示的平截头体的可联接相机的辅助侧视图。

图17示出与利用本发明方面的医疗机器人系统中实施的方法在显 示器上产生和显示的由相机捕捉的图像一起，在相机的视点的一对可 联接手术工具的辅助视图的组合显示。

图18示出一种提供相应于利用本发明方面的医疗机器人系统中的 装置控制模式的辅助视图模式的方法的流程图。

图19示出延伸出利用本发明方面的医疗机器人系统中的进入引导 器远端的可联接器械的侧视图。

图20示出利用本发明的方面，缩回至进入引导器的可联接器械及 运动限制范围的指示的辅助视图。

图21示出利用本发明的方面，延伸出进入引导器的可联接器械及 运动限制范围的指示的辅助视图。

图22-25示出表示可联接器械延伸出在利用本发明方面的医疗机 器人系统中使用的进入引导器远端的各种图形显示。

图26示出在利用本发明方面的医疗机器人系统中使用的夹子的图 示。

图27示出在利用本发明方面的医疗机器人系统中使用的可联接相 机的图示。

图28示出在利用本发明方面的医疗机器人系统中，关于延伸出进 入引导器远端的可联接器械不良定位的进入引导器的简化辅助视图。

图29示出在利用本发明方面的医疗机器人系统中，关于延伸出进 入引导器远端的可联接器械再定位进入引导器的简化辅助视图。

图30示出在利用本发明方面的医疗机器人系统中，延伸出进入引 导器的可联接器械及在监控器中显示的器械中的一个捕捉的图像的辅 助视图。

具体实施方式

例如，图1示出手术室的顶视图，其中外科医生20利用医疗机器 人系统100，用于对面向上躺在手术台50上的患者40执行医疗程序。 一个或多于一个助手30可位于患者40附近，从而在外科医生20通过 操控输入装置108在外科医生控制台10上遥控操控执行程序时，帮助 执行程序。

在该例子中，通过单进入孔150将进入引导器(EG)200插入患 者40体内。虽然在该例子中，进入孔150为微创切口，但是在其他医 疗程序的执行中，其可由自然身体口代替。进入引导器200由机器人 手臂组件130支持和操控。

与医疗机器人系统100的其他部分一样，图1中也只简化示出机器 人手臂组件130。在医疗机器人系统100的一个例子中，机器人手臂组 件130包括装配臂和进入引导器操控器。装配臂用于将进入引导器200 定位在进入孔150，以便其能够适当地进入该进入孔150。然后，进入 引导器操控器被用于将进入引导器200自动机械插入进入孔150中和 将其从中缩回。其也可用于将进入引导器200关于位于进入孔150的 枢轴点纵倾、横摆和横倾/倾斜、滚动和旋转(pitch，rollandyaw)自动 机械枢轴运动。该进入引导器操控器的例子是图2中的进入引导器操 控器202，而图5中示出其操控进入引导器200的四个运动自由度的例 子。

控制台10包括：3-D监控器104，其用于向外科医生显示手术部 位的3-D图像；左和右手操控可操控的输入装置108、109；以及，处 理器(在此也称为“控制器”)102。输入装置108、109可包括多种 输入装置中的任意一个或多个，例如操纵杆、手套、扳机-枪、手操作 控制器等等。其他允许外科医生与医疗机器人系统100相互作用的输 入装置包括脚踏板105、传统的声音识别系统160和图形用户界面 (GUI)170。

辅助显示屏140耦合至控制台10，用于向外科医生提供辅助视图 以补充在监控器104中显示的视图。第二辅助显示屏140′也耦合至控 制台10(以及处理器102)，用于向助手提供辅助视图。输入装置180 也耦合至控制台，从而允许助手在用于在第二辅助显示屏140′上显示 的可用辅助图像之间选择。

控制台10通常与患者位于相同的房间，以便外科医生可直接监控 程序，如果需要是身体可用的，并且能够直接对助手说话，而非通过 电话或其他通信媒体说话。然而，应理解，外科医生也能够与患者位 于不同的房间、完全不同的建筑、或者其他允许遥控手术程序的远程 位置。在该情况下，控制台10可通过通信连接，例如局域网、广域网 或因特网，而连接至第二辅助显示屏140′和输入装置180。

如图3-4中所示，进入引导器200具有可联接器械，如可联接手术 工具231、241，以及延伸出其远端的可联接立体摄像机211。虽然仅 示出两个工具231、241，但是进入引导器200还可引导在患者体内工 作点上执行医疗程序所需的其他工具。例如，如图4所示，能够有通 道351，其用于通过进入引导器延伸另一个可联接手术工具，并且通过 其远端延伸出进入引导器的另一个可联接手术工具。每个手术工具 231、241都与工具跟踪模式中的输入装置108、109中的一个关联。外 科医生通过操控输入装置108、109执行医疗程序，以便控制器102引 起其各自关联的手术工具231、241的相应移动，而同时随着工作点的 图像由可联接相机211捕捉，外科医生在控制台监控器104上观察3-D 工作点。

优选，输入装置108、109将至少具有与其关联的工具231、241 相同的自由度，从而向外科医生提供输入装置108、109与工具231、 241集成的远程呈现或感知，以便外科医生具有直接控制工具231、241 的强烈感觉。为了该目的，监控器104也在外科医生的手附近定位， 以便其将显示定向的投射图像，以便外科医生感觉到，他或她实际上 直接向下看手术部位，并且工具231、241的图像看起来充分位于外科 医生的手所处的位置。

另外，优选将监控器104中的实时图像投射在透视图像中，以便外 科医生就像观察基本真实存在的工作点一样，能够通过其相应的输入 装置108、109而操控工具231、241的末端致动器331、341。对于真 实存在，其意思是，呈现的图像是模拟正在物理操控末端致动器331、 341的操作者视点的真实透视图像。因而，处理器102可将末端致动器 331、341的坐标转换为感知位置，以便在监控器104上示出的透视图 像为这样的图像，即如果外科医生直接位于末端致动器331、341之后 将看到的图像。

处理器102执行系统100中的各种功能。其执行的一个重要功能是 通过总线110上的控制信号而转化和传递输入装置108、109的机械运 动，以便外科医生能够有效地操控装置，例如当时选择性地关联输入 装置108、109的工具231、241、相机211以及进入引导器200。另一 功能是执行在此描述的各种方法和控制器功能。

虽然作为处理器描述，但是应明白，实际上处理器102可由硬件、 软件和固件的任何组合实施。同样地，其在此描述的功能可由一个单 元执行，或被分割为不同组件，其每个都可依次由硬件、软件和固件 的任何组合实施。此外，虽然示出部分或物理邻近控制台10，但是处 理器102也可包含贯穿该系统分布的许多子组。

对于在此描述的医疗机器人系统的各个方面的结构和运行的另外 细节，例如参考美国专利号6,493,608，“AspectsofaControlSystemof aMinimallyInvasiveSurgicalApparatus”，以及美国专利号6,671,581， “CameraReferencedControlinaMinimallyInvasiveSurgical Apparatus”，其被包含在此以供参考。

图2作为例子，示出用于控制并且选择性地连接装置操控器和输入 装置108、109的组件的方框图。可使用各种手术工具，例如夹子、切 割器和手术针，从而在患者体内的手术部位执行医疗程序。在该例子 中，使用两个手术工具231、241从而自动机械执行该程序，并且使用 相机211观察程序。工具231、241和相机211被通过进入引导器200 的通道插入。如参考图1所述，使用机器人手臂组件130的装配部分 将进入引导器200通过进入孔150插入患者体内，并且由机器人手臂 组件130的进入引导器操控器(EGM)202将其朝着将执行手术程序 的工作点机动。

每个装置231、241、211、200都有其自身的操控器操控。特别地， 相机211由相机操控器(ECM)212操控、第一手术工具231由第一 工具操控器(PSM1)232操控、第二手术工具241由第二工具操控器 (PSM2)242操控、而进入引导器200由进入引导器操控器(EGM) 202操控。为了不过度拖累附图，所以未示出装置231、241、211、200， 而仅在附图中示出其各自的操控器232、242、212、202。

每个器械操控器232、242、212都是这样的机械组件，其带有致动 器，并且提供机械、无菌界面，从而向其各个可联接器械传送运动。 每个器械操控器232、242、212都是这样的机械组件，即通过其操控 器接收运动，并且通过电缆传输，将该运动传播至其远端联接(例如， 接点)。该接点可为棱柱式(例如，直线运动)或转动式(例如，其 绕机械轴枢轴转动)的。此外，器械可具有这样的内部机械约束(例 如，电缆、传动装置、凸轮、皮带等等)，其迫使接点以预定方式一 起移动。每组机械约束接点都执行特定轴运动，并且可将约束设计为 对转接点(例如，啮合扣接点)。也要注意，这样，该器械可具有比 可用致动器多于一个的接点。

相反，进入引导器操控器202具有不同的构造和操控。以下参考图 7描述进入引导器操控器202的各部分和操控的说明。

在该例子中，每个输入装置108、109都可选择性地关联装置211、 231、241、200其中之一，以便该关联装置可由输入装置通过其控制器 和操控器控制。例如，通过将开关258、259分别放置在工具跟踪模式 “T2”和“T1”，左和右输入装置可分别关联第一和第二手术工具231、 241，后者被通过其各自的控制器233、243(优选在处理器102中实施) 和操控器232、242远程自动机械控制，以便外科医生可对患者执行医 疗程序，同时进入引导器200被锁定在适当位置。

当相机211或进入引导器200由外科医生再定位时，左和右输入装 置其中之一或其两者可关联相机211或进入引导器200，以便外科医生 可通过其各自的控制器(213或203)和操控器(212、202)移动相机 或进入引导器200。在该情况下，手术工具231、241中分离的一个被 其控制器相对于进入引导器200锁定在适当位置。例如，通过将开关 258、259分别放置在相机定位模式“C2”和“C1”中，左和右输入装 置108、109可关联相机211，后者被通过其控制器213(优选在处理 器102中实施)和操控器远程自动机械控制，以便外科医生可定位相 机211，同时手术工具231、241和进入引导器200被其各自的控制器 233、243、203锁定在适当位置。如果仅使用一个输入装置定位相机， 那么仅将一个开关258、259放置在其相机定位模式中，而同时另一个 开关258、259保持为其工具跟踪模式，以便其各自的输入装置可继续 控制其关联的手术工具。

另一方面，通过将开关258、259分别放置在进入引导器定位模式 “G2”和“G1”中，左和右输入装置108、109可关联进入引导器200， 后者被通过其控制器203(优选在处理器102中实施)和操控器202远 程自动机械控制，以便外科医生可定位进入引导器200，同时手术工具 231、241和相机211被其各自的控制器233、243、213相对于进入引 导器200锁定在适当位置。与相机定位模式一样，如果仅使用一个输 入装置定位进入引导器，那么仅将一个开关258、259放置在其进入引 导器定位模式中，而同时另一个开关258、259保持为其工具跟踪模式， 以便其各自的输入装置可继续控制其关联的手术工具。

可由外科医生以传统方式使用GUI170或声音识别系统160执行 该例子中输入装置108、109和其他装置的选择性关联。可替换地，输 入装置108、109的关联可由外科医生通过以下方式改变，即通过按下 一个输入装置108、109上的按钮或踩下脚踏板105、或使用任何其他 广为人知的模式转换技术。

图3-4作为例子，分别示出进入引导器200远端的顶视图和右侧视 图，其中相机211和手术工具231、241延伸在外。如图5中简化(未 按比例)进入引导器200的透视图所示的一样，进入引导器200的形 状通常为圆柱形，并且具有沿其长度中心延伸的轴X′。也被称为遥 控中心“RC”的枢轴点用作以下两者的原点，即具有示出的X、Y和 Z轴的固定参考系，以及具有示出的X′、Y′和Z′轴的进入引导器 参考系的原点。当系统100处于进入引导器定位模式时，进入引导器 操控器202能够响应一个或多于一个关联的输入装置的运动，使进入 引导器200关于Z轴(其保持空间固定)，在遥控中心“RC”以横倾 ψ枢轴转动。另外，进入引导器操控器202能够响应一个或多于一个 关联的输入装置的运动，使进入引导器200关于Y′轴(其垂直于进 入引导器200的纵轴X′)以纵倾θ枢轴转动，能够响应一个或多于 一个关联的输入装置的运动，使进入引导器200关于纵轴X′以横摆 φ转动，并且能够沿其纵轴X′在插入/缩回或进/出“I/O”方向直线移 动进入引导器200。注意，与空间固定的Z轴不同，X′和Y′轴随着 进入引导器200移动。

如图7所示，进入引导器操控器(EGM)202具有四个致动器 701-704以及四个相应的组件711-714，前者用于致动进入引导器200 的四个自由度运动(即纵倾θ、横倾ψ、横摆φ以及进/出I/O)，后者 用于将其执行。

重新参考图3-4，可联接相机211通过通道321延伸，并且可联接 手术工具231、241分别通过进入引导器200的通道431、441延伸。 相机211包括尖端311(其容纳连接至相机控制器的立体摄像机，以及 连接至外部光源的光纤电缆)、第一第二和第三链接322、324、326、 第一和第二接点组件(在此也简称为“接点”)323、325，以及腕组 件327。第一接点组件323耦合第一和第二链接322、324，而第二接 点组件325耦合第二和第三链接324、326，以便第二链接324可关于 第一接点组件323纵倾和横倾，而第一和第三链接322、326彼此保持 平行。

第一和第二接点323、325被称为“啮合扣接点”，因为其一起合 作运行，以便随着第二链接324绕第一接点纵倾和/或横倾枢轴旋转时， 第三链接326绕第二接点325以互补方式枢轴旋转，所以第一和第三 链接322、326彼此始终保持平行。第一链接322也可在横摆以及通过 通道321的移进移出(例如，朝着工作点插入以及从工作点缩回)中 绕其纵轴旋转。腕组件327也具有纵倾和横倾角运动的能力，以便可 将相机的尖端311向上或向下，以及向右或向左定向或其组合定向。

工具231、241的接点和链接在构造和运行中与相机的接点和链接 类似。特别地，工具231包括由例如参考图8中描述的致动器驱动的 末端受动器331(具有夹子338、339)、第一、第二和第三链接332、 334、336、第一和第二接头组件333、335、以及腕组件337。(加上 用于致动末端受动器331的另外的致动器)同样地，工具241包括由 例如参考图8中描述的致动器驱动的末端受动器341(具有夹子348、 349)、第一、第二和第三链接342、344、346、第一和第二接头组件 343、345、以及腕组件347。(加上用于致动末端受动器341的另外的 致动器)

图8作为例子，图解可联接器械(例如可联接相机211和可联接手 术工具231、241)及其相应的器械操控器(例如相机操控器212和工 具操控器232、242)的相互作用部分图。每个器械都包括用于完成器 械(包括其末端受动器)联接的许多可致动组件821-823、831-833、 870，并且其相应的操控器包括用于致动该可致动组件的许多致动器 801-803、811-813、860。

另外，也可提供许多界面机构。例如，在无菌操控器/器械界面中 提供纵倾/横倾耦合机构840、850(分别用于啮合扣接点纵倾/横倾和腕 组件纵倾/横倾)以及齿轮齿数比845、855(分别用于器械横摆和末端 受动器致动)，从而在器械接点空间中实现器械接点的要求运动范围， 而同时满足操控器致动器空间紧凑约束，并且保持穿过该界面的运动 的精确传动。虽然以单块840示出，但是啮合扣接点致动器801、802 (以#1和#2区分)以及啮合扣接点纵倾/横倾组件821、822之间的耦 合可包括一对耦合机构——在无菌界面每一侧上都有一个(即一个处 于界面的操控器侧上，一个处于界面的器械侧上)。同样地，虽然以 单块850示出，但是腕致动器812、813(以#1和#2区分)以及腕纵倾 /横倾接点组件832、833之间的耦合也可包含一对耦合机构——在无菌 界面每一侧上都有一个。

啮合扣接点纵倾组件821和啮合扣接点横倾组件822两者共用第 一、第二和第三链接(例如，可联接相机211的链接322、324、326) 以及第一和第二接点(例如联接相机211的接点322、325)。除了这 些公用组件，啮合扣接点纵倾和倾组件821、822也包括这样的机械耦 合，其耦合第一和第二接点(通过啮合扣耦合840)及啮合扣接点纵倾 和横倾致动器801、802，以便第二链接可以可控地关于这样的线枢轴 旋转，其穿过第一链接，并且沿对于第一链接(例如，可联接相机211 的链接322)的纵轴为纬度的轴，并且第二链接可以可控地关于这样的 线枢轴旋转，其穿过第一链接，并且沿垂直于第一链接的纬度和精度 轴的轴。

进/出(I/O)组件823包括第一链接(例如，可联接相机211的链 接322)和界面，后者通过传动系统将进/出(I/O)组件823耦合至第 一链接，以便第一链接通过I/O组件823的致动而可控地沿其纵轴直线 运动。横摆组件831包括第一链接和界面，通过一个或多于一个个将 横摆致动器811(例如马达的转子)的滚动元件耦合至第一连接的齿轮 (即具有齿轮齿比数845)，以便第一链接通过横摆致动器811的致动， 可控地绕其纵轴转动。

器械操控器(例如，相机操控器212)包括经腕组件(例如，可联 接相机211的腕组件327)的腕耦合850纵倾和横倾接点822、833致 动的腕致动器812、813，以便引起器械尖端相对于腕组件可控地在上- 下(即纵倾)和侧至侧(即横倾)方向枢轴转动。把手组件870包括 末端受动器(例如，手术工具231的末端受动器331)和界面，通过将 把手组件860耦合至末端受动器的一个或多于一个齿轮，以便可控地 致动末端受动器。

图9作为例子，示出在医疗机器人系统100的控制器102中实施的 方法的流程图，其用于提供产生包括可联接器械的辅助视图的计算机， 例如可联接相机211和/或一个或多于一个可联接手术工具231、241， 其延伸出进入引导器200的远端。为了本例子的目的，假设可联接相 机211和手术工具231、241延伸出进入引导器200的远端，并且被包 括在辅助视图中。然而，应明白，本方法适用于可联接器械的任何组 合，包括那些不具有可联接相机和/或那些具有可替换类型的图像捕捉 装置，例如超声波探针的器械。应进一步明白，本方法适用于具有比 在此描述的可控接点多于一个或更少接点的可联接器械。特别地，本 方法也适用于高度接合或相反可弯曲器械和/或进入引导器，例如这样 的工具，其可用于可控地通过患者体内的各种迂回曲折，到达执行医 疗程序的目标点。

在901，本方法确定产生或不产生辅助视图。如果901中的确定为 否，那么本方法就循环返回至周期性检查，从而了解情况是否改变。 另一方面，如果在901中的确定为是，那么本方法继续进入902。将产 生辅助视图的指示被编程在控制器102中，自动产生或通过操作者命 令产生。

在902，本方法接收状态信息，例如每个器械211、231、241和进 入引导器200的位置和方向。可通过被耦合至其各个操控器212、232、 242、202中的致动器的编码器提供该信息。可替换地，可由传感器提 供该信息，该传感器耦合至器械211、231、241以及进入引导器操控 器202的接头和/或链接，或者耦合至相应的操控器和器械之间的界面 的耦合机构、齿轮和传动系统，以便测量其运动。在该第二种情况下， 可在器械211、231、241以及进入引导器操控器202中包括传感器， 例如转动传感器和直线传感器，前者传感回转接点的转动运动，后者 传感器械211、231、241以及进入引导器操控器202中棱柱接点的直 线运动。也可使用其他传感器，用于提供器械211、231、241以及进 入引导器200的位置和方向信息，例如传感和跟踪可跟踪元件的外部 传感器，该元件可为放置在器械211、231、241以及进入引导器操控 器202的关键点(例如在其接点、链接和/或尖端上)的主动元件(例 如，无线电频率、电磁元件等等)或被动元件(例如，磁性元件等等)。

在903中，本方法使用在902接收的信息以及向前运动和器械211、 231、241、进入引导器200、以及进入引导器操控器202的已知构造， 产生延伸出进入引导器200的远端的可联接相机211和可联接手术工 具231、241的三维计算机模型。在该例子中产生的计算机模型可参考 图5所示的遥控中心参考系(X、Y、Z轴)。可替换地，产生的计算 机模型可参考在进入引导器200的远端定义的参考系。在后一种情况 下，如果进入引导器200从遥控中心的方向和延伸不需要在已通过本 方法产生的辅助视图中考虑，那么就可在902中省略进入引导器200 的位置和方向信息。

例如，参考图10，如果在902接收的状态信息为器械的接点位置 1001，那么就可使用器械的运动模型1003将该信息应用于器械的向前 运动1002，从而产生相对于参考系1004的器械链接位置和方向1005。 如果在902中接收的的状态信息为操控器/器械界面中的啮合扣耦合和 齿轮机构的传感状态，那么一般也可应用相同的过程。

另一方面，参考图11，如果在902接收的状态信息为器械的尖端 位置1101(在参考系1004中)，那么就可使用器械的运动模型1003 和传感器参考系将该信息用于至器械的反转运动1102，从而产生器械 的接点位置1001。然后，可如参考图10描述的，应用器械的接点位置 1001，从而产生相对于参考系1004的器械链接位置和方向1005。

可替换地，也参考图11，如果在902提供的状态信息仅限于相机 的尖端位置，那么就可通过使用传统图像处理技术，并且然后将其位 置转化为参考系1004，经识别相机211捕捉的图像尖端而确定手术工 具231、241的尖端相对于相机参考系的位置，以便可如参考图10所 述，应用相机和工具尖端的位置，从而产生相对于参考系1004的器械 链接位置和方向1005。

在904，本方法调整将两者在参考系中的三维空间的计算机模型视 图调整至指定的观察点(其中，在此应将“观察点”理解为包括位置 和方向)，即延伸出进入引导器200的远端的可联接相机211和可联 接手术工具231、241。例如，图12图解了延伸出进入引导器200的远 端的可联接相机211和可联接手术工具231、241的顶视图，其相应于 高于并且稍微在进入引导器200的远端之后的观察点。作为另一个例 子，图13图解了延伸出进入引导器200的远端的可联接相机211和可 联接手术工具231、241的侧视图，其相应于进入引导器200右侧并且 稍微在其之前的观察点。注意，虽然图12-13中描述的辅助视图为二维 的，但是其也可为三维的，因为能够从产生的计算机模型获得三维信 息。在后一种情况下，正在进行显示的辅助显示屏140将肯定为与监 控器104一样的三维显示屏。

可将观察点设为固定点，例如提供图12所示透视图的等大(三维) 视图的固定点。当工具231、241如图所示“肘向外”弯曲时(其为使 用手术工具231、241执行医疗程序的典型构造)，该透视图向外科医 生提供可联接相机211和可联接手术工具231、241的清晰视图。另一 方面，当使用第三手术工具时(例如，如图6所示，插入通道351)， 图13的透视图的侧视图可另外有用，因为第三手术工具可在可联接相 机211之下，并且因此在图12的透视图中模糊。

比将观察点始终设置在固定点更好，也可取决于当时可操控的控制 模式(即参考图2所述的模式之一)而自动改变观察点。作为例子， 图18图解了这样的方法，其用于取决于当前在医疗机器人系统100中 操控的控制模式，自动改变辅助视图模式。特别地，使用本方法，当 在1801将医疗机器人系统100确定为工具跟踪模式时，在1802执行 第一辅助视图模式，而当在1803将医疗机器人系统100确定为进入引 导器定位模式时，在1804执行第二辅助视图模式，当在1805将医疗 机器人系统100确定为相机定位模式时，在1806执行第三辅助视图模 式。选择用于每种控制模式的视图模式，以便在该模式期间，外科医 生执行动作最受益。例如，在工具跟踪和相机定位模式下，当时移动 手术工具231、241和相机211其中之一或两者，并且因此如图12和 图13所述，延伸出进入引导器200的远端的可联接相机211和可联接 手术工具231、241的辅助视图对于避免相机211视场之外链接之间碰 撞有用。另一方面，在进入引导器定位模式中，将可联接相机211和 可联接手术工具231、241锁定在相对于进入引导器200的位置，并且 因此提供如图16和图17所述的其他物品的信息的辅助视图，或空间 透视图中的进入引导器200的计算机产生视图可有用。

可替换地，在执行医疗程序期间，可提供改变观察点的操作者可选 择装置。例如，GUI170或声音识别系统160可适合向外科医生提供交 互式装置，用于选择和/或改变联接相机211和/或可联接手术工具231、 241的观察模式和/或观察点，因为其延伸出进入引导器200的远端。 外科医生也可使用输入装置108、109上的按钮或脚踏板105，从而选 择观察模式。对于助手，可使用输入装置180以及管理显示屏140′的 GUI，用于选择观察模式。因而，外科医生和助手当时观看的观察模式 可被在当时对于其特殊任务而优化。在图12-17以及图20-30中示出该 操作者可选观察模式和观察角度的例子。

在905，本方法渲染计算机模型。在该情况下的渲染包括将三维性 质添加至本方法，例如器械211、231、241和进入引导器200的远端 的已知构造特征，填充任何缺口从而制作立体模型，并且提供天然着 色和遮蔽。另外，渲染可包括替换一个或多于一个器械211、231、241 (或其一个或多于一个接点或链接或其部分)的颜色或亮度，以便器 械(或接点或链接或其部分)用于识别目的而突出。

可替换地，替换一个或多于一个器械(或其接点或链接或其部分) 的颜色、强度、或闪亮或不亮(例如，闪光)的频率可作为这样的警 告，即器械(或接点或链接或其部分)接近不良事件或条件，例如接 近其运动范围的限制，或太靠近或与另一器械碰撞。当使用颜色作为 警告时，当达到将避免的事件的警告阈值时(例如，运动限制或碰撞 范围)，颜色可从第一颜色(例如，绿色)变为第二颜色(例如，黄 色)，并且当达到将避免的事件时，从第二颜色变为第三颜色(例如， 红色)。当使用亮度作为警告时，颜色的强度随着器械(或其部分) 超过警告阈值朝着这样的将避免的事件而变化，其中当达到该事件时 具有最大强度。当使用颜色闪光作为警告时，颜色的闪光频率随着器 械(或其部分)超过警告阈值朝着这样的将避免的事件而变化，其中 当达到该事件时具有最大强度。警告阈值可基于器械(或其部分，例 如其接点)的运动范围，或基于器械(或其部分)和其可碰撞的另一 器械(或其部分)之间的距离。确定警告阈值时，器械的运动速度也 可为一个因素。例如可使用GUI170，由操作者编程警告阈值，或由处 理器102中的可编程算法自动确定警告阈值，其考虑其他因素，例如 器械的运动速度。

可替换地，替换一个或多于一个器械211、231、241(或其接点、 链接、或其部分)的颜色、强度、或闪亮或不亮(例如，闪光)的频 率可作为一种警报，即器械(或接点或链接或其部分)接近期望事件 或条件，例如执行或观察医疗程序的最佳位置或构造。在该情况下， 可定义警报阈值，以便可通过以上关于警告阈值和不良事件或条件所 述的类似方式，改变一个或多于一个器械211、231、241(或其接点、 链接、或其部分)的颜色、强度、和/或闪光，除了在该情况下，当达 到和最大化警报阈值时，该变化开始，或者另外当达到或另外实现期 望事件或条件时，其终止。可通过概念上类似于警告阈值的方式，由 操作者编程警报阈值，或由可编程算法自动确定该警报阈值。

作为用于识别、警告或警报目的的该器械辅助照明的例子，图15 在窗口1502中示出相机211和手术工具231、241的辅助视图，其中 已对相机211进行辅助照明。作为用于识别、警告或警报目的的该器 械接点辅助照明的例子，图12示出已对手术工具231、241的接点进 行辅助照明。作为用于警报目的的器械部分辅助照明的例子，图14示 出经辅助照明的手术工具241的部分1402以及相机211的部分1403， 从而指示这些部分危险地接近于碰撞。

当辅助图像的观察点相同或直接在该相机211之后时，渲染也可包 括将相机211捕捉的图像覆盖在辅助视图上。作为例子，图17图解了 作为覆盖至手术工具231、241的辅助视图渲染的相机211的捕捉图像 1700，其已由相机211的观察点(或右后)产生。在该例子中，显示 在辅助显示屏140(和/或辅助显示屏140′)上的手术工具231、241 的辅助视图包括覆盖捕捉图像1700中的部分(例如，1731、1741)以 及盖捕捉图像1700外的部分(例如，1732、1742)。因而，手术工具 231、232在捕捉图像1700之外的部分向外科医生提供关于其处于相机 211的视场之外的各个链接或可联接手臂的另外信息。也可做捕捉图像 1700之外的器械部分(例如，1732、1742)的辅助照明，用于上述识 别目的或从而指示警告或警报条件。在该情况下，将捕捉图像1700覆 盖在辅助视图上对于示出解剖学结构360也有利，后者在另外通常将 不在辅助视图中的手术工具231、241之前。虽然该例子示出覆盖在辅 助显示屏140上的辅助视图上的捕捉图像1700，但是在另外的渲染方 案中，辅助视图可覆盖显示在监控器104上的捕捉图像。

比覆盖该捕捉图像更好的是，渲染也可包括以下动作，即通过仅将 不在捕捉图像中显示的器械231、241的部分(即图17中器械231、241 的点线部分)，以适当的对齐和以镶嵌方式邻近捕捉图像，而使用辅 助视图放大经相机211捕捉的图像。

除了或替代将捕捉图像覆盖在辅助图像上，或通过辅助视图放大该 捕捉图像，渲染也可包括在辅助视图中提供其他有用信息。作为例子， 图16图解了可联接相机211的辅助侧视图，其中在辅助视图上渲染平 截头体1601，以便作为从相机尖端311的反射并随其一起移动而在辅 助显示屏140上显示。注意，虽然在附图中示出的平截头体1601为截 顶圆锥体，其也可以相应于监视器104中所示的捕捉图像的截棱锥出 现。平截头体1601的侧面指示相机211的观察范围，而平截头体1601 的基础1602显示由相机211捕捉的图像1650。注意，为了简化目的， 在该例子中，已移除通常处于辅助视图中的手术工具231、241。作为 另一例子，图14示出半透明球体或泡罩1401(优选为红色)，当达到 阈值时，其由本方法作为渲染过程的一部分显示，从而向操作者指示， 手术工具241的辅助照明部分1402、1403和相机211接近于碰撞。在 该情况下，辅助照明部分1402、1403优选处于球体的中心。作为另一 例子，图14也示出标记或其他指示物1401，其指示当使用手术工具 231、241执行医疗程序时，相机尖端311观察手术工具231、241的末 端受动器的最佳位置。例如，可通过末端受动器的尖端与捕捉图像的 中心等距的位置而确定最佳位置。

在906中，本方法引起渲染的计算机模型(即，辅助视图)在一个 或多于一个显示屏(例如，140和140′)上以选择观察点的透视图显 示。如图12-14和图16-17所示，辅助视图在辅助显示屏140上显示。 如图14所示，可一次显示超过一幅辅助视图(例如，可在相同的时间， 分别在窗口1421和1422中提供顶视图和侧视图)。如图15所示，可 在邻近可联接相机211捕捉的图像的窗口1502中，在主监控器104上 显示辅助视图，其中可联接相机211捕捉的图像在另一窗口1501中示 出。虽然在该例子中，窗口1501和1502以相同尺寸出现，但是应明 白，辅助视图窗口1502的位置和尺寸可变化并且始终处于本发明的范 围内。同样地，如上所述，可在窗口1501中，而非在其单独窗口1502 中，将辅助视图覆盖在捕捉图像上。在该情况下，覆盖辅助视图可由 外科医生开关，以便在执行医疗程序期间不混乱捕捉图像。在该情况 下，可通过压输入装置108、109其中之一上的按钮或踩下脚踏板105 而执行开和关。可替换地，可通过使用声音识别系统160的声音激活， 或通过外科医生与GUI170交互作用，或使用任何其他传统的功能转 换装置而完成该步骤。

完成906之后，然后，本方法循环回901，从而重复901-906，用 于处理器102的下一处理循环。

为了帮助操作者确定进入引导器200及其可联接器械定位良好 (即，当在患者体内的目标点执行医疗程序期间，器械具有宽运动范 围)，在一个或多于一个辅助显示屏140和140′及监控器104中，向 操作者提供对其显示的辅助视图中的运动限制范围的指示有用。

例如，图19示出工具器械231右侧视图，其延伸出进入引导器200 的远端，其具有用于确定可在辅助视图中显示的可联接器械231的运 动限制范围指示而识别的角度、链接轴和长度。由于其啮合扣构造， 器械的第一和第三链接332、336彼此保持平行关系。因而，当第一接 点333转动至最大角度1902时，第二接点335和腕接点337(分别在 第三链接336的近端和远端)两者都处于离第一链接332的纵轴1901 的最大位移1903，其可通过第二链接334的长度乘以角1902的正弦函 数计算。如果第一链接332关于其纵轴1901可充分转动，就可通过这 样的圆柱体定义第三链接336的边界限制，以及随后定义第二链接335 和腕接点337的边界限制，该圆柱体具有最大位移1903，因为其半径 和长度由延伸出进入引导器200的远端的第一链接332的最大延伸确 定。因而，对于相应于沿第三链接336(或在其耦合接点335、337) 的一点截取的圆柱体横截面片的二维视图，就可为器械231定义以圆 形渲染的边界限制，并且可为每个延伸出进入引导器200远端的其他 可联接器械定义类似的边界圆。虽然在本例子中，运动限制的接点范 围类似于圆形，也可与在此对边界圆形描述类似的方式，提供椭圆形 和其他接点约束边界限制。

作为例子，图20图解了计算机产生的辅助视图200，其描述了器 械缩回至进入引导器的远端中时的可联接器械211、231、241、251的 图示(从沿进入引导器200的纵轴X′的有利点，从远端或直接在远 端之后往外看的透视图/视角(perspective))，以及分别相应于器械 211、231、241、251的运动限制的范围2011、2031、2041、2051指示。

在该例子中，与参考图19所述相同，确定工具器械231的边界圆 2031。以类似的方式确定其他器械的边界圆。由于工具器械231、241、 251的啮合扣接点结构相同，所以其各个边界圆尺寸相同，但是彼此偏 移，以便其每个圆都沿其第一链接的精度轴居中(即，在图20中其各 个图示231、241、251的的中心)。然而，在该例子中，相机器械211 的啮合扣接点结构不同，所以其引起更小的边界圆2011。特别地，与 工具器械231、241、251相比，相机器械211对于其第一接点323具 有较小的最大转动角度，或者更短的第二链接324。然而，边界圆2011 也沿其相机器械211的第一链接322居中。

将当前由操作者控制的器械的边界圆与当前不由操作者控制的器 械的边界圆区分有用。为了该目的，以实线圆示出边界圆2031、2041， 因为其各自的可联接器械231、241当前由输入装置108、109控制(即， 其处于工具跟踪模式)，而以点线圆示出边界圆2011、2051，因为其 各自的可联接器械211、251当前不由输入装置108、109控制。可替 换地，分离器械的边界圆可完全不在辅助视图中显示，以便不以不必 要或不使用的信息使其过度复杂。

当转换输入装置109的关联，所以其控制工具251而非工具231 时，边界圆2051将变为实线圆，而边界圆2031将变为点线圆(或者 将完全不显示)，从而表示控制变化。类似地，当将输入装置108、109 的关联转换为相机定位模式时，相应于相机211的边界圆2011将变为 实线圆，而边界圆2031、2041将变为点线圆(或者其将完全不显示)， 从而表示控制变化。作为使用实线、点线和不可见圆的替换，可通过 使用不同颜色的圆或其他视觉可辨方法的方案指示控制模式，例如相 应于当时未主动控制的器械的边界圆闪亮或不亮。

作为例子，图21图解了辅助视图2100，其为可联接器械211、231、 241、251提供另外的细节，其中示出一些器械延伸出进入引导器的远 端，并且示出相应于该器械的其运动限制范围2011、2031、2041、2051 的指示。在该例子中，工具器械231、241由操作者在工具跟踪模式中 使用输入装置108、109控制，而当时器械251、211不由操作者控制。 特别地，工具器械251不在使用中，并且缩回至进入引导器200的远 端，而相机工具211在上述移动后备其控制器支持固定在某一位置， 从而看起来稍微向左和向下。因此，在辅助视图2100中，示出分别相 应于器械231、241的边界限制2031、2041为实线圆，而分别相应于 器械211、251的边界限制2011、2051为点线圆。

因此，辅助视图2100可在进入引导器200远端的横截面片上，对 每个可联接器械211、231、241、251覆盖三个横截面片，其中每个片 都垂直于并且对齐进入引导器的纵轴X′。可在每个器械的第一接点 (例如，图19中用于工具231的第一接点333)取得第一切片，可在 每个器械的腕接点(例如，图19中用于工具231的腕接点337)取得 第二切片，并且可在器械的远端(例如，图19中用于工具231的末端 受动器远端338)取得第三切片。

虽然可在辅助视图2100中显示每个可联接器械211、231、241、 251的第一接点、腕接点和远端的横截面，但是也可替代提供物体形式 的图示，例如适当定位的圆或椭圆，其中截取横截面片。特别地，示 出第一接点323、333、343、353的图示为圆或椭圆(由其各自第一接 点的相同标识号识别)，其在辅助视图2100中的位置指示当其延伸出 进入引导器200的远端时，其各个第一链接的位置；示出腕接点327、 337、347的图示为圆或椭圆(由其各自腕接点的相同标识号识别)， 其在辅助视图2100中的位置指示器械211、231、241的啮合扣接点的 联接；并且示出远端328、338、348的图示为圆或椭圆(由其各自远 端的相同标识号识别)，其在辅助视图2100中的位置指示其方向。作 为确定远端方向的例子，可通过远端绕第一链接332的横摆角度1907， 以及分别为第三链接336和工具231的末端受动器331之间的纵轴 1904、1905之间的纵倾角度1906，确定图19中工具231的远端338 的方向。

为了清晰地区分远端328、338、348的图示和其各个腕接点327、 337、347的图示，可通过不同颜色或不同阴暗或以另一视觉可区别方 式显示远端。可替换地或另外，可显示连接段，从而识别相同器械的 对应第一接点、腕接点和远端。例如，示出段2103连接第一接点333 的图示和腕接点337的图示，而示出段2104连接腕接点337的图示和 工具231的远端338的图示。也示出连接段2101、2102以类似的方式 连接第一接点343、腕接点347以及工具241的远端348的图示。

如图21中的辅助视图2100所示，工具器械231的腕接点337接近 与其边界限制2031。为了警告操作者腕接点337正在接近其运动限制 范围，可提供视觉指示，例如腕接点图示的颜色或阴暗变化、最靠近 腕接点的边界限制2031的部分2110的颜色或阴暗变化、和/或相应于 腕接点337的段2103、2104其中之一或两者的颜色或阴暗都变化。也 可使用其他的视觉指示，例如闪光、箭头或警告文字。以及也可提供 音频暗示或警告，或替代在此描述的任何该视觉指示。

当啮合扣接点接近其边界限制时，除了提供指示，也期望当可联接 器械211、231、241、251达到其延伸出进入引导器200的远端的最大 延伸时提供指示。可在补充辅助视图中指示最大限制边界，例如在图 30中，在辅助视图2100的左侧和右侧分别提供工具241、251的侧补 充辅助视图3001、3002中的延伸限制3011、3012，并且当其各个第一 链接靠近其延伸限制时，通过使用这样的视觉指示提供警告，例如其 各个可联接器械的第一连接和/或任何其他部分的颜色或阴暗或其他变 化。

作为例子，图22-25图解了可用于辅助视图2100中的图示的各种 更改，用于指示可联接器械231伸出进入引导器200的远端的程度。 可出于相同的目的，使用对其他器械211、241、251的图示的类似更 改。如图22所示，从腕接点337的图示发射的射线2201的长度用于 指示第一链接332延伸出进入引导器200的远端(即，图19中的长度 1909)的程度。可替换地或另外，如图23所示，从远端338的图示发 射的射线2301的长度可用于指示第一链接332延伸出进入引导器200 的远端的程度。可替换地或另外，如图24所示，第一接点333、腕接 点337和远端338的图示的相对尺寸、颜色和/或阴暗可用于指示第一 链接332延伸出进入引导器200的远端的程度。作为例子，随着第一 链接332进一步延伸出进入引导器200的远端，第一接点333、腕接点 337和远端338的两个或两个以上图示之间相对尺寸的差异可变得逐渐 更大。可替换地或另外，段2501、2502的图示的相对尺寸、颜色和/ 或阴暗可用于指示第一链接332延伸出进入引导器200的远端的程度。

除了辅助视图2100中显示指示可联接器械211、231、241、251 的啮合扣接点联接、延伸/缩回的图示，以及指示器械的运动限制范围 的边界的图示之外，器械远端的图示也可提供其工具或相机的其他状 态信息。作为例子，图26图解了工具231的远端338的图示，其包括 定义其中的角度2603的元件2601、2602，其指示末端受动器331的夹 子开启或闭合多少。作为另一例子，图27图解了相机器械211的远端 328(包括相机)的图示，其描述了表示相机器械211的视场的区域2701。

也可使用辅助视图2100从而当再定位进入引导器200时帮助操作 者，以便为了执行医疗程序而更好地定位可联接器械。

作为例子，图28图解了进入引导器不良位置的简化辅助视图2100， 其中每个腕接点327、337、347都接近其边界限制2011、2031、2041。 为了简化附图，省略工具251和器械211、231、241的第一接点323、 333、343的图示，以便不通过细节而使其过度复杂化。

通过转换为参考图2所述的进入引导器定位模式，可由其各个控制 器而将相机器械211的相机尖端311以及工具器械231、241的末端受 动器331、341的位置支持在适当位置，同时，操作者使用输入装置108、 109其中之一或其两者再定位进入引导器200。特别地，当在定位进入 引导器时，通过使用其各个控制器将其腕接点327、337、347和远端 328、338、348支持在适当位置，而将相机尖端311和末端受动器331、 341支持在适当位置。然而，第一接点323、333、343以及器械211、 231、241的边界限制2011、2031、2041随着进入引导器200移动而移 动。

作为例子，图29图解了这样的简化辅助视图，即进入引导器已移 动距离2901，而相对于腕接点327、337、347和器械211、231、241 的远端328、338、348再定位之后，以便每个腕接点327、337、347 都在其边界限制2011、2031、2041内更好地定位，用于改进运动范围。

可由控制器102使用如参考图9的901-905所述的计算机执行方法 产生图20-29描述的辅助视图2100，其中存在从进入引导器远端往外 看的透视图产生和显示啮合扣接点横截面片和边界限制。然后，可在 监控器104和/或辅助显示屏140、140′上单独显示计算机产生的辅助 视图2100，或者可结合例如参考图9所述的相机捕捉图像和/或其他计 算机产生的视图显示。

作为例子，图30图解了监控器104的显示屏，其中在主窗口中示 出相机器械211捕捉的图像1501，而在下部中心窗口中示出延伸出进 入引导器的可联接器械211、231、241的辅助视图2100，而分别在下 部侧窗口中分别示出与视图2100不同视角的工具241、251的补充辅 助视图3001、3002。在该视图布置中，可如参考图13-29所述，在下 部中心窗口中提供啮合扣接头边界限制的指示，并且可如上所述，在 下部侧图中提供可联接器械241、231的延伸限制指示。当延伸出进入 引导器200的远端的可联接器械接近其各自运动限制范围和/或预示着 彼此相互碰撞时，也可在此描述的辅助视图中提供视觉线索或警告。

虽然已关于优选实施例描述了本发明的各个方面，但是应理解，本 发明具有附加权利要求全部范围内的全部保护的权利。