首页> 中国专利> 用于针对改变用户界面对象的激活状态来提供反馈的设备、方法和图形用户界面

用于针对改变用户界面对象的激活状态来提供反馈的设备、方法和图形用户界面

摘要

本发明提供了一种电子设备,所述电子设备具有触敏表面、显示器以及用于检测与所述触敏表面的接触的强度的一个或多个传感器,所述电子设备显示具有多个激活状态的用户界面对象;检测所述触敏表面上的接触;并且检测所述接触的强度从第一强度增大到第二强度。响应于检测到强度的所述增大,所述设备:将激活状态改变M次,并且在所述触敏表面上生成与激活状态的每次改变对应的触觉输出。所述设备检测所述接触的强度从所述第二强度减小到所述第一强度;并且响应于检测到强度的所述减小,所述设备:将激活状态改变N次,并且在所述触敏表面上生成与激活状态的每次改变对应的触觉输出,其中N不同于M。

著录项

法律信息

  • 法律状态公告日

    法律状态信息

    法律状态

  • 2018-10-23

    授权

    授权

  • 2015-04-22

    实质审查的生效 IPC(主分类):G06F3/0488 申请日:20130508

    实质审查的生效

  • 2015-03-25

    公开

    公开

说明书

相关专利申请

本申请要求以下临时专利申请的优先权:2013年3月12日提交的名称 为“Device,Method,and Graphical User Interface for Providing Feedback for  Changing Activation States of a User Interface Object”的美国临时专利申请序 列号61/778,287;2012年12月29日提交的名称为“Device,Method,and  Graphical User Interface for Manipulating User Interface Objects with Visual  and/or Haptic Feedback”的美国临时专利申请61/747,278;以及2012年5月 9日提交的名称为“Device,Method,and Graphical User Interface for  Manipulating User Interface Objects with Visual and/or Haptic Feedback”的美 国临时专利申请61/688,227,这些申请均全文以引用方式并入本文中。

本申请还与以下临时专利申请有关:2013年3月12日提交的名称为 “Device,Method,and Graphical User Interface for Selecting Object within a  Group of Objects”的美国临时专利申请序列号61/778,092;2013年3月12 日提交的名称为“Device,Method,and Graphical User Interface for Navigating  User Interface Hierarchies”的美国临时专利申请序列号61/778,125;2013年 3月12日提交的名称为“Device,Method,and Graphical User Interface for  Manipulating Framed Graphical Objects”的美国临时专利申请序列号 61/778,156;2013年3月12日提交的名称为“Device,Method,and Graphical  User Interface for Scrolling Nested Regions”的美国临时专利申请序列号 61/778,179;2013年3月12日提交的名称为“Device,Method,and Graphical  User Interface for Displaying Additional Information in Response to a User  Contact”的美国临时专利申请序列号61/778,171;2013年3月12日提交的 名称为“Device,Method,and Graphical User Interface for Displaying User  Interface Objects Corresponding to an Application”的美国临时专利申请序列 号61/778,191;2013年3月12日提交的名称为“Device,Method,and  Graphical User Interface for Facilitating User Interaction with Controls in a User  Interface”的美国临时专利申请序列号61/778,211;2013年3月12日提交 的名称为“Device,Method,and Graphical User Interface for Forgoing  Generation of Tactile Output for a Multi-Contact Gesture”的美国临时专利申 请序列号61/778,239;2013年3月12日提交的名称为“Device,Method,and  Graphical User Interface for Providing Tactile Feedback for Operations  Performed in a User Interface”的美国临时专利申请序列号61/778,284;2013 年3月12日提交的名称为“Device,Method,and Graphical User Interface for  Transitioning between Touch Input to Display Output Relationships”的美国临 时专利申请序列号61/778,363;2013年3月12日提交的名称为“Device, Method,and Graphical User Interface for Moving a User Interface Object in  Response to Based on Gesture an Intensity of a Press Input”的美国临时专利申 请序列号61/778,367;2013年3月12日提交的名称为“Device,Method,and  Graphical User Interface for Transitioning between Display States in Response to  a Gesture”的美国临时专利申请序列号61/778,265;2013年3月12日提交 的名称为“Device,Method,and Graphical User Interface for Managing  Activation Transitioning between Displayof a Control Based on Contact  Intensity”的美国临时专利申请序列号61/778,373;2013年3月13日提交 的名称为“Device,Method,and Graphical User Interface for Displaying  Content Associated with a Corresponding Affordance”的美国临时专利申请序 列号61/778,412;2013年3月13日提交的名称为“Device,Method,and  Graphical User Interface for Selecting User Interface Objects”的美国临时专利 申请序列号61/778,413;2013年3月13日提交的名称为“Device,Method, and Graphical User Interface for Moving and Dropping a User Interface Object” 的美国临时专利申请序列号61/778,414;2013年3月13日提交的名称为 “Device,Method,and Graphical User Interface for Determining Whether to  Scroll or Select Content”的美国临时专利申请序列号61/778,416;以及2013 年3月13日提交的名称为“Device,Method,and Graphical User Interface for  Switching between User Interfaces”的美国临时专利申请序列号61/778,418, 这些申请均全文以引用方式并入本文中。

本申请还与以下临时专利申请有关:2012年5月9日提交的名称为 “Adaptive Haptic Feedback for Electronic Devices”的美国临时专利申请序 列号61/645,033;2012年6月28日提交的名称为“Adaptive Haptic  Feedback for Electronic Devices”的美国临时专利申请序列号61/665,603; 以及2012年8月8日提交的名称为“Adaptive Haptic Feedback for Electronic  Devices”的美国临时专利申请序列号61/681,098,这些申请均全文以引用 方式并入本文中。

技术领域

本文整体涉及具有触敏表面的电子设备,包括但不限于检测用于操纵 用户界面的输入的具有触敏表面的电子设备。

背景技术

触敏表面作为计算机和其他电子计算设备的输入设备的使用在近年来 显著增长。示例性触敏表面包括触摸板和触摸屏显示器。此类表面广泛用 于操纵显示器上的用户界面对象。

示例性操纵包括调整一个或多个用户界面对象的位置和/或尺寸,或激 活按钮,或打开由用户界面对象代表的文件/应用程序,以及将元数据与一 个或多个用户界面对象相关联,或以其他方式操纵用户界面。示例性用户 界面对象包括数字图像、视频、文本、图标、控制元件如按钮和其他图 形。在一些情况下,用户将需要在文件管理程序(例如,得自Apple Inc. (Cupertino,California)的Finder)、图像管理应用程序(例如,得自Apple  Inc.(Cupertino,California)的Aperture或iPhoto)、数字内容(例如,视频 和音乐)管理应用程序(例如,得自Apple Inc.(Cupertino,California)的 iTunes)、绘图应用程序、呈现应用程序(例如,得自Apple Inc.(Cupertino, California)的Keynote)、文字处理应用程序(例如,得自Apple Inc. (Cupertino,California)的Pages)、网站创建应用程序(例如,得自Apple  Inc.(Cupertino,California)的iWeb)、盘编辑应用程序(例如,得自Apple  Inc.(Cupertino,California)的iDVD)或电子表格应用程序(例如,得自 Apple Inc.(Cupertino,California)的Numbers)中对用户界面对象执行此类操 纵。

但是,用于执行这些操纵的现有方法是麻烦且低效的。此外,现有的 方法花费的时间比所需时间更长从而浪费能量。这后一考虑在电池驱动的 设备中是特别重要的。

发明内容

因此,电子设备有需要具有更快、更有效的方法和界面以用于操纵用 户界面。此类方法和界面任选地补充或替换用于操纵用户界面的常规方 法。此类方法和界面减小了对用户所造成的认知负担并产生了更有效的人 机界面。对于电池驱动设备,此类方法和界面节省了功率并增加了电池充 电之间的时间。

通过所公开的设备减少或消除了与用于具有触敏表面的电子设备的用 户界面相关联的上述缺陷和其他问题。在一些实施例中,设备是台式计算 机。在一些实施例中,设备是便携式的(例如,笔记本电脑、平板电脑或 手持设备)。在一些实施例中,设备具有触摸板。在一些实施例中,设备 具有触敏显示器(又称为“触摸屏”或“触摸屏显示器”)。在一些实施 例中,设备具有图形用户界面(GUI)、存储器、一个或多个处理器、以及存 储在存储器中用于执行多个功能的一个或多个模块、程序或指令集。在一 些实施例中,用户主要通过触敏表面上的手指接触和手势来与GUI交互。 在一些实施例中,这些功能任选地包括图像编辑、绘图、呈现、文字处 理、网站创建、盘编辑、电子表格制作、玩游戏、打电话、视频会议、发 电子邮件、即时消息通信、健身支持、数字摄影、数字摄像、网页浏览、 数字音乐播放和/或数字视频播放。用于执行这些功能的可执行指令任选地 被包括在被配置用于由一个或多个处理器执行的非暂态计算机可读存储介 质或其他计算机程序产品中。

需要电子设备具有更快、更有效的方法和界面来在重新定位用户界面 对象时选择与接触的强度的改变对应的触觉输出。此类方法和界面可补充 或替换用于重新定位用户界面对象的常规方法。此类方法和界面减小了对 用户所造成的认知负担并产生了更有效的人机界面。对于电池驱动设备, 此类方法和界面节省了功率并增加了电池充电之间的时间。

通过所公开的设备减少或消除了与用于具有触敏表面的电子设备的用 户界面相关联的上述缺陷和其他问题。在一些实施例中,设备是台式计算 机。在一些实施例中,设备是便携式的(例如,笔记本电脑、平板电脑或 手持设备)。在一些实施例中,设备具有触摸板。在一些实施例中,设备 具有触敏显示器(又称为“触摸屏”或“触摸屏显示器”)。在一些实施 例中,设备具有图形用户界面(GUI)、存储器、一个或多个处理器、以及存 储在存储器中用于执行多个功能的一个或多个模块、程序或指令集。在一 些实施例中,用户主要通过触敏表面上的手指接触和手势来与GUI交互。 在一些实施例中,这些功能可包括图像编辑、绘图、呈现、文字处理、网 站创建、盘编辑、电子表格制作、玩游戏、打电话、视频会议、发电子邮 件、即时消息通信、健身支持、数字摄影、数字摄像、网页浏览、数字音 乐播放和/或数字视频播放。用于执行这些功能的可执行指令可包括在非暂 态计算机可读存储介质或被配置用于由一个或多个处理器来执行的其他计 算机程序产品中。

根据一些实施例,在具有触敏表面和显示器的电子设备上执行方法, 其中该设备包括用于检测与触敏表面的接触的强度的一个或多个传感器。 该方法包括:在显示器上显示用户界面对象;在触敏表面上检测具有高于 对象选择阈值的强度的接触;检测接触在触敏表面上的移动,该移动对应 于手势的用于执行与用户界面对象对应的操作的初期部分;检测接触的强 度减小到低于对象释放阈值;并且响应于检测到强度减小到低于对象释放 阈值:根据确定移动满足预定义的操作执行标准:执行操作以及在触敏表 面上生成第一触觉输出;并且根据确定移动不满足预定义的操作执行标 准:放弃对操作的执行以及在触敏表面上生成第二触觉输出,其中第二触 觉输出不同于第一触觉输出。

根据一些实施例,电子设备包括:显示单元,其被配置为显示用户界 面对象;触敏表面单元,其被配置为接收接触;一个或多个传感器单元, 其被配置为检测与触敏表面单元的接触的强度;以及处理单元,其耦接至 显示单元、触敏表面单元以及传感器单元。处理单元被配置为:在触敏表 面单元上检测具有高于对象选择阈值的强度的接触;检测接触在触敏表面 单元上的移动,该移动对应于手势的用于执行与用户界面对象对应的操作 的初期部分;检测接触的强度减小到低于对象释放阈值;并且响应于检测 到强度减小到低于对象释放阈值:根据确定移动满足预定义的操作执行标 准:执行操作;以及在触敏表面单元上生成第一触觉输出;并且根据确定 移动不满足预定义的操作执行标准:放弃对操作的执行;以及在触敏表面 单元上生成第二触觉输出,其中第二触觉输出不同于第一触觉输出。

因此,具有显示器、触敏表面和用于检测与触敏表面的接触的强度的 一个或多个传感器的电子设备被提供有更快、更有效的方法和界面以用于 在重新定位用户界面对象时选择与接触的强度的改变对应的触觉输出,从 而增加此类设备的效能、效率和用户满意度。此类方法和界面任选地补充 或替换用于拖放用户界面对象的常规方法。

需要电子设备具有更快、更有效的方法和界面来提供对应于修改输入 的反馈。此类方法和界面可补充或替换用于提供对应于修改输入的反馈的 常规方法。此类方法和界面减小了对用户所造成的认知负担并产生了更有 效的人机界面。对于电池驱动设备,此类方法和界面节省了功率并增加了 电池充电之间的时间。

根据一些实施例,在具有显示器、触敏表面和用于检测与触敏表面的 接触的强度的一个或多个传感器的电子设备上执行方法。该方法包括:检 测触敏表面上的接触;检测接触的强度增大到高于第一激活阈值;在检测 到接触的强度增大到高于第一激活阈值之后,检测接触的强度减小到低于 第二激活阈值;并且响应于检测到接触的强度减小到低于第二激活阈值: 根据确定在检测到接触的强度增大到高于第一激活阈值时检测到修改输 入:执行第一操作以及在触敏表面上生成第一触觉输出;并且根据确定在 检测到接触的强度增大到高于第一激活阈值时未检测到修改输入:执行不 同于第一操作的第二操作以及在触敏表面上生成第二触觉输出,其中第二 触觉输出不同于第一触觉输出。

根据一些实施例,电子设备包括:显示单元;触敏表面单元,其被配 置为接收接触;一个或多个传感器单元,其被配置为检测与触敏表面单元 的接触的强度;以及处理单元,其耦接至显示单元、触敏表面单元以及传 感器单元。处理单元被配置为:检测触敏表面单元上的接触;检测接触的 强度增大到高于第一激活阈值;在检测到接触的强度增大到高于第一激活 阈值之后,检测接触的强度减小到低于第二激活阈值;并且响应于检测到 接触的强度减小到低于第二激活阈值:根据确定在检测到接触的强度增大 到高于第一激活阈值时检测到修改输入:执行第一操作以及在触敏表面单 元上生成第一触觉输出;并且根据确定在检测到接触的强度增大到高于第 一激活阈值时未检测到修改输入:执行不同于第一操作的第二操作以及在 触敏表面单元上生成第二触觉输出,其中第二触觉输出不同于第一触觉输 出。

因此,具有显示器、触敏表面和用于检测与触敏表面的接触的强度的 一个或多个传感器的电子设备被提供有更快、更有效的方法和界面以用于 提供对应于修改输入的反馈,从而增大此类设备的效能、效率和用户满意 度。此类方法和界面可补充或替换用于提供对应于修改输入的反馈的常规 方法。

需要电子设备具有更有效的方法和界面来针对改变用户界面对象的激 活状态来提供反馈。此类方法和界面可补充或替换用于针对改变用户界面 对象的激活状态来提供反馈的常规方法。此类方法和界面减小了对用户所 造成的认知负担并产生了更有效的人机界面。对于电池驱动设备,此类方 法和界面节省了功率并增加了电池充电之间的时间。

根据一些实施例,在具有显示器、触敏表面和用于检测与触敏表面的 接触的强度的一个或多个传感器的电子设备上执行方法。该方法包括:在 显示器上显示用户界面对象,其中用户界面对象具有多个激活状态;检测 触敏表面上的接触;检测触敏表面上的接触的强度从第一强度增大到第二 强度;响应于检测到强度的增大:将用户界面对象的激活状态改变M次, 其中M为正整数,并且在触敏表面上生成与用户界面对象的激活状态的每 次改变对应的触觉输出;检测接触的强度从第二强度减小到第一强度;并 且响应于检测到强度的减小:将用户界面对象的激活状态改变N次,其中 N为正整数,并且在触敏表面上生成与用户界面对象的激活状态的每次改 变对应的触觉输出,其中N不同于M。

根据一些实施例,电子设备包括:显示单元,其被配置为显示用户界 面对象,其中用户界面对象具有多个激活状态;触敏表面单元,其被配置 为接收接触;一个或多个传感器单元,其被配置为检测与触敏表面单元的 接触的强度;以及处理单元,其耦接至显示单元、触敏表面单元以及传感 器单元。处理单元被配置为:检测触敏表面单元上的接触;检测触敏表面 单元上的接触的强度从第一强度增大到第二强度;响应于检测到强度的增 大:将用户界面对象的激活状态改变M次,其中M为正整数,并且在触敏 表面单元上生成与用户界面对象的激活状态的每次改变对应的触觉输出; 检测接触的强度从第二强度减小到第一强度;并且响应于检测到强度的减 小:将用户界面对象的激活状态改变N次,其中N为正整数,并且在触敏 表面单元上生成与用户界面对象的激活状态的每次改变对应的触觉输出, 其中N不同于M。

因此,具有显示器、触敏表面和用于检测与触敏表面的接触的强度的 一个或多个传感器的电子设备被提供有更有效的方法和界面以用于针对改 变用户界面对象的激活状态来提供反馈,从而提高此类设备的效能、效率 和用户满意度。此类方法和界面可补充或替换用于针对改变用户界面对象 的激活状态来提供反馈的常规方法。

需要电子设备具有更快、更有效的方法和界面来针对改变用户界面对 象的激活状态来提供反馈。此类方法和界面可补充或替换用于针对改变用 户界面对象的激活状态来提供反馈的常规方法。此类方法和界面减小了对 用户所造成的认知负担并产生了更有效的人机界面。对于电池驱动设备, 此类方法和界面节省了功率并增加了电池充电之间的时间。

根据一些实施例,在具有显示器、触敏表面和用于检测与触敏表面的 接触的强度的一个或多个传感器的电子设备上执行方法。该方法包括:在 显示器上显示用户界面对象,其中用户界面对象具有第一激活状态和第二 激活状态;检测触敏表面上的接触;检测触敏表面上的接触的强度从第一 强度增大到第二强度;响应于检测到强度的增大:将用户界面对象的激活 状态从第一激活状态改变成第二激活状态;并且在触敏表面上生成M个不 同的触觉输出,其中M为正整数;检测接触的强度从第二强度减小到第一 强度;并且响应于检测到强度的减小:将用户界面对象的激活状态从第二 激活状态改变成第一激活状态;并且在触敏表面上生成N个不同的触觉输 出,其中N为正整数且N不同于M。

根据一些实施例,电子设备包括:显示单元,其被配置为显示用户界 面对象,其中用户界面对象具有第一激活状态和第二激活状态;触敏表面 单元,其被配置为接收接触;一个或多个传感器单元,其被配置为检测与 触敏表面单元的接触的强度;以及处理单元,其耦接至显示单元、触敏表 面单元以及传感器单元。处理单元被配置为:检测触敏表面单元上的接 触;检测触敏表面单元上的接触的强度从第一强度增大到第二强度;响应 于检测到强度的增大:将用户界面对象的激活状态从第一激活状态改变成 第二激活状态;并且在触敏表面单元上生成M个不同的触觉输出,其中M 为正整数;检测接触的强度从第二强度减小到第一强度;并且响应于检测 到强度的减小:将用户界面对象的激活状态从第二激活状态改变成第一激 活状态;并且在触敏表面单元上生成N个不同的触觉输出,其中N为正整 数且N不同于M。

因此,具有显示器、触敏表面和用于检测与触敏表面的接触的强度的 一个或多个传感器的电子设备被提供有更快、更有效的方法和界面以用于 针对改变用户界面对象的激活状态来提供反馈,从而提高此类设备的效 能、效率和用户满意度。此类方法和界面可补充或替换用于针对改变用户 界面对象的激活状态来提供反馈的常规方法。

根据一些实施例,电子设备包括显示器、触敏表面、存储器、任选地 用于检测与触敏表面的接触的强度的一个或多个传感器、一个或多个处理 器、以及一个或多个程序;所述一个或多个程序存储在存储器中并被配置 为由所述一个或多个处理器执行,并且所述一个或多个程序包括用于执行 段落中提及的任何方法的操作的指令。根据一些实施例,具有显示器、触 敏表面、任选地用于检测与触敏表面的接触的强度的一个或多个传感器、 存储器以及用于执行存储于存储器中的一个或多个程序的一个或多个处理 器的电子设备上的图形用户界面包括在段落中提及的任何方法中显示的一 个或多个元素,所述元素响应于输入而更新,如段落中提及的任何方法中 所描述的。根据一些实施例,计算机可读存储介质在其中存储有指令,所 述指令在由具有显示器、触敏表面以及任选地用于检测与触敏表面的接触 的强度的一个或多个传感器的电子设备执行时,致使该设备执行段落中提 及的任何方法的操作。根据一些实施例,电子设备包括:显示器、触敏表 面、以及任选地用于检测与触敏表面的接触的强度的一个或多个传感器; 以及用于执行段落中提及的任何方法的操作的装置。根据一些实施例,在 具有显示器和触敏表面、任选地用于检测与触敏表面的接触的强度的一个 或多个传感器的电子设备中使用的信息处理装置包括用于执行段落中提及 的任何方法的操作的装置。

附图说明

为了更好地理解本发明的各种所描述的实施例,应该结合以下附图参 考下面的实施例的说明,在附图中,类似的附图标号在所有附图中指示对 应的部分。

图1A是示出根据一些实施例的具有触敏显示器的便携式多功能设备 的框图。

图1B是示出根据一些实施例的用于事件处理的示例性部件的框图。

图2示出根据一些实施例的具有触摸屏的便携式多功能设备。

图3是根据一些实施例的具有显示器和触敏表面的示例性多功能设备 的框图。

图4A示出了根据一些实施例的在便携式多功能设备上用于应用程序 菜单的示例性用户界面。

图4B示出了根据一些实施例的示例性用户界面,其用于具有与显示器 分开的触敏表面的多功能设备。

图5A-5W示出了根据一些实施例的用于选择与接触的强度的改变对应 的触觉输出的示例性用户界面。

图6A-6B是根据一些实施例的流程图,其示出了选择与接触的强度的 改变对应的触觉输出的方法。

图7是根据一些实施例的电子设备的功能框图。

图8A-8V示出了根据一些实施例的用于提供对应于修改输入的反馈的 示例性用户界面。

图9A-9B是根据一些实施例的流程图,其示出了提供对应于修改输入 的反馈的方法。

图10是根据一些实施例的电子设备的功能框图。

图11A-11N示出了根据一些实施例的用于针对改变用户界面对象的激 活状态来提供反馈的示例性用户界面。

图12A-12B是根据一些实施例的流程图,其示出了针对改变用户界面 对象的激活状态来提供反馈的方法。

图13是根据一些实施例的电子设备的功能框图。

图14A-14N示出了根据一些实施例的用于针对改变用户界面对象的激 活状态来提供反馈的示例性用户界面。

图15A-15C是根据一些实施例的流程图,其示出了针对改变用户界面 对象的激活状态来提供反馈的方法。

图16是根据一些实施例的电子设备的功能框图。

具体实施方式

本文中所描述的方法、设备和GUI提供使得用户界面对象的操纵对于 用户更有效且更直观的视觉和/或触觉反馈。例如,在其中触控板的点击动 作与需要达到激活阈值的接触强度(例如,接触力、接触压力或其替代 物)解耦的系统中,设备可针对不同激活事件生成不同触觉输出(例如, “不同点击”)(例如,使得实现特定结果的点击区别于不产生任何结果 或实现与特定结果不同的结果的点击)。另外,可响应于与接触的增大强 度不相关的其他事件来生成触觉输出,诸如当用户界面对象移动到特定位 置、边界或取向时,或者当事件发生在设备处时生成触觉输出(例如, “止动”)。

另外,在其中触控板或触摸屏显示器对包括一个以上或两个特定强度 值(例如,不只是简单的开/关二元强度确定)的接触强度范围敏感的系统 中,用户界面可提供用于指示该范围内的接触的强度的响应(例如,视觉 或触觉提示)。在一些具体实施中,对输入的预激活阈值响应和/或激活后 阈值响应被显示为连续动画。作为此类响应的一个示例,响应于检测到接 触强度增大仍低于用于执行操作的激活阈值而显示操作的预览。作为此类 响应的另一个示例,甚至在用于操作的激活阈值已经达到之后还继续与操 作相关联的动画。这两个示例均向用户提供对用户接触的力或压力的连续 响应,该响应向用户提供更丰富且更直观的视觉和/或触觉反馈。更具体地 讲,此类连续力响应给予用户能够轻轻按压以预览操作和/或深深按压以 “穿过”或“通过”与该操作对应的预定义用户界面状态的体验。

另外,对于具有对接触强度范围敏感的触敏表面的设备,多个接触强 度阈值可由设备监测,并且不同功能可被映射到不同接触强度阈值。这用 于增大可用的“手势空间”,从而使得用户易于访问高级特征,该用户知 道在第二“深按压”强度阈值处或超过第二“深按压”强度阈值增大接触 的强度将致使设备执行与在接触的强度介于第一“激活”强度阈值与第二 “深按压”强度阈值之间的情况下将执行的操作不同的操作。向第二“深 按压”强度阈值指定附加功能同时在第一“激活”强度阈值处维持熟悉功 能的优点在于,在一些情况下,对附加功能感到困惑的没有经验的用户可 通过仅施加高达第一“激活”强度阈值的强度来使用熟悉的功能,而较有 经验的用户可通过施加处于第二“深按压”强度阈值的强度来利用附加功 能。

另外,对于具有对接触强度范围敏感的触敏表面的设备,该设备可通 过允许用户用单个连续接触执行复杂操作来提供附加功能。例如,当选择 一组对象时,用户可围绕触敏表面移动连续接触并且可在拖拽时按压(例 如,施加大于“深按压”强度阈值的强度)以向选择添加附加元件。这 样,用户可直观地与用户界面交互,其中用接触较用力按压致使用户界面 中的对象“更粘”。

下文描述在设备上提供直观用户界面的多个不同方法,其中点击动作 与需要达到激活阈值的力解耦和/或设备对宽的接触强度范围敏感。使用这 些方法中的一个或多个(任选地彼此结合)有助于提供直观地向用户提供 附加信息和功能的用户界面,从而减小用户的认知负担并且改进人机界 面。人机界面的此类改进使得用户能够更快速且更有效地使用该设备。对 于电池驱动的设备,这些改进节省了功率并且增加了电池充电之间的时 间。为了便于解释,下文如下描述了用于包括这些方法中的一些的例示性 示例的系统、方法和用户界面:

·许多电子设备具有包括一个或多个用户界面对象的图形用户界面。 在用户尝试执行与这些用户界面对象相关联的操作时,这些操作有 时成功,有时不成功。例如,在一些情况下,将用户界面对象移动 至用户界面的禁用部分将不会成功,而将相同的用户界面对象移动 至用户界面的允许部分将会成功。一种用于指示操作是成功还是不 成功的方法是提供用于指示操作的成功执行的视觉反馈。然而,用 户可能容易错过视觉反馈,从而在操作是否已执行方面让用户感到 困惑。下文所述的实施例通过向用户提供用于指示操作是否成功的 附加提示,包括触觉输出,来改进这些方法,从而提供更方便且高 效的用户界面。具体地讲,图5A-5W示出了根据一些实施例的用 于重新定位用户界面对象的示例性用户界面。图6A-6B是根据一些 实施例的流程图,其示出了选择与接触的强度的改变对应的触觉输 出的方法。图5A-5W中的用户界面用于示出下文描述的过程,包 括图6A-6B中的过程。

·许多电子设备包括鼠标或提供用于激活不同操作的左击功能和右击 功能的类似输入设备。由于设备在按钮和输入设备的数目方面的节 省,因此使用一个输入设备,诸如触控板,来任选地调用左击功能 和右击功能。在一些方法中,在使用所述一个输入设备来调用任一 功能时,不向用户提供用于指示所激活的操作是不与修改输入相关 联的操作(例如,左击操作)还是与修改输入相关联的操作(例 如,右击操作)的足够反馈。以下实施例通过在设备检测输入的同 时检测到修改输入的情况下与在设备检测类似输入的同时未检测到 修改输入的情况下提供不同触觉输出来改进这些方法,从而提供更 方便且高效的用户界面。具体地讲,图8A-8V示出了用于提供对应 于修改输入的反馈的示例性用户界面。图9A-9B是示出了提供对应 于修改输入的反馈的方法的流程图。图8A-8V中的用户界面用于示 出图9A-9B中的过程。

·许多电子设备具有包括用户界面对象的图形用户界面,所述用户界 面对象诸如视觉按钮和开关。在一些情况下,用户激活用户界面对 象以执行操作或调节参数或属性。指示用户界面对象的激活状态的 一个方法是模仿对应物理对象的行为。然而,在一些情况下,物理 对象诸如真实按钮和开关将在一些情况下提供过多的触觉反馈,而 在其他情况下则提供过少的反馈。下文所述的实施例提供与虚拟按 钮、开关或其他用户界面对象的激活状态的改变对应的触觉反馈, 而不是1:1地与将由用户在使用物理控件来执行类似操作时所感觉 的触感对应的触觉反馈,从而提供更方便且直观的用户界面。具体 地讲,图11A-11N示出了用于针对改变用户界面对象的激活状态来 提供反馈的示例性用户界面。图12A-12B是示出了针对改变用户界 面对象的激活状态来提供反馈的方法的流程图。图11A-11N中的用 户界面用于示出图12A-12B中的过程。

·许多电子设备具有包括用户界面对象的图形用户界面,所述用户界 面对象诸如按钮和开关。在一些情况下,用户激活用户界面对象以 执行操作或调节参数或属性。指示用户界面对象的激活状态的一个 方法是模仿对应物理对象的行为。然而,在一些情况下,物理对象 诸如真实按钮和开关将在一些情况下提供过多的触觉反馈,而在其 他情况下则提供过少的反馈。在一些设备中,触感在一些情况下由 用户针对对应的物理输入而感知,所述物理输入诸如对激活开关的 物理致动器机构(例如,鼠标按钮)的点击。下文所述的实施例提 供不与物理致动器机构的致动相关联的触觉反馈。例如,任选地提 供与激活状态改变相关的触感。在提供不与物理致动相关联的触感 时,用户可更好地辨别虚拟按钮的激活状态而不会因为过多或过少 的触觉反馈而分心,从而提供更方便且直观的用户界面。在下文 中,图14A-14N示出了用于针对改变用户界面对象的激活状态来提 供反馈的示例性用户界面。图15A-15C是示出了针对改变用户界面 对象的激活状态来提供反馈的方法的流程图。图14A-14N中的用户 界面用于示出图15A-15C中的过程。

示例性设备

现在将详细地参考实施例,这些实施例的示例在附图中被示出。在下 面的详细描述中示出了许多具体细节,以便提供对各种所描述的实施例的 充分理解。但是,对本领域的普通技术人员将显而易见的是,各种所描述 的实施例可以在没有这些具体细节的情况下被实践。在其他情况下,没有 详细地描述众所周知的方法、过程、部件、电路和网络,从而不会不必要 地使实施例的方面晦涩难懂。

还将理解的是,虽然术语“第一”、“第二”等在本文中在一些实施 例中用来描述各种元素,但是这些元素不应受到这些术语限制。这些术语 只是用来将一个元素与另一元素区分开。例如,第一接触可以被命名为第 二接触,并且类似地,第二接触可以被命名为第一接触,而不背离各种所 描述的实施例的范围。第一接触和第二接触二者都是接触,但是它们不是 同一接触。

在本文中对各种所描述的实施例的描述中所使用的术语只是为了描述 特定实施例的目的,而并非旨在进行限制。如在对各种所描述的实施例的 描述和所附权利要求书中所使用,单数形式“一个”、“一种”和“所 述”旨在也包括复数形式,除非上下文明确地另外指出。也将理解的是, 本文所用的术语“和/或”是指并包括相关联的所列出的项目中的一个或多 个的任何和所有可能的组合。另外将理解的是,当术语“包括”和/或“包 含”在本说明书中使用时,规定了所阐明的特征、整数、步骤、操作、元 件和/或部件的存在,但不排除存在或增加一个或多个其他特征、整数、步 骤、操作、元件、部件和/或它们的组。

如本文所用,根据上下文,术语“如果”任选地被解释为意思是 “当……时”或“在……时”或“响应于确定”或“响应于检测到”。类 似地,根据上下文,短语“如果确定”或“如果检测到[所陈述的条件或事 件]”任选地被解释为意思是“在确定……时”或“响应于确定”或“在检 测到[所陈述的条件或事件]时”或“响应于检测到[所陈述的条件或事 件]”。

描述了电子设备、用于这样的设备的用户界面和用于使用这样的设备 的相关联过程的实施例。在一些实施例中,设备是还包含其他功能诸如个 人数字助理和/或音乐播放器功能的便携式通信设备,诸如移动电话。便携 式多功能设备的示例性实施例包括但不限于得自Apple Inc.(Cupertino, California)的iPod和设备。任选地使用其他便携式电 子设备,诸如具有触敏表面(例如,触摸屏显示器和/或触摸板)的膝上型 计算机或平板电脑。也应当理解的是,在一些实施例中,该设备并非便携 式通信设备,而是具有触敏表面(例如,触摸屏显示器和/或触摸板)的台 式计算机。

在下面的讨论中,描述了一种包括显示器和触敏表面的电子设备。然 而应当理解,电子设备任选地包括一个或多个其他物理用户接口设备,诸 如物理键盘、鼠标和/或操纵杆。

所述设备通常支持各种应用程序,诸如以下中的一者或多者:绘图应 用程序、呈现应用程序、文字处理应用程序、网站创建应用程序、盘编辑 应用程序、电子表格应用程序、游戏应用程序、电话应用程序、视频会议 应用程序、电子邮件应用程序、即时消息应用程序、健身支持应用程序、 相片管理应用程序、数字相机应用程序、数字视频摄像机应用程序、网页 浏览应用程序、数字音乐播放器应用程序和/或数字视频播放器应用程序。

在设备上执行的各种应用程序任选地使用至少一个共用的物理用户接 口设备,诸如触敏表面。触敏表面的一种或多种功能以及显示在设备上的 对应信息任选地从一种应用程序调整和/或变化至下一种应用程序和/或在相 应应用程序内被调整和/或变化。这样,设备的共用物理架构(诸如触敏表 面)任选地利用对于用户而言直观且清楚的用户界面来支持各种应用程 序。

现在关注具有触敏显示器的便携式设备的实施例。图1A是示出根据 一些实施例的具有触敏显示器112的便携式多功能设备100的框图。触敏 显示器112有时为了方便被叫做“触摸屏”,并且有时被称为或被叫做触 敏显示器系统。设备100包括存储器102(任选地包括一个或多个计算机可 读存储介质)、存储器控制器122、一个或多个处理单元(CPU)120、外围 设备接口118、RF电路108、音频电路110、扬声器111、麦克风113、输 入/输出(I/O)子系统106、其他输入或控制设备116和外部端口124。设备 100任选地包括一个或多个光学传感器164。设备100任选地包括用于检测 设备100上的接触的强度的一个或多个强度传感器165(例如,触敏表面, 诸如设备100的触敏显示器系统112)。设备100任选地包括用于在设备 100上生成触觉输出的一个或多个触觉输出发生器167(例如,在触敏表面 诸如设备100的触敏显示器系统112或设备300的触摸板355上生成触觉输 出)。这些部件任选地通过一根或多根通信总线或信号线103通信。

如在本说明书和权利要求书中所使用,术语触敏表面上的接触的“强 度”是指触敏表面上的接触(例如,手指接触)的力或压力(每单位面积 的力),或是指触敏表面上的接触的力或压力的替代物(代用物)。接触 的强度具有值范围,该值范围包括至少四个不同值并且更典型地包括上百 个不同值(例如,至少256个)。接触的强度任选地使用各种方法和各种 传感器或传感器的组合来确定(或测量)。例如,在触敏表面下方或相邻 于触敏表面的一个或多个力传感器任选地用于测量触敏表面上的不同点处 的力。在一些具体实施中,来自多个力传感器的力测量值被合并(例如, 加权平均数)以确定估计的接触的力。类似地,触笔的压敏顶端任选地用 于确定触笔在触敏表面上的压力。可替代地,在触敏表面上检测到的接触 面积的大小和/或其变化、邻近接触的触敏表面的电容和/或其变化、和/或 邻近接触的触敏表面的电阻和/或其变化任选地用作触敏表面上的接触的力 或压力的替代物。在一些具体实施中,接触力或压力的替代物测量值直接 用于确定是否已经超过强度阈值(例如,强度阈值是以对应于替代物测量 值的单位来描述)。在一些具体实施中,接触力或压力的替代物测量值被 转换成估计的力或压力,并且估计的力或压力用于确定是否已经超过强度 阈值(例如,强度阈值是以压力的单位测量的压力阈值)。

如本说明书和权利要求书中所使用,术语“触觉输出”是指将由用户 通过用户的触摸感检测到的设备相对于设备的先前位置的物理位移、设备 的部件(例如,触敏表面)相对于设备的另一个部件(例如,外壳)的物 理位移、或部件相对于设备的质心的位移。例如,在设备或设备的部件与 用户对触摸敏感的表面(例如,手指、手掌或用户的手部的其他部分)接 触的情况下,通过物理位移生成的触觉输出将由用户解读为触感,该触感 对应于所感知到的设备或设备部件的物理特性上的变化。例如,触敏表面 (例如,触敏显示器或触控板)的移动任选地由用户解读为对物理致动器 按钮的“向下点击”或“松开点击”。在一些情况下,用户将感觉到触 感,诸如“向下点击”或“松开点击”,即使在通过用户的移动而物理地 被按压(例如,被移位)的与触敏表面相关联的物理致动器按钮没有移动 时。又如,触敏表面的移动任选地由用户解读为或感测为触敏表面的“粗 糙度”,即使在触敏表面的光滑度无变化时。虽然此类由用户对触摸的解 读将受到用户的个体化感官知觉限制,但是有许多触摸的感官知觉是大多 数用户共有的。因此,当触觉输出被描述为对应于用户的特定感官知觉 (例如,“松开点击”、“向下点击”、“粗糙度”)时,除非另外陈 述,否则所生成的触觉输出对应于设备或其部件的物理位移,该物理位移 将会生成典型(或普通)用户的所描述的感官知觉。

应当理解,设备100只是一种便携式多功能设备的一个示例,并且设 备100任选地具有比所示出的更多或更少的部件,任选地组合两个或更多 个部件,或者任选地具有这些部件的不同配置或布置。图1A中所示的各种 部件在硬件、软件或硬件和软件两者的组合中实施,该硬件或软件包括一 个或多个信号处理和/或专用集成电路。

存储器102任选地包括高速随机存取存储器,并且还任选地包括非易 失性存储器,诸如一个或多个磁盘存储设备、闪存存储器设备、或其他非 易失性固态存储器设备。设备100的其他部件(诸如CPU 120和外围设备 接口118)对存储器102的访问任选地由存储器控制器122来控制。

外围设备接口118可以被用来将设备的输入和输出外围设备耦接到 CPU 120和存储器102。该一个或多个处理器120运行或执行存储在存储器 102中的各种软件程序和/或指令集,以执行设备100的各种功能以及处理 数据。

在一些实施例中,外围设备接口118、CPU 120和存储器控制器122任 选地被实现在单个芯片诸如芯片104上。在一些其他实施例中,它们任选 地被实现在独立的芯片上。

RF(射频)电路108接收和发送RF信号,也被叫做电磁信号。RF电 路108将电信号转换为电磁信号/将电磁信号转换为电信号,并且经由电磁 信号与通信网络及其他通信设备通信。RF电路108任选地包括用于执行这 些功能的众所周知的电路,包括但不限于天线系统、RF收发器、一个或多 个放大器、调谐器、一个或多个振荡器、数字信号处理器、编解码芯片 组、用户身份模块(SIM)卡、存储器等等。RF电路108任选地通过无线通 信与网络以及其他设备通信,网络诸如互联网(也被称为万维网 (WWW))、内联网和/或无线网络(诸如蜂窝电话网络、无线局域网(LAN) 和/或城域网(MAN))。无线通信任选地使用多种通信标准、协议和技术中 的任一个,包括但不限于全球移动通信系统(GSM)、增强数据GSM环境 (EDGE)、高速下行链路分组接入(HSDPA)、高速上行链路分组接入 (HSUPA)、演进、纯数据(EV-DO)、HSPA、HSPA+、双单元HSPA(DC- HSPDA)、长期演进(LTE)、近场通信(NFC)、宽带码分多址(W-CDMA)、码 分多址(CDMA)、时分多址(TDMA)、蓝牙、无线保真(Wi-Fi)(例如,IEEE 802.11a、IEEE 802.11b、IEEE 802.11g和/或IEEE 802.11n)、互联网协议 语音技术(VoIP)、Wi-MAX、电子邮件协议(例如,互联网消息访问协议 (IMAP)和/或邮局协议(POP))、即时消息(例如,可扩展消息和存在协议 (XMPP)、用于即时消息和存在利用扩展的会话发起协议(SIMPLE)、即时消 息和存在服务(IMPS))和/或短消息服务(SMS)、或者任何其他适当的通信 协议,包括在本文档提交日期还未开发出的通信协议。

音频电路110、扬声器111和麦克风113提供用户与设备100之间的音 频接口。音频电路110从外围设备接口118接收音频数据,将音频数据转 换为电信号,并将电信号传输到扬声器111。扬声器111将电信号转换为人 类可听的声波。音频电路110还接收由麦克风113根据声波转换来的电信 号。音频电路110将电信号转换为音频数据,并将音频数据传输到外围设 备接口118以进行处理。音频数据任选地由外围设备接口118检索自和/或 传输至存储器102和/或RF电路108。在一些实施例中,音频电路110还包 括耳麦插孔(例如,图2中的212)。耳麦插孔提供音频电路110与可移除 的音频输入/输出外围设备之间的接口,该外围设备诸如仅输出的耳机或者 具有输出(例如,单耳或双耳耳机)和输入(例如,麦克风)二者的耳 麦。

I/O子系统106将设备100上的输入/输出外围设备,诸如触摸屏112和 其他输入控制设备116,耦接到外围设备接口118。I/O子系统106任选地 包括显示控制器156、光学传感器控制器158、强度传感器控制器159、触 觉反馈控制器161、和用于其他输入或控制设备的一个或多个输入控制器 160。该一个或多个输入控制器160从其他输入或控制设备116接收电信号/ 发送电信号到其他输入或控制设备116。其他输入控制设备116任选地包括 物理按钮(例如,下压按钮、摇臂按钮等)、拨号盘、滑动开关、操纵 杆、点击轮等等。在一些另选实施例中,一个或多个输入控制器160任选 地耦接至以下中的任一者(或不耦接至以下中的任一者):键盘、红外线 端口、USB端口以及指针设备诸如鼠标。一个或多个按钮(例如,图2中 的208)任选地包括用于扬声器111和/或麦克风113的音量控制的增大/减 小按钮。一个或多个按钮任选地包括下压按钮(例如,图2中的206)。

触敏显示器112提供设备与用户之间的输入接口和输出接口。显示控 制器156从触摸屏112接收电信号和/或向触摸屏112发送电信号。触摸屏 112向用户显示视觉输出。视觉输出任选地包括图形、文本、图标、视频和 它们的任何组合(统称为“图形”)。在一些实施例中,一些视觉输出或 全部的视觉输出对应于用户界面对象。

触摸屏112具有基于触觉和/或触觉接触从用户接受输入的触敏表面、 传感器或传感器组。触摸屏112和显示控制器156(与存储器102中的任何 相关联模块和/或指令集一起)检测触摸屏112上的接触(和该接触的任何 移动或中断),并且将所检测到的接触转换为与显示在触摸屏112上的用 户界面对象(例如,一个或多个软键、图标、网页或图像)的交互。在示 例性实施例中,触摸屏112与用户之间的接触点对应于用户的手指。

触摸屏112任选地使用LCD(液晶显示器)技术、LPD(发光聚合物 显示器)技术、或LED(发光二极管)技术,但是在其他实施例中使用其 他显示技术。触摸屏112和显示控制器156任选地使用现在已知的或以后 将开发出的多种触摸感测技术中的任何技术以及其他接近传感器阵列或用 于确定与触摸屏112接触的一个或多个点的其他元件来检测接触及其任何 移动或中断,该多种触摸感测技术包括但不限于电容性的、电阻性的、红 外线的和表面声波技术。在示例性实施例中,使用投射式互电容感测技 术,诸如从Apple Inc.(Cupertino,California)的iPod和 发现的技术。

触摸屏112任选地具有超过100dpi的视频分辨率。在一些实施例中, 触摸屏具有大约160dpi的视频分辨率。用户任选地使用任何合适的物体或 附加物诸如触笔、手指等等,与触摸屏112接触。在一些实施例中,用户 界面被设计为主要与基于手指的接触和手势一起工作,这与基于触笔的输 入相比由于手指在触摸屏上接触面积更大而可能精确度更低。在一些实施 例中,设备将基于手指的粗略输入翻译为精确的指针/光标位置或命令,以 执行用户所期望的动作。

在一些实施例中,除了触摸屏之外,设备100任选地包括用于激活或 去激活特定功能的触摸板(未示出)。在一些实施例中,触摸板是设备的 触敏区域,该触敏区域与触摸屏不同,其不显示视觉输出。触摸板任选地 是与触摸屏112分开的触敏表面,或者是由触摸屏形成的触敏表面的延伸 部分。

设备100还包括用于为各种部件供电的电力系统162。电力系统162任 选地包括电力管理系统、一个或多个电源(例如,电池、交流电(AC))、 再充电系统、电力故障检测电路、功率转换器或逆变器、电力状态指示器 (例如,发光二极管(LED))和任何其他与便携式设备中电力的生成、管理 和分配相关联的部件。

设备100任选地还包括一个或多个光学传感器164。图1A示出了耦接 到I/O子系统106中光学传感器控制器158的光学传感器。光学传感器164 任选地包括电荷耦合器件(CCD)或互补金属氧化物半导体(CMOS)光电晶体 管。光学传感器164从环境接收通过一个或多个透镜投射的光,并且将光 转换为表示图像的数据。结合成像模块143(也叫做相机模块),光学传感 器164任选地捕获静态图像或视频。在一些实施例中,光学传感器位于设 备100的后部上,与设备前部上的触摸屏显示器112相背对,使得触摸屏 显示器能够用作用于静态图像和/或视频图像采集的取景器。在一些实施例 中,另一个光学传感器位于设备的前部上,使得用户在触摸屏显示器上观 看其他视频会议参与者的同时,任选地获得该用户的图像以用于视频会 议。

设备100任选地还包括一个或多个接触强度传感器165。图1A示出耦 接到I/O子系统106中强度传感器控制器159的接触强度传感器。接触强度 传感器165任选地包括一个或多个压阻应变计、电容式力传感器、电力传 感器、压电力传感器、光学力传感器、电容式触敏表面或其他强度传感器 (例如,用于测量触敏表面上的接触的力(或压力)的传感器)。接触强 度传感器165从环境接收接触强度信息(例如,压力信息或压力信息的代 用物)。在一些实施例中,至少一个接触强度传感器与触敏表面(例如, 触敏显示器系统112)并置排列或邻近。在一些实施例中,至少一个接触强 度传感器位于设备100的后部上,与位于设备100的前部上的触摸屏显示 器112相背对。

设备100任选地还包括一个或多个接近传感器166。图1A示出了耦接 到外围设备接口118的接近传感器166。作为另外一种选择,接近传感器 166耦接到I/O子系统106中的输入控制器160。在一些实施例中,当多功 能设备被放置在用户耳朵附近时(例如,当用户打电话时),所述接近传 感器关闭并禁用触摸屏112。

设备100任选地还包括一个或多个触觉输出发生器167。图1A示出耦 接到I/O子系统106中触觉反馈控制器161的触觉输出发生器。触觉输出发 生器167任选地包括:一个或多个电声设备,诸如扬声器或其他音频部 件;和/或将能量转换成线性运动的机电设备,诸如电机、螺线管、电活性 聚合物、压电致动器、静电致动器或其他触觉输出生成部件(例如,将电 信号转换成设备上的触觉输出的部件)。接触强度传感器165从触觉反馈 模块133接收触觉反馈生成指令,并且在设备100上生成能够由设备100 的用户感测到的触觉输出。在一些实施例中,至少一个触觉输出发生器与 触敏表面(例如,触敏显示器系统112)并置排列或邻近,并且任选地通过 竖直地(例如,向设备100的表面之内/之外)或侧向地(例如,在与设备 100的表面相同的平面中前后地)移动触敏表面来生成触觉输出。在一些实 施例中,至少一个触觉输出发生器传感器位于设备100的后部上,与位于 设备100的前部上的触摸屏显示器112相背对。

设备100任选地还包括一个或多个加速度计168。图1A示出了耦接到 外围设备接口118的加速度计168。作为另外一种选择,加速度计168任选 地耦接到I/O子系统106中的输入控制器160。在一些实施例中,信息基于 对从该一个或多个加速度计所接收的数据的分析而在触摸屏显示器上以纵 向视图或横向视图被显示。设备100任选地除了一个或多个加速度计168 之外还包括磁力仪(未示出)和GPS(或GLONASS或其他全球导航系 统)接收器(未示出),用于获得关于设备100的位置和取向(例如,纵 向或横向)的信息。

在一些实施例中,存储在存储器102中的软件部件包括操作系统 126、通信模块(或指令集)128、接触/运动模块(或指令集)130、图形模 块(或指令集)132、文本输入模块(或指令集)134、全球定位系统(GPS) 模块(或指令集)135以及应用程序(或指令集)136。此外,在一些实施 例中,存储器102存储设备/全局内部状态157,如图1A和3中所示。设备 /全局内部状态157包括以下中的一者或多者:活动应用程序状态,其指示 哪些应用程序(如果有的话)当前是活动的;显示状态,其指示什么应用 程序、视图或其他信息占据触摸屏显示器112的各个区域;传感器状态, 其包括从设备的各个传感器以及输入控制设备116获得的信息;以及与设 备的位置和/或姿态有关的位置信息。

操作系统126(例如,Darwin、RTXC、LINUX、UNIX、OS X、 WINDOWS、或嵌入式操作系统诸如VxWorks)包括用于控制和管理一般 系统任务(例如,存储器管理、存储设备控制、电力管理等)的各种软件 部件和/或驱动器,并且有利于各种硬件和软件部件之间的通信。

通信模块128有利于通过一个或多个外部端口124与其他设备通信, 并且还包括用于处理由RF电路108和/或外部端口124所接收的数据的各 种软件部件。外部端口124(例如,通用串行总线(USB)、火线等)适于直 接耦接到其他设备或者间接地通过网络(例如,因特网、无线LAN等)耦 接。在一些实施例中,外部端口是与iPod(Apple Inc.的商标)设备上所使 用的30针连接器相同的或类似的以及/或者与其兼容的多针(例如,30 针)连接器。

接触/运动模块130任选地检测与触摸屏112(结合显示控制器156) 和其他触敏设备(例如,触摸板或物理点击轮)的接触。接触/运动模块 130包括各种软件部件以用于执行与接触的检测相关的各种操作,诸如确定 是否已经发生了接触(例如,检测手指向下事件)、确定接触的强度(例 如,接触的力或压力,或者接触的力或压力的替代物)、确定是否存在接 触的移动并且跟踪在触敏表面上的移动(例如,检测一个或多个手指拖拽 事件),以及确定接触是否已经停止(例如,检测手指向上事件或者接触 断开)。接触/运动模块130从触敏表面接收接触数据。确定接触点的移动 任选地包括确定接触点的速率(量值)、速度(量值和方向)和/或加速度 (量值和/或方向的改变),接触点的移动由一系列接触数据来表示。这些 操作任选地被应用于单个接触(例如,一个手指接触)或多个同时接触 (例如,“多触摸”/多个手指接触)。在一些实施例中,接触/运动模块 130和显示控制器156检测触摸板上的接触。

在一些实施例中,接触/运动模块130使用一组一个或多个强度阈值来 确定操作是否已经由用户执行(例如,确定用户是否已经“点击”图 标)。在一些实施例中,根据软件参数来确定至少强度阈值的子集(例 如,强度阈值不是由特定物理致动器的激活阈值来确定,并且可在不改变 设备100的物理硬件的情况下被调整)。例如,在不改变触控板或触摸屏 显示器硬件的情况下,触控板或触摸屏的鼠标“点击”阈值可被设定成预 定义阈值的大范围中的任一个。另外,在一些具体实施中,向设备的用户 提供用于调整强度阈值组中的一个或多个(例如,通过调整各个强度阈值 和/或通过利用对“强度”参数的系统级点击来一次调整多个强度阈值)的 软件设置。

接触/运动模块130任选地检测用户的手势输入。触敏表面上的不同手 势具有不同接触图案和强度。因此,任选地通过检测具体接触图案来检测 手势。例如,检测手指轻击手势包括检测手指按下事件、然后在与手指按 下事件相同的位置(或基本上相同的位置)处(例如,在图标位置处)检 测手指抬起(抬离)事件。又如,在触敏表面上检测手指轻扫手势包括检 测手指按下事件、然后检测一个或多个手指拖拽事件、并且随后检测手指 抬起(抬离)事件。

图形模块132包括用于在触摸屏112或其他显示器上渲染和显示图形 的各种已知软件部件,包括用于改变所显示的图形的视觉冲击(例如,亮 度、透明度、饱和度、对比度或其他视觉特性)的部件。如本文所用,术 语“图形”包括可被显示给用户的任何对象,非限制性地包括文本、网 页、图标(诸如包括软键的用户界面对象)、数字图像、视频、动画等 等。

在一些实施例中,图形模块132存储要使用的表示图形的数据。每个 图形任选地被分配有对应的代码。图形模块132从应用程序等接收指定要 显示的图形的一个或多个代码,在必要的情况下还一起接收坐标数据和其 他图形属性数据,并且然后生成屏幕图像数据来输出给显示控制器156。

触觉反馈模块133包括用于生成指令的各种软件部件,这些指令由一 个或多个触觉输出发生器167使用,以便响应于用户与设备100的交互而 在设备100上的一个或多个位置处产生触觉输出。

任选地为图形模块132的部件的文本输入模块134提供用于在各种应 用程序(例如,联系人137、电子邮件140、IM 141、浏览器147和需要文 本输入的任何其他应用程序)中输入文本的软键盘。

GPS模块135确定了设备的位置并提供了在各种应用程序中使用的该 信息(例如,提供至在基于位置的拨号中使用的电话138,提供至相机143 作为图片/视频元数据,以及提供至提供基于位置的服务诸如天气桌面小程 序、当地黄页桌面小程序和地图/导航桌面小程序的应用程序)。

应用程序136任选地包括以下模块(或指令集)或者其子组或超集:

·联系人模块137(有时叫做通讯录或联系人列表);

·电话模块138;

·视频会议模块139;

·电子邮件客户端模块140;

·即时消息(IM)模块141;

·健身支持模块142;

·用于静止图像和/或视频图像的相机模块143;

·图像管理模块144;

·浏览器模块147;

·日历模块148;

·桌面小程序模块149,其任选地包括以下中的一者或多者:天气桌 面小程序149-1、股市桌面小程序149-2、计算器桌面小程序149- 3、闹钟桌面小程序149-4、词典桌面小程序149-5和由用户获得的 其他桌面小程序,以及用户创建的桌面小程序149-6;

·用于形成用户创建的桌面小程序149-6的桌面小程序创建者模块 150;

·搜索模块151;

·视频和音乐播放器模块152,其任选地由视频播放器模块和音乐播 放器模块构成;

·记事本模块153;

·地图模块154;和/或

·在线视频模块155。

任选地被存储在存储器102中的其他应用程序136的示例包括其他文 字处理应用程序、其他图像编辑应用程序、绘图应用程序、呈现应用程 序、支持JAVA的应用程序、加密、数字权益管理、声音识别和声音复 制。

结合触摸屏112、显示控制器156、接触模块130、图形模块132以及 文本输入模块134,联系人模块137任选地用于管理通讯录或联系人列表 (例如,存储在存储器102或存储器370中联系人模块137的应用程序内 部状态192中),包括:将一个或多个名称添加至通讯录;从通讯录中删 除一个或多个名称;将一个或多个电话号码、一个或多个电子邮件地址、 一个或多个物理地址或其他信息与名称相关联;将图像与名称相关联;对 名称进行分类和排序;提供电话号码或电子邮件地址以发起和/或促进通过 电话138、视频会议139、电子邮件140或IM 141进行的通信;等等。

结合RF电路108、音频电路110、扬声器111、麦克风113、触摸屏 112、显示控制器156、接触模块130、图形模块132和文本输入模块134, 电话模块138任选地被用于输入对应于电话号码的字符序列、访问通讯录 137中的一个或多个电话号码、修改已经输入的电话号码、拨打相应的电话 号码、进行对话以及当对话完成时断开或挂断。如上所述,无线通信任选 地使用多种通信标准、协议和技术中的任一种。

结合RF电路108、音频电路110、扬声器111、麦克风113、触摸屏 112、显示控制器156、光学传感器164、光学传感器控制器158、接触模块 130、图形模块132、文本输入模块134、联系人列表137和电话模块138, 视频会议模块139包括用于根据用户指令发起、进行和结束用户与一个或 多个其他参与方之间的视频会议的可执行指令。

结合RF电路108、触摸屏112、显示控制器156、接触模块130、图 形模块132和文本输入模块134,电子邮件客户端模块140包括用于响应于 用户指令来创建、发送、接收和管理电子邮件的可执行指令。结合图像管 理模块144,电子邮件客户端模块140使得非常容易创建和发送具有由相机 模块143拍摄的静态图像或视频图像的电子邮件。

结合RF电路108、触摸屏112、显示控制器156、接触模块130、图 形模块132和文本输入模块134,即时消息模块141包括用于输入对应于即 时消息的字符序列、修改先前输入的字符、传输相应即时消息(例如,使 用短消息服务(SMS)或多媒体消息服务(MMS)协议用于基于电话的即时消息 或者使用XMPP、SIMPLE、或IMPS用于基于因特网的即时消息)、接收 即时消息以及查看所接收的即时消息的可执行指令。在一些实施例中,所 传输和/或接收的即时消息任选地包括图形、相片、音频文件、视频文件和/ 或MMS和/或增强消息服务(EMS)中所支持的其他附接件。如本文所用, “即时消息”是指基于电话的消息(例如,使用SMS或MMS发送的消 息)和基于互联网的消息(例如,使用XMPP、SIMPLE、或IMPS发送的 消息)二者。

结合RF电路108、触摸屏112、显示控制器156、接触模块130、图 形模块132、文本输入模块134、GPS模块135、地图模块154和音乐播放 器模块146,健身支持模块142包括用于创建健身(例如,包含时间、距离 和/或卡路里燃烧目标);与健身传感器(运动设备)通信;接收健身传感 器数据;校准用于监测健身的传感器;为健身选择并播放音乐;以及显 示、存储和传输健身数据的可执行指令。

结合触摸屏112、显示控制器156、一个或多个光学传感器164、光学 传感器控制器158、接触模块130、图形模块132和图像管理模块144,相 机模块143包括用于捕获静态图像或视频(包括视频流)并且将它们存储 到存储器102中、修改静态图像或视频的特性、或从存储器102删除静态 图像或视频的可执行指令。

结合触摸屏112、显示控制器156、接触模块130、图形模块132、文 本输入模块134和相机模块143,图像管理模块144包括用于排列、修改 (例如,编辑)、或以其他方式操纵、加标签、删除、呈现(例如,在数 字幻灯片或相册中)以及存储静态图像和/或视频图像的可执行指令。

结合RF电路108、触摸屏112、显示系统控制器156、接触模块 130、图形模块132和文本输入模块134,浏览器模块147包括用于根据用 户指令浏览因特网(包括搜索、链接到、接收和显示网页或其部分以及链 接到网页的附件和其他文件)的可执行指令。

结合RF电路108、触摸屏112、显示系统控制器156、接触模块 130、图形模块132、文本输入模块134、电子邮件客户端模块140和浏览 器模块147,日历模块148包括用于根据用户指令来创建、显示、修改和存 储日历以及与日历相关联的数据(例如,日历条目、待办事项等)的可执 行指令。

结合RF电路108、触摸屏112、显示系统控制器156、接触模块 130、图形模块132、文本输入模块134和浏览器模块147,桌面小程序模 块149是任选地由用户下载和使用的微型应用程序(例如,天气桌面小程 序149-1、股市桌面小程序149-2、计算器桌面小程序149-3、闹钟桌面小程 序149-4和词典桌面小程序149-5)或由用户创建的微型应用程序(例如, 用户创建的桌面小程序149-6)。在一些实施例中,桌面小程序包括HTML (超文本标记语言)文件、CSS(层叠样式表)文件和JavaScript文件。在 一些实施例中,桌面小程序包括XML(可扩展标记语言)文件和 JavaScript文件(例如,Yahoo!桌面小程序)。

结合RF电路108、触摸屏112、显示系统控制器156、接触模块 130、图形模块132、文本输入模块134和浏览器模块147,桌面小程序创 建者模块150任选地被用户用来创建桌面小程序(例如,将网页的用户指 定部分转到桌面小程序中)。

结合触摸屏112、显示系统控制器156、接触模块130、图形模块132 和文本输入模块134,搜索模块151包括用于根据用户指令来搜索匹配一个 或多个搜索条件(例如,一个或多个用户指定的搜索词)的存储器102中 的文本、音乐、声音、图像、视频和/或其他文件的可执行指令。

结合触摸屏112、显示系统控制器156、接触模块130、图形模块 132、音频电路110、扬声器111、RF电路108和浏览器模块147,视频和 音乐播放器模块152包括允许用户下载和回放以一种或多种文件格式(诸 如MP3或AAC文件)存储的所记录的音乐和其他声音文件的可执行指 令,以及用于显示、呈现或以其他方式回放视频(例如,在触摸屏112上 或在经由外部端口124连接的外部显示器上)的可执行指令。在一些实施 例中,设备100任选地包括MP3播放器,诸如iPod(Apple Inc.的商标)的 功能。

结合触摸屏112、显示控制器156、接触模块130、图形模块132和文 本输入模块134,记事本模块153包括用于根据用户指令创建和管理记事 本、待办事项等的可执行指令。

结合RF电路108、触摸屏112、显示系统控制器156、接触模块 130、图形模块132、文本输入模块134、GPS模块135和浏览器模块147, 地图模块154任选地用于根据用户指令接收、显示、修改和存储地图以及 与地图相关联的数据(例如,驾驶方向;与特定位置处或附近的商店及其 他兴趣点有关的数据;以及其他基于位置的数据)。

结合触摸屏112、显示系统控制器156、接触模块130、图形模块 132、音频电路110、扬声器111、RF电路108、文本输入模块134、电子 邮件客户端模块140和浏览器模块147,在线视频模块155包括指令,该指 令允许用户访问、浏览、接收(例如,通过流媒体和/或下载)、回放(例 如在通过外部端口124所连接的触摸屏上或外部显示器上)、发送具有链 接的电子邮件至特定的在线视频,以及以其他方式管理一种或多种文件格 式诸如H.264的在线视频。在一些实施例中,即时消息模块141而不是电 子邮件客户端模块140用于发送链接至特定的在线视频。

上述所识别的模块和应用程序中的每一个对应于用于执行上述一种或 多种功能以及在本申请中所描述的方法(例如,本文中所描述的计算机实 现的方法和其他信息处理方法)的一组可执行指令。这些模块(即指令 集)不必被实现为分开的软件程序、过程或模块,因此这些模块的各种子 组任选地在各种实施例中被组合或以其他方式重新布置。在一些实施例 中,存储器102任选地存储上述所识别的模块和数据结构的子组。此外, 存储器102任选地存储上面没有描述的另外的模块和数据结构。

在一些实施例中,设备100是这样一种设备,即在该设备上预定义的 一组功能的操作唯一地通过触摸屏和/或触摸板来执行。通过使用触摸屏和/ 或触摸板作为用于设备100的操作的主要输入控制设备,任选地减少设备 100上的物理输入控制设备(诸如下压按钮、拨号盘等等)的数目。

唯一地通过触摸屏和/或触摸板执行的该预定义的一组功能任选地包括 在用户界面之间的导航。在一些实施例中,触摸板在被用户触摸时将设备 100从显示在设备100上的任何用户界面导航到主菜单、主屏幕或根菜单。 在此类实施例中,使用触摸板来实现“菜单按钮”。在一些其他实施例 中,菜单按钮是物理下压按钮或者其他物理输入控制设备,而不是触摸 板。

图1B是示出根据一些实施例的用于事件处理的示例性部件的框图。在 一些实施例中,存储器102(图1A中)或存储器370(图3)包括事件分 类器170(例如,在操作系统126中)以及相应的应用程序136-1(例如, 前述应用程序137-151、155、380-390中的任一项)。

事件分类器170接收事件信息并确定要将事件信息递送到的应用程序 136-1和应用程序136-1的应用程序视图191。事件分类器170包括事件监 视器171和事件分配器模块174。在一些实施例中,应用程序136-1包括应 用程序内部状态192,该应用程序内部状态192指示当应用程序是活动的或 正在执行时显示在触敏显示器112上的一个或多个当前应用程序视图。在 一些实施例中,设备/全局内部状态157被事件分类器170用来确定哪个 (哪些)应用程序当前是活动的,并且应用程序内部状态192被事件分类 器170用来确定要将事件信息递送到的应用程序视图191。

在一些实施例中,应用程序内部状态192包括另外的信息,诸如以下 中的一者或多者:在应用程序136-1恢复执行时将要使用的恢复信息、指示 应用程序136-1正在显示的或准备好显示的信息的用户界面状态信息、使用 户能够转回到应用程序136-1的之前状态或视图的状态队列,以及由用户采 取的先前动作的恢复/撤消队列。

事件监视器171从外围设备接口118接收事件信息。事件信息包括关 于子事件(例如,用户接触触敏显示器112,作为多点触摸手势的一部分) 的信息。外围设备接口118传输其从I/O子系统106或传感器(诸如接近传 感器166)、一个或多个加速度计168和/或麦克风113(通过音频电路 110)所接收的信息。外围设备接口118从I/O子系统106接收的信息包括 来自触敏显示器112或触敏表面的信息。

在一些实施例中,事件监视器171以预先确定的间隔发送请求给外围 设备接口118。作为响应,外围设备接口118传输事件信息。在其他实施例 中,外围设备接口118仅当存在显著事件(例如,接收到高于预先确定的 噪声阈值的输入和/或接收到超过预先确定的持续时间的输入)时传输事件 信息。

在一些实施例中,事件分类器170还包括命中视图确定模块172和/或 活动事件识别器确定模块173。

当触敏显示器112显示多于一个视图时,命中视图确定模块172提供 用于确定子事件已经在一个或多个视图内什么地方发生了的软件过程。视 图由用户在显示器上可以看到的控件和其他元件构成。

与应用程序相关联的用户界面的另一方面是一组视图,本文中有时也 称为应用程序视图或用户界面窗口,在其中显示信息以及发生基于触摸的 手势。在其中检测到触摸的(相应应用程序的)应用程序视图任选地对应 于在应用程序的程序化或视图分级结构内的程序化水平。例如,在其中检 测到触摸的最低水平视图任选地被叫做命中视图,并且被识别为正确输入 的事件集任选地至少部分地基于始于基于触摸的手势的初始触摸的命中视 图来确定。

命中视图确定模块172接收与基于触摸的手势的子事件相关的信息。 当应用程序具有在分级结构中组织的多个视图时,命中视图确定模块172 将命中视图识别为分级结构中的最低视图,该分级结构应对子事件进行处 理。在大多数情形中,命中视图是发起子事件(即形成事件或潜在事件的 子事件序列中的第一个子事件)在其中发生的最低水平视图。一旦命中视 图被命中视图确定模块识别,命中视图通常接收与其被识别为命中视图所 针对的同一触摸或输入源相关的所有子事件。

活动事件识别器确定模块173确定视图分级结构内的哪个或哪些视图 应该接收特定的子事件序列。在一些实施例中,活动事件识别器确定模块 173确定仅命中视图应该接收特定的子事件序列。在其他实施例中,活动事 件识别器确定模块173确定包括子事件的物理位置的所有视图是活跃参与 的视图,并因此确定所有活跃参与的视图应接收特定子事件序列。在其他 实施例中,即使触摸子事件完全被局限到与一特定视图相关联的区域,分 级结构中更高的视图将仍然保持为活跃参与的视图。

事件分配器模块174将事件信息调度到事件识别器(例如,事件识别 器180)。在包括活动事件识别器确定模块173的实施例中,事件分配器模 块174将事件信息递送到由活动事件识别器确定模块173所确定的事件识 别器。在一些实施例中,事件分配器模块174在事件队列中存储事件信 息,事件信息由相应事件接收器模块182检索。

在一些实施例中,操作系统126包括事件分类器170。或者,应用程 序136-1包括事件分类器170。在另一实施例中,事件分类器170是独立的 模块,或者是存储在存储器102中的另一模块(诸如接触/运动模块130) 的一部分。

在一些实施例中,应用程序136-1包括多个事件处理程序190和一个 或多个应用程序视图191,其中每一个都包括用于处理发生在应用程序的用 户界面的相应视图内的触摸事件的指令。应用程序136-1的每个应用程序视 图191包括一个或多个事件识别器180。通常,相应应用程序视图191包括 多个事件识别器180。在其他实施例中,事件识别器180中的一个或多个是 独立模块的一部分,独立模块诸如用户界面工具包(未示出)或应用程序 136-1从中继承方法和其他特性的更高水平对象。在一些实施例中,相应事 件处理程序190包括以下中的一者或多者:数据更新器176、对象更新器 177、GUI更新器178,和/或从事件分类器170接收的事件数据179。事件 处理程序190任选地利用或调用数据更新器176、对象更新器177或GUI 更新器178来更新应用程序内部状态192。或者,应用程序视图191中的一 个或多个包括一个或多个相应事件处理程序190。另外,在一些实施例中, 数据更新器176、对象更新器177和GUI更新器178中的一个或多个被包 括在相应应用程序视图191中。

相应的事件识别器180从事件分类器170接收事件信息(例如,事件 数据179),并且从事件信息来标识事件。事件识别器180包括事件接收器 182和事件比较器184。在一些实施例中,事件识别器180至少还包括以下 内容的子组:元数据183和事件递送指令188(其任选地包括子事件递送指 令)。

事件接收器182从事件分类器170接收事件信息。事件信息包括关于 子事件的信息,例如触摸或触摸移动。根据子事件,事件信息还包括另外 的信息,诸如子事件的位置。当子事件涉及触摸的运动时,事件信息任选 地还包括子事件的速率和方向。在一些实施例中,事件包括设备从一个取 向旋转到另一个取向(例如,从纵向取向旋转到横向取向,反之亦然), 并且事件信息包括关于设备的当前取向(也被叫做设备姿态)的相应信 息。

事件比较器184将事件信息与预定义事件或子事件定义进行比较,并 且基于该比较来确定事件或子事件、或者确定或更新事件或子事件的状 态。在一些实施例中,事件比较器184包括事件定义186。事件定义186包 含事件的定义(例如,预定义子事件序列),例如事件1(187-1)、事件2 (187-2)以及其他。在一些实施例中,事件187中的子事件包括例如触摸开 始、触摸结束、触摸移动、触摸取消和多个触摸。在一个示例中,事件1 (187-1)的定义是在被显示对象上的双击。例如,该双击包括在所显示的对 象上的预先确定时长的第一次触摸(触摸开始)、预先确定时长的第一次 抬离(触摸结束)、在该所显示的对象上的预先确定时长的第二次触摸 (触摸开始)以及预先确定时长的第二次抬离(触摸结束)。在另一个示 例中,事件2(187-2)的定义是在被显示对象上的拖拽。例如,拖拽包括在 所显示的对象上的预先确定时长的触摸(或接触),在触敏显示器112上 的触摸的移动,以及触摸的抬离(触摸结束)。在一些实施例中,事件还 包括用于一个或多个相关联事件处理程序190的信息。

在一些实施例中,事件定义187包括用于相应用户界面对象的事件的 定义。在一些实施例中,事件比较器184执行命中测试,以确定哪个用户 界面对象与子事件相关联。例如,在其中在触敏显示器112上显示三个用 户界面对象的应用程序视图中,当在触敏显示器112上检测到触摸时,事 件比较器184执行命中测试,以确定这三个用户界面对象中哪一个与该触 摸(子事件)相关联。如果每个所显示的对象与相应的事件处理程序190 相关联,则事件比较器使用该命中测试的结果来确定哪个事件处理程序190 应该被激活。例如,事件比较器184选择与触发该命中测试的子事件和对 象相关联的事件处理程序。

在一些实施例中,相应事件187的定义还包括延迟动作,延迟动作延 迟事件信息的递送,直到已经确定子事件序列是否确实对应于事件识别器 的事件类型之后。

当相应事件识别器180确定子事件串不与事件定义186中的任何事件 匹配,则该相应事件识别器180进入事件不可能、事件失败或事件结束状 态,然后其不理会基于触摸的手势的后续子事件。在这种情况下,保持活 动以用于命中视图的其他事件识别器(如果有的话)继续跟踪和处理持续 的基于触摸的手势的子事件。

在一些实施例中,相应事件识别器180包括具有指示事件递送系统应 该如何执行对活跃参与的事件识别器的子事件递送的可配置的属性、标记 和/或列表的元数据183。在一些实施例中,元数据183包括指示事件识别 器彼此如何交互或如何能够交互的可配置的属性、标记和/或列表。在一些 实施例中,元数据183包括指示子事件是否被递送到视图或程序化分级结 构中变化的水平的可配置的属性、标记和/或列表。

在一些实施例中,当事件的一个或多个特定子事件被识别时,相应事 件识别器180激活与事件相关联的事件处理程序190。在一些实施例中,相 应事件识别器180将与该事件相关联的事件信息递送到事件处理程序190。 激活事件处理程序190不同于发送(和延期发送)子事件到相应的命中视 图。在一些实施例中,事件识别器180抛出与所识别的事件相关联的标 记,并且与该标记相关联的事件处理程序190接到该标记并执行预定义的 过程。

在一些实施例中,事件递送指令188包括递送关于子事件的事件信息 而不激活事件处理程序的子事件递送指令。相反,子事件递送指令将事件 信息递送到与子事件串相关联的事件处理程序或者递送到活跃参与的视 图。与子事件串或与活跃参与的视图相关联的事件处理程序接收事件信 息,并执行预先确定的过程。

在一些实施例中,数据更新器176创建并更新在应用程序136-1中使 用的数据。例如,数据更新器176更新在联系人模块137中使用的电话号 码,或者存储在视频播放器模块145中使用的视频文件。在一些实施例 中,对象更新器177创建并更新在应用程序136-1中使用的对象。例如,对 象更新器176创建新的用户界面对象,或者更新用户界面对象的位置。GUI 更新器178更新GUI。例如,GUI更新器178准备显示信息并将其发送至 图形模块132以用于显示在触敏显示器上。

在一些实施例中,一个或多个事件处理程序190包括或者具有对数据 更新器176、对象更新器177和GUI更新器178的访问权限。在一些实施 例中,数据更新器176、对象更新器177和GUI更新器178被包括在相应 应用程序136-1或应用程序视图191的单个模块中。在其他实施例中,它们 被包括在两个或更多个软件模块中。

应当理解,上述关于触敏显示器上的用户触摸的事件处理的讨论还适 用于利用输入设备操作多功能设备100的其他形式的用户输入,并不是所 有用户输入都是在触摸屏上发起的。例如,鼠标移动和鼠标按钮按压,任 选地与单个或多个键盘按压或保持配合;触摸板上的接触移动诸如轻击、 拖拽、滚动等;触控笔输入;设备的移动;口头指令;所检测到的眼睛移 动;生物特征输入;和/或它们的任何组合被任选地用作与对将要识别的事 件进行定义的子事件对应的输入。

图2示出了根据一些实施例的具有触摸屏112的一种便携式多功能设 备100。触摸屏任选地在用户界面(UI)200内显示一个或多个图形。在该实 施例中,以及在下文中描述的其他实施例中,用户能够通过例如用一根或 多根手指202(在附图中没有按比例绘制)或者用一个或多个触笔203(在 附图中没有按比例绘制)在图形上作出手势来选择这些图形中的一个或多 个。在一些实施例中,当用户中断与该一个或多个图形的接触时,发生对 一个或多个图形的选择。在一些实施例中,手势任选地包括一次或多次轻 击、一次或多次轻扫(从左向右、从右向左、向上和/或向下)和/或已经与 设备100接触的手指的拨动(从右向左、从左向右、向上和/或向下)。在 一些具体实施中或在一些情况下,不经意地与图形接触不会选择图形。例 如,当对应于选择的手势是轻击时,在应用程序图标之上扫动的轻扫手势 任选地不会选择相应的应用程序。

设备100任选地还包括一个或多个物理按钮,诸如“主屏幕”或菜单 按钮204。如前所述,菜单按钮204任选地用于导航到任选地在设备100上 被执行的一组应用程序中的任何应用程序136。或者,在一些实施例中,菜 单按钮被实现为显示在触摸屏112上的GUI中的软键。

在一个实施例中,设备100包括触摸屏112、菜单按钮204、用于设备 通电/断电和锁定设备的下压按钮206、一个或多个音量调节按钮208、用户 身份模块(SIM)卡槽210、耳麦插孔212和对接/充电外部端口124。下压按 钮206被任选地用于:通过下压按钮并使按钮在下压状态保持预定义的时 间间隔来使设备通电/断电;通过下压按钮并在经过预定义的时间间隔之前 释放按钮来锁定设备;和/或对设备解锁或发起解锁过程。在另选的实施例 中,设备100还通过麦克风113接受用于激活或去激活某些功能的言语输 入。设备100还任选地包括用于检测触摸屏112上的接触的强度的一个或 多个接触强度传感器165,和/或用于为设备100的用户生成触觉输出的一 个或多个触觉输出发生器167。

图3是根据一些实施例的具有显示器和触敏表面的示例性多功能设备 的框图。设备300不必是便携式的。在一些实施例中,设备300是膝上型 计算机、台式计算机、平板电脑、多媒体播放器设备、导航设备、教育设 备(诸如儿童学习玩具)、游戏系统或控制设备(例如,家用或工业用控 制器)。设备300通常包括存储器370、一个或多个处理单元(CPU)310、 一个或多个网络或其他通信接口360、和用于使这些部件互连的一根或多根 通信总线320。通信总线320任选地包括使系统部件互连并且控制系统部件 之间的通信的电路(有时叫做芯片组)。设备300包括具有显示器340的 输入/输出(I/O)接口330,显示器340通常是触摸屏显示器。I/O接口330还 任选地包括键盘和/或鼠标(或其他指向设备)350和触摸板355、用于在设 备300上生成触觉输出的触觉输出发生器357(例如,类似于以上参考图 1A所述的一个或多个触觉输出发生器167)、传感器359(例如,光学传 感器、加速度传感器、接近传感器、触敏传感器、和/或类似于以上参考图 1A所述的一个或多个接触强度传感器165的接触强度传感器)。存储器 370包括高速随机存取存储器,诸如DRAM、SRAM、DDR RAM或其他随 机存取固态存储器设备;并且任选地包括非易失性存储器,诸如一个或多 个磁盘存储设备、光盘存储设备、闪存存储器设备或其他非易失性固态存 储设备。存储器370任选地包括远离一个或多个CPU 310定位的一个或多 个存储设备。在一些实施例中,存储器370存储与便携式多功能设备100 (图1A)的存储器102中所存储的程序、模块和数据结构类似的程序、模 块和数据结构,或它们的子组。此外,存储器370任选地存储在便携式多 功能设备100的存储器102中不存在的另外的程序、模块和数据结构。例 如,设备300的存储器370任选地存储绘图模块380、呈现模块382、文字 处理模块384、网站创建模块386、盘编辑模块388和/或电子表格模块 390,而便携式多功能设备100(图1A)的存储器102任选地不存储这些模 块。

图3中上述所识别的元件中的每一个任选地被存储在一个或多个先前 提到的存储器设备中。上述所识别的模块中的每一个对应于用于执行上述 功能的一组指令。上述所识别的模块或程序(即,指令集)不必被实现为 单独的软件程序、过程或模块,并且因此这些模块的各种子组任选地在各 种实施例中被组合或以其他方式重新布置。在一些实施例中,存储器370 任选地存储上述所识别的模块和数据结构的子组。此外,存储器370任选 地存储上面未描述的另外的模块和数据结构。

现在将注意力转到任选地在便携式多功能设备100上实现的用户界面 (“UI”)的实施例。

图4A示出了根据一些实施例的便携式多功能设备100上用于应用程序 菜单的一种示例性用户界面。类似的用户界面任选地在设备300上实现。 在一些实施例中,用户界面400包括以下元素或者其子组或超集:

·一个或多个无线通信诸如蜂窝信号和Wi-Fi信号的一个或多个信号 强度指示器402;

·时间404;

·蓝牙指示器405;

·电池状态指示器406;

·具有频繁使用的应用程序的图标的托盘408,所述图标诸如:

ο电话模块138的标记“电话”的图标416,该图标416任选地包 括未接来电或语音留言的数目的指示器414;

ο电子邮件客户端模块140的标记“邮件”的图标418,该图标 418任选地包括未读电子邮件的数目的指示器410;

ο浏览器模块147的标记“浏览器”的图标420;和

ο视频和音乐播放器模块152(也叫做iPod(Apple Inc.的商标) 模块152)的标记“iPod”的图标422;以及

·其他应用程序的图标,诸如:

οIM模块141的标记“文本”的图标424;

ο日历模块148的标记“日历”的图标426;

ο图像管理模块144的标记“相片”的图标428;

ο相机模块143的标记“相机”的图标430;

ο在线视频模块155的标记“在线视频”的图标432;

ο股市桌面小程序149-2的标记“股市”的图标434;

ο地图模块154的标记“地图”的图标436;

ο天气桌面小程序149-1的标记“天气”的图标438;

ο闹钟桌面小程序149-4的标记“时钟”的图标440;

ο健身支持模块142的标记“健身支持”的图标442;

ο记事本模块153的标记“记事本”的图标444;以及

ο设置应用程序或模块的图标446,该图标446提供对设备100及 其各种应用程序136的设置的访问;

应当指出的是,图4A中示出的图标标签仅仅是示例性的。例如,视 频和音乐播放器模块152的图标422被标记“音乐”或“音乐播放器”。 其他标签任选地用于各种应用程序图标。在一些实施例中,相应应用程序 图标的标签包括与该相应应用程序图标对应的应用程序的名称。在一些实 施例中,特定应用程序图标的标签不同于与该特定应用程序图标对应的应 用程序的名称。

图4B示出了具有与显示器450(例如,触摸屏显示器112)分开的触 敏表面451(例如,图3中的平板或触摸板355)的设备(例如,图3中的 设备300)上的示例性用户界面。设备300还任选地包括用于检测触敏表面 451上的接触的强度的一个或多个接触强度传感器(例如,传感器357中的 一个或多个),和/或用于为设备300的用户生成触觉输出的一个或多个触 觉输出发生器359。

尽管将参考触摸屏显示器112(其中组合了触敏表面和显示器)上的 输入给出随后的示例中的一些,但是在一些实施例中,设备检测与显示器 分开的触敏表面上的输入,如图4B中所示。在一些实施例中,触敏表面 (例如,图4B中的451)具有对应于显示器(例如,450)上的主轴(例 如,图4B中的453)的主轴(例如,图4B中的452)。根据这些实施例, 设备检测在对应于显示器上的相应位置的位置(例如,在图4B中,460对 应于468并且462对应于470)处与触敏表面451的接触(例如,图4B中 的460和462)。这样,在触敏表面(例如,图4B中的451)与多功能设 备的显示器(图4B中的450)分开时,由设备在触敏表面上检测到的用户 输入(例如,接触460和462以及它们的移动)被该设备用于操纵显示器 上的用户界面。应当理解,类似的方法任选地用于本文所述的其他用户界 面。

另外,虽然主要是参考手指输入(例如,手指接触、手指轻击手势、 手指轻扫手势)来给出下面的示例,但是应当理解的是,在一些实施例 中,这些手指输入中的一个或多个由来自另一输入设备的输入(例如,基 于鼠标的输入或触笔输入)替代。例如,轻扫手势任选地由鼠标点击(例 如,而不是接触)、之后是光标沿着轻扫的路径的移动(例如,而不是接 触的移动)替代。又如,轻击手势任选地由光标位于轻击手势的位置之上 时的鼠标点击(例如,而不是对接触的检测、之后是终止检测接触)替 代。类似地,当同时检测到多个用户输入时,应当理解的是,多个电脑鼠 标任选地被同时使用,或鼠标和多个手指接触任选地被同时使用。

如本文所用,术语“焦点选择器”是指指示用户正与之交互的用户界 面的当前部分的输入元件。在包括光标或其他位置标记的一些具体实施 中,光标充当“焦点选择器”,使得当在光标位于特定用户界面元件(例 如,按钮、窗口、滑块或其他用户界面元件)上方时在触敏表面(例如, 图3中的触摸板355或图4B中的触敏表面451)上检测输入(例如,按压 输入)时,根据所检测到的输入调整该特定用户界面元件。在包括实现与 触摸屏显示器上的用户界面元件的直接交互的触摸屏显示器(例如,图1A 中的触敏显示器系统112或图4A中的触摸屏112)的一些具体实施中,触 摸屏上所检测到的接触充当“焦点选择器”,使得当在触摸屏显示器上在 特定用户界面元件(例如,按钮、窗口、滑块或其他用户界面元件)的位 置处检测到输入(例如,通过接触的按压输入)时,根据所检测到的输入 来调整该特定用户界面元件。在一些具体实施中,焦点从用户界面的一个 区域移动到用户界面的另一个区域,而没有对应的光标移动或接触在触摸 屏显示器上的移动(例如,通过使用制表键或方向键来将焦点从一个按钮 移动到另一个按钮);在这些具体实施中,焦点选择器根据焦点在用户界 面的不同区域之间的移动来移动。不考虑焦点选择器所采取的特定形式, 焦点选择器通常是用户界面元件(或触摸屏显示器上的接触),其由用户 控制以便传送用户与用户界面的预期交互(例如,通过向设备指示用户正 打算与之交互的用户界面的元件)。例如,当在触敏表面(例如,触摸板 或触摸屏)上检测到按压输入时焦点选择器(例如,光标、接触或选择 框)在相应按钮之上的位置将指示用户正打算激活该相应按钮(与设备的 显示器上所示的其他用户界面元件相反)。

下文描述的用户界面图包括各种强度图,这些强度图示出触敏表面上 的接触相对于一个或多个强度阈值(例如,接触检测强度阈值IT0、轻按压 强度阈值ITL、深按压强度阈值ITD和/或一个或多个其他强度阈值)的当前 强度。该强度图通常不是所显示的用户界面的一部分,但是被提供以帮助 解释所述图。在一些实施例中,轻按压强度阈值对应于这样的强度,在该 强度下设备将执行通常与点击物理鼠标或触控板的按钮相关联的操作。在 一些实施例中,深按压强度阈值对应于这样的强度,在该强度下设备将执 行跟通常与点击物理鼠标或触控板的按钮相关联的操作不同的操作。在一 些实施例中,当检测到强度低于轻按压强度阈值(例如,并且高于标称接 触检测强度阈值IT0,比该阈值低的接触不再被检测到)的接触时,设备将 根据接触在触敏表面上的移动来移动焦点选择器而不执行与轻按压强度阈 值或深按压强度阈值相关联的操作。一般来讲,除非另有陈述,否则这些 强度阈值在不同组用户界面图之间是一致的。

接触的强度从低于轻按压强度阈值ITL的强度增大到介于轻按压强度 阈值ITL与深按压强度阈值ITD之间的强度有时称为“轻按压”输入。接触 的强度从低于深按压强度阈值ITD的强度增大到高于深按压强度阈值ITD的 强度有时称为“深按压”输入。接触的强度从低于接触检测强度阈值IT0的 强度增大到介于接触检测强度阈值IT0与轻按压强度阈值ITL之间的强度有 时称为检测到触摸表面上的接触。接触的强度从高于接触检测强度阈值IT0的强度减小到低于接触强度阈值IT0的强度有时称为检测到接触从触摸表面 的抬离。在一些实施例中,IT0为零。在一些实施例中,IT0大于零。在一些 图示中,阴影圆或椭圆用于表示触敏表面上的接触的强度。在一些图示 中,没有阴影的圆或椭圆用于表示触敏表面上的相应接触而不指定相应接 触的强度。

在本文中所描述的一些实施例中,响应于检测到包括相应按压输入的 手势或响应于检测到用相应接触(或多个接触)执行的相应按压输入而执 行一个或多个操作,其中至少部分地基于检测到该接触(或多个接触)的 强度增大到高于按压输入强度阈值而检测相应按压输入。在一些实施例 中,响应于检测到相应接触的强度增大到高于按压输入强度阈值(例如, 相应按压输入的“下行冲程”)而执行相应操作。在一些实施例中,按压 输入包括相应接触的强度增大到高于按压输入强度阈值以及该接触的强度 随后减小到低于按压输入强度阈值,并且响应于检测到相应接触的强度随 后减小到低于按压输入阈值(例如,相应按压输入的“上行冲程”)而执 行相应操作。

在一些实施例中,设备采用强度滞后以避免有时称为“抖动”的意外 输入,其中设备限定或选择与按压输入强度阈值具有预定义关系的滞后强 度阈值(例如,滞后强度阈值比按压输入强度阈值低X个强度单位,或滞 后强度阈值是按压输入强度阈值的75%、90%或某些合理比例)。因此, 在一些实施例中,按压输入包括相应接触的强度增大到高于按压输入强度 阈值以及该接触的强度随后减小到低于对应于按压输入强度阈值的滞后强 度阈值,并且响应于检测到相应接触的强度随后减小到低于滞后强度阈值 (例如,相应按压输入的“上行冲程”)而执行相应操作。类似地,在一 些实施例中,仅在设备检测到接触的强度从处于或低于滞后强度阈值的强 度增大到处于或高于按压输入强度阈值的强度,以及任选地接触的强度随 后减小到处于或低于滞后强度的强度时才检测到按压输入,并且响应于检 测到按压输入(例如,接触的强度增大或接触的强度减小,这取决于环 境)而执行相应操作。

为便于解释,响应于检测到以下任一者而任选地触发对响应于与按压 输入强度阈值相关联的按压输入或者响应于包括按压输入的手势而执行的 操作的描述:接触的强度增大到高于按压输入强度阈值、接触的强度从低 于滞后强度阈值的强度增大到高于按压输入强度阈值的强度、接触的强度 减小到低于按压输入强度阈值、和/或接触的强度减小到低于对应于按压输 入强度阈值的滞后强度阈值。另外,在其中操作被描述为响应于检测到接 触的强度减小到低于按压输入强度阈值而执行的示例中,任选地响应于检 测到接触的强度减小到低于对应于并且小于按压输入强度阈值的滞后强度 阈值而执行操作。

用户界面和相关联的过程

选择与接触的强度的改变对应的触觉输出

许多电子设备具有包括一个或多个用户界面对象的图形用户界面。在 用户尝试执行与这些用户界面对象相关联的操作时,这些操作有时成功, 有时不成功。例如,尝试将用户界面对象移动至用户界面的不接受用户界 面对象的区域将不会成功。在许多用户界面中,存在关于与用户界面对象 相关联的操作是否成功的一个或多个视觉或听觉提示。然而,在一些情况 下,用户将错过关于操作是否成功的视觉或听觉提示(例如,因为用户未 看着显示器和/或调低或关闭了设备的音量,或者因为用户在提供提示时分 心)。错过提示可引起用户尝试重复已成功执行的操作或继续执行其他操 作而未认识到所尝试的操作未被执行。因此,向用户提供附加提示以指示 操作是否成功将是有利的。在具有集成机械按钮的触敏表面中,基于机械 按钮的机构来确定减小触敏表面上的接触的强度的感觉,并且因此无论是 否执行与接触相关联的操作,所述感觉(对于相同的用户输入而言)均是 相同的。相比之下,在触敏表面与用于确定与触敏表面的接触的强度的传 感器相关联并且独立致动器在触敏表面上生成受软件控制的触觉输出时, 可根据操作是否成功执行来改变在用户已尝试执行操作之后所生成的触觉 输出(例如,因为触觉输出与强度输入解耦)。提供关于所尝试的操作是 否已执行的此类触觉反馈通过为用户提供与操作的执行有关的及时准确的 反馈来改进机器用户界面。

图5A-5W示出了根据一些实施例的用于选择与接触的强度的改变对应 的触觉输出的示例性用户界面。这些中的用户界面用于示出下文描述的过 程,包括图6A-6B中的过程。图5A-5W包括强度图,其示出触敏表面上的 接触相对于包括对象选择强度阈值(例如,“ITL”)和对象释放阈值(例 如,“IT1”)的多个强度阈值的当前强度。在一些实施例中,对象选择强 度阈值不同于(例如,高于)对象释放强度阈值。在一些实施例中,对象 选择强度阈值为ITD,并且对象释放强度阈值为ITD或稍低于ITD的强度阈 值。

图5A示出了在设备(例如,设备300)的显示器450(例如,显示器 340)上显示的用户界面11700(例如,桌面用户界面或绘图或图形应用程 序内的绘图输入区域)。在用户界面11700中显示了一个或多个用户界面 对象11702。在图5A中,在用户界面11700中显示了用户界面对象11702- 1至11702-3。用户界面对象11702任选地为应用程序快捷方式或启动图 标、绘图或图形程序内的形状或对象、或其他图标、桌面小程序或对象中 的一者。在用户界面11700中还任选地显示了一个或多个窗口11704。窗口 11704任选地为对应于相应应用程序的应用程序窗口。

在显示器450上在用户界面11700中还显示了光标11706。在一些实施 例中,光标11706是鼠标指针。光标11706是焦点选择器的示例。用户通 过在设备的触敏表面451(例如,触摸板355)上进行接触(例如,手指接 触或触笔接触)并且根据需要在触敏表面451上移动接触,来任选地将光 标11706定位于用户界面11700中的任何位置处。响应于检测到接触以及 接触在触敏表面451上的移动,光标11706定位在用户界面11700中对应 于接触在触敏表面451上的当前位置的位置,并且根据接触在触敏表面451 上的移动来移动。在图5A中,在触敏表面451上的一位置处检测到接触 11708,并且光标11706被定位在用户界面11700中用户界面对象11702-2 上方的对应位置处,如图所示。

设备包括一个或多个传感器,所述传感器检测与触敏表面451的接触 的强度。在图5A中,检测到接触11708的强度低于对象选择阈值(例如, 图5A-5W中的“ITL”)。接触11708的低于对象选择阈值的强度由接触 11708中的空背景表示,如图5A所示。

通过例如用户在具有接触11708的触敏表面451上施加更大的压力来 增大接触11708的强度。通过设备中的接触强度传感器来检测接触11708 的强度的改变。响应于检测到接触11708的强度增大到高于对象选择阈值 (其中高于对象选择阈值的强度由接触11708中的密点背景表示,如图5B 所示),选择光标11706定位于其上方的用户界面对象。在图5B中,光标 11706定位于用户界面对象11702-2上方,并且因此选择用户界面对象 11702-2。任选地,在视觉上突出显示(例如,用不同的颜色;用更粗的边 框,如图5B所示)用户界面对象11706-2以指示所述选择。在一些实施例 中,在触敏表面上生成用于指示用户界面对象11702-2的选择的触觉输出。 根据与用户界面对象的选择相关联的移动轮廓来任选地生成用于指示所述 选择的触觉输出。在一些实施例中,选择触觉输出对应于模拟机械按钮的 向下点击的触感(例如,按压鼠标按钮或具有集成按钮的触控板的点击感 觉)。

在接触11708的强度保持高于对象释放阈值(例如,图5A-5W中的 “IT1”)并且用户界面对象11702-2保持为被选择时,用户移动触敏表面 451上的接触11708。响应于检测到接触11708的移动,用户界面对象 11702-2以及光标11706根据接触11708的移动在用户界面11700上移动; 根据接触11708的移动在用户界面11700上拖拽用户界面对象11702-2。例 如,如图5C-5D所示,响应于接触11708在触敏表面451上在方向11710 上的移动,用户界面对象11702-2在方向11712上移动至用户界面11700中 的另一位置。用户界面对象11702-2的新位置,如图5D所示,在用户界面 11700中的“空白空间”上方,远离窗口11704以及其他用户界面对象 11702。

对象释放阈值为确定所选择的用户界面对象是否自选择中释放的强度 阈值。在一些实施例中,对象释放阈值低于对象选择阈值。在一些其他实 施例中,对象释放阈值与对象选择阈值相同。

在用户界面对象11702-2位于用户界面11700中的新位置处时,如图 5D所示,用户诸如通过减小具有接触11708的触敏表面451上的压力(包 括,例如,将接触11708自触敏表面451完全释放),来减小接触11708 的强度。如图5E所示,接触11708的强度减小到低于对象释放阈值,其中 低于对象释放阈值的强度由接触11708中的稀点背景以及图5E中示出的强 度计表示。响应于接触11708的强度减小到低于对象释放阈值,进行在新 位置处重新定位(或“放置”)用户界面对象11702-2的尝试。用户界面 11700中的“空白空间”是有效放置位置,因为该空白空间尚未被用户界面 对象11702或窗口11704占据,并且因此用户界面对象11702-2到新位置的 重新定位是成功的。因此,用户界面对象11702-2被放置在用户界面11700 中的新位置处并且取消选择(即,自选择中释放)。响应于检测到接触 11708的强度减小到低于对象释放阈值,连同用户界面对象502-2的放置一 起,在触敏表面451上生成触觉输出。

返回至图5B,所选择的用户界面对象11702-2响应于检测到接触 11708的移动而移动,如上文所述。图5F-5G示出了用户界面对象11702-2 响应于检测到接触11708在触敏表面451上在方向11714上的移动而在用 户界面11700中在方向11716上移动至窗口11704上方的新位置;根据接 触11708的移动来在用户界面11700上拖拽用户界面对象11702-2。

在用户界面对象11702-2位于窗口11704上方的新位置处时,如图5G 所示,用户诸如通过减小具有接触11708的触敏表面451上的压力(包 括,例如,将接触11708抬离触敏表面451),来减小接触11708的强度。 如图5H所示,接触11708的强度已减小到低于对象释放阈值。响应于接触 11708的强度减小到低于对象释放阈值,进行在新位置(例如,图5G中的 用户界面对象11702-2的位置)处重新定位用户界面对象11702-2的尝试。 用户界面11700内窗口11704上方的位置是无效放置位置,因为该位置已 被窗口11704占据,并且因此用户界面对象11702-2在新位置处的重新定位 是不成功的。因此,用户界面对象11702-2返回至其原始位置并且取消选 择。响应于检测到接触11708的强度减小到低于对象释放阈值,连同用户 界面对象11702-2返回至其原始位置一起,在触敏表面451上生成上文参考 图5E所描述的与针对用户界面11702-2的成功放置而生成的触觉输出不同 的触觉输出。

因此,在选择用户界面对象11702-2之后,由用户执行接触11708的 移动以及接触11708的强度减小到低于对象释放阈值。响应于检测到强度 减小到低于对象释放阈值,进行在新位置处放置用户界面对象11702-2的尝 试。根据新位置是有效放置目标/位置还是无效放置目标/位置,放置是成功 的(即,放置被执行)或不成功的(即,放置未被执行)。

如上所述,针对用户界面对象的成功放置(例如,如上文参考图5E所 描述)以及针对用户界面对象的不成功放置(例如,如上文参考图5H所描 述)任选地生成不同的触觉输出。在一些实施例中,针对成功放置的触觉 输出以及针对不成功放置的触觉输出两者均对应于模拟机械按钮的松开点 击(例如,释放所点击并保持的鼠标按钮)的触感。在一些实施例中,针 对成功放置以及不成功放置的触觉输出具有不同的振幅,但在其他方面两 者均根据相同的移动轮廓生成。例如,针对成功放置的触觉输出具有比针 对不成功放置的触觉输出更大的振幅,但在其他方面具有与针对不成功放 置的触觉输出相同的移动轮廓(例如,方波形)。

在一些其他实施例中,针对成功放置的触觉输出以及针对不成功放置 的触觉输出具有不同的移动轮廓。例如,针对成功放置的触觉输出任选地 根据正弦移动轮廓生成,而针对不成功放置的触觉输出任选地根据锯齿波 形移动轮廓生成。

返回至图5B,所选择的用户界面对象11702-2响应于检测到接触 11708的移动而移动,如上文所述。图5I-5K示出了用户界面对象11702-2 响应于检测到接触11708在触敏表面451上分别在方向11718上以及然后 在方向11720上的连续移动而在用户界面11700中在方向11722上以及然 后在方向11724上连续移动。用户界面对象11702-2移动至窗口11704上方 的位置并且然后至用户界面11700中的“空白空间”;根据接触11708的 移动在不同时间在空白空间以及窗口11704上方在用户界面11700上拖拽 用户界面对象11702-2。因此,在移动期间,用户界面对象11702-2在无效 放置位置上方移动一时间段并且在有效放置位置上方移动另一时间段。

在用户界面对象11702-2正移动时,在用户界面对象11702-2在窗口 11704上方时,如图5J所示,与无效放置位置相关联的触觉输出任选地在 触敏表面451上生成。触觉输出向用户警示用户界面对象11702-2的当前位 置是无效放置位置。

在用户界面对象11702-2继续移动时,在用户界面对象11702-2在用户 界面11700中的空白空间上方时,如图5K所示,与有效放置位置相关联的 触觉输出任选地在触敏表面451上生成。触觉输出向用户警示用户界面对 象11702-2的当前位置是有效放置位置。与有效放置位置相关联的触觉输出 不同于与无效放置位置相关联的触觉输出。例如,有效放置位置触觉输出 具有比无效放置位置触觉输出更大的振幅和/或与无效放置位置触觉输出不 同的移动轮廓。在一些实施例中,与有效放置目标/位置相关联的触觉输出 根据与跟成功放置相关联的触觉输出相同的移动轮廓和振幅来生成。类似 地,与无效放置目标/位置相关联的触觉输出根据与跟不成功放置相关联的 触觉输出相同的移动轮廓和振幅来生成。例如,触敏表面任选地在用户界 面对象11702-2在无效放置目标上方时提供高频周期性触觉输出(例如,微 小嗡嗡声),并且在用户界面对象11702-2在有效放置目标上方时不提供任 何触觉输出或提供低频周期性触觉输出(例如,周期性砰砰声)。

当在用户界面对象11702-2在用户界面11700中的空白空间上方时接 触11708的强度减小到低于对象释放阈值时,如图5L所示,用户界面对象 11702-2被成功地放置在其新位置处。

应当理解的是,上述有效放置目标/位置和无效放置目标/位置的标准 (位置是否已被用户界面对象11702或窗口11704占据)仅是示例性的, 并且在其他实施例、具体实施中,或针对用户界面对象的不同类别或针对 实施例或具体实施内的不同操作,任选地采用其他标准。例如,将应用程 序快捷方式或启动图标放置在另一应用程序快捷方式/启动图标上方或应用 程序窗口上方的位置处是无效的,而将绘图程序内的形状放置在另一形状 上方的位置处是有效的。又如,如果操作包括交换受影响的应用程序快捷 方式/启动图标的位置,则将应用程序快捷方式/启动图标放置在另一应用程 序快捷方式/启动图标上方的位置处是有效的。

如上所述,触觉输出任选地针对用户界面对象、有效放置、无效放 置、有效放置位置以及无效放置位置的选择来生成。图5M-5O示出了用于 生成这些触觉输出的移动轮廓的示例性波形。图5M示出了锯齿波形。图 5N示出了方波形,并且图5O示出了具有比图5N的方波形更小的振幅的方 波形。图5M中的锯齿形移动轮廓任选地与用户界面对象的选择相关联; 针对用户界面对象的选择而生成的触觉输出任选地根据锯齿形移动轮廓生 成。图5N中的大振幅方形移动轮廓任选地与成功放置(或有效放置目标/ 位置)相关联;针对成功放置或有效放置目标/位置而生成的触觉输出任选 地根据大振幅方形移动轮廓生成。图5O中的小振幅方形移动轮廓任选地与 不成功放置(或无效放置目标/位置)相关联;针对不成功放置或无效放置 目标/位置而生成的触觉输出任选地根据小振幅方形移动轮廓生成。

图5P-5W示出了在具有触敏显示器112的设备(例如,设备100)上 实现的上文参考图5A-5O所描述的用户界面的示例。图5P示出了在设备的 触敏显示器112上显示的用户界面11736(例如,主屏幕菜单或屏幕界面、 桌面用户界面、绘图或图形应用程序内的绘图输入区域)。任选地在用户 界面11736中显示了一个或多个用户界面对象11732。在图5P中,在用户 界面11732中显示了用户界面对象11732-1至11736-3。用户界面对象 11732例如为应用程序快捷方式或启动图标、绘图或图形程序内的形状或对 象、或其他图标、桌面小程序或对象。在用户界面11736中还任选地显示 了一个或多个窗口11734。窗口11734例如为对应于相应应用程序的应用程 序窗口。在触敏显示器上在用户界面对象11732-2上方的位置处检测到接触 11738。

设备包括一个或多个传感器,所述传感器检测与触敏显示器112的接 触的强度。在图5P中,检测到接触11738的强度低于对象选择阈值。接触 11738的低于对象选择阈值的强度由接触11738中的空背景表示,如图5P 所示。

通过例如用户在具有接触11738的触敏显示器112上施加更大的压力 来增大接触11738的强度。通过设备中的接触强度传感器来检测接触11738 的强度的改变。响应于检测到接触11738的强度增大到高于对象选择阈值 (其中高于对象选择阈值的强度由接触11738中的密点背景以及图5Q中示 出的强度计表示),选择接触11738定位于其上方的用户界面对象。在图 5Q中,接触11738定位于用户界面对象11732-2上方,并且因此选择用户 界面对象11732-2。任选地,在视觉上突出显示(例如,用不同的颜色;用 更粗的边框,如图5Q所示)用户界面对象11736-2以指示所述选择。在一 些实施例中,在触敏显示器112上生成用于指示用户界面对象11732-2的选 择的触觉输出。根据与用户界面对象的选择相关联的移动轮廓来任选地生 成用于指示所述选择的触觉输出。在一些实施例中,选择触觉输出对应于 模拟机械按钮的向下点击的触感(例如,按压鼠标按钮的点击感觉)。

在接触11738的强度保持高于对象释放阈值并且用户界面对象11732-2 保持为被选择时,用户移动触敏显示器112上的接触11738。响应于检测到 接触11738的移动,用户界面对象11732-2根据接触11738的移动在用户界 面11736上移动;根据接触11738的移动在用户界面11736上拖拽用户界 面对象11732-2。例如,如图5R-5S所示,响应于接触11738在触敏显示器 112上在方向11740上的移动,用户界面对象11732-2在与接触11738相同 的方向上移动至用户界面11736中的另一位置。用户界面对象11732-2的新 位置,如图5S所示,在用户界面11736中的“空白空间”上方,远离窗口 11734以及其他用户界面对象11732-1和11732-3。

在用户界面对象11732-2位于用户界面11736中的新位置处时,如图 5S所示,用户诸如通过减小具有接触11738的触敏显示器112上的压力 (包括,例如,将接触11738抬离触敏显示器112),来减小接触11738的 强度。如图5T所示,接触11738的强度减小到低于对象释放阈值,其中低 于对象释放阈值的强度由接触11738中的稀点背景以及强度计表示。响应 于接触11738的强度减小到低于对象释放阈值,进行在新位置处重新定位 (或“放置”)用户界面对象11732-2的尝试。用户界面11736中的“空白 空间”是有效放置位置,因为该空白空间尚未被用户界面对象11732或窗 口11734占据,并且因此用户界面对象11732-2到新位置的重新定位是成功 的。因此,用户界面对象11732-2被放置在用户界面11736中的新位置处并 且取消选择(即,自选择中释放)。响应于检测到接触11738的强度减小 到低于对象释放阈值,连同用户界面对象532-2的放置一起,在触敏显示器 112上生成触觉输出。

返回至图5Q,所选择的用户界面对象11732-2响应于检测到接触 11738的移动而移动,如上文所述。图5U-5V示出了用户界面对象11732-2 响应于检测到接触11738在触敏显示器112上在方向11742上的移动而在 用户界面11736中在方向11742上移动至窗口11734上方的新位置;根据 接触11738的移动来在用户界面11736上拖拽用户界面对象11732-2。

在用户界面对象11732-2位于窗口11734上方的新位置处时,如图5V 所示,用户诸如通过减小具有接触11738的触敏显示器112上的压力(包 括,例如,将接触11738自触敏显示器112完全释放),来减小接触11738 的强度。如图5W所示,接触11738的强度已减小到低于对象释放阈值。 响应于接触11738的强度减小到低于对象释放阈值,进行在新位置处重新 定位用户界面对象11732-2的尝试。用户界面11736内窗口11734上方的位 置是无效放置位置,因为该位置已被窗口11734占据,并且因此用户界面 对象11732-2在新位置处的重新定位是不成功的。因此,用户界面对象 11732-2返回至其原始位置并且取消选择。响应于检测到接触11738的强度 减小到低于对象释放阈值,连同用户界面对象11732-2返回至其原始位置一 起,在触敏显示器112上生成上文参考图5T所描述的与针对用户界面 11732-2的成功放置而生成的触觉输出不同的触觉输出。

图6A-6B是根据一些实施例的流程图,其示出了选择与接触的强度的 改变对应的触觉输出的方法11800。在具有显示器、触敏表面以及用于检测 与触敏表面的接触的强度的一个或多个传感器的电子设备(例如,图3的 设备300或图1A的便携式多功能设备100)处执行方法11800。在一些实 施例中,显示器是触摸屏显示器,并且触敏表面在显示器上。在一些实施 例中,显示器与触敏表面是分开的。方法11800中的一些操作任选地被组 合,并且/或者一些操作的顺序任选地被改变。

如下所述,方法11800提供了用于重新定位用户界面对象的直观方 法。该方法减小了当重新定位用户界面对象时用户的认知负担,从而创建 更有效的人机界面。对于电池驱动的电子设备,使用户能够更快且更有效 地重新定位用户界面对象节省了功率并且增加了电池充电之间的时间。

设备在显示器上显示用户界面对象(11802)。例如,图5A示出了在显 示器450上显示的用户界面对象11702-1至11702-3。又如,图5P示出了 在触敏显示器112上显示的用户界面对象11732-1至11732-3。

设备在触敏表面上检测具有高于对象选择阈值(例如,“ITL”)的强 度的接触(例如,手指接触或触笔接触)(11804)。设备可使用一个或多个 传感器来检测触敏表面(例如,触摸板355)上的接触的强度。在图5B 中,例如,检测到具有大于对象选择阈值的强度的接触11708。类似地,在 图5Q中,检测到具有大于对象选择阈值的强度的接触11738。

在一些实施例中,在检测到接触在触敏表面上的移动之前(11806),响 应于检测到接触的强度增大到高于对象选择阈值,设备在触敏表面上生成 用于指示选择的选择触觉输出(11808)。被检测到具有高于对象选择阈值的 强度的接触由于接触的强度从低于对象选择阈值增大到高于对象选择阈值 而具有高于对象选择阈值的强度。当在接触在触敏表面上的移动之前检测 到强度增大到高于对象选择阈值时,选择用户界面对象并且作为响应生成 选择触觉输出。

例如,在图5A中,触敏表面451上的接触11708具有低于对象选择阈 值的强度,并且根据接触11708在触敏表面451上的位置,焦点选择器 (例如,光标11706)定位于用户界面对象11702-2上方。当在接触11708 在触敏表面451上的移动之前检测到接触11708的强度已增大到高于对象 选择阈值时,如图5B所示,选择用户界面对象11702-2,并且在触敏表面 451上生成与用户界面对象的选择相关联的触觉输出。该触觉输出向用户指 示用户界面对象502-2已被选择。类似地,响应于检测到接触11738的强度 增大到高于对象选择阈值,生成触觉输出。

设备检测接触在触敏表面上的移动,该移动对应于手势的用于执行与 用户界面对象对应的操作的初期部分(11810)。例如,移动为用于重新定位 对存储在设备上的文件进行表示的图标的操作的一部分,如果(例如,响 应于检测到接触的抬离或触敏表面上的接触的强度/压力减小到低于对象释 放阈值,该对象释放阈值诸如“IT1”或“ITL”)图标移动至有效放置目标 并放置到有效放置目标上,则所述部分将完成。例如,在图5C-5D中,接 触11708在触敏表面451上在方向11710上移动,并且通过设备检测到该 移动。在图5F-5G中,接触11708在触敏表面451上在方向11714上移 动,并且通过设备检测到该移动。在图5I-5K中,接触11708在触敏表面 451上在方向11718上并且然后在11720上移动。响应于检测到接触11708 的相应移动,用户界面对象11702-2根据检测到的接触11708的移动来在用 户界面11700中移动。所述移动是用于在用户界面11700中重新定位用户 界面对象11702-2的手势的一部分。又如,在图5Q-5R中,检测到接触 11738在方向11740上的移动,并且在图5U-5V中,检测到接触11738在 方向11742上的移动。

在一些实施例中,在手势期间的第一时间段内,用户界面对象处于无 效放置目标上,并且在手势期间的第二时间段内,用户界面对象处于有效 放置目标上(11812)。设备在第一时间段期间,在触敏表面上生成无效放置 目标触觉输出(11814)。设备在第二时间段期间,在触敏表面上生成有效放 置目标触觉输出,其中无效放置目标触觉输出不同于有效放置目标触觉输 出(11816)。在一些情况下,在用户界面对象移动时,用户界面对象在某一 时间段内处于有效放置目标或位置上,并且在另一时间段内处于无效放置 目标或位置上(例如,如图5I-5K所示)。在用户界面对象处于有效放置 目标或位置上的时间段期间,在触敏表面451上生成触觉输出。在用户界 面对象处于无效放置目标或位置上的时间段期间,在触敏表面451上生成 不同的触觉输出。

例如,在图5I-5K中,根据接触11708在触敏表面451上的移动来移 动用户界面对象11702-2。在图5J中,用户界面对象11702-2在窗口11704 (无效放置目标)上移动。在图5K中,用户界面对象11702-2在用户界面 11700中的空白空间(有效放置目标)上移动。在用户界面对象11702-2正 在窗口11704上移动的周期期间,生成触觉输出。在用户界面对象11702-2 正在用户界面11700中的空白空间上移动的周期期间,生成与针对用户界 面对象11702-2正在窗口11704上移动的周期而生成的触觉输出不同的触觉 输出。触觉输出在振幅和/或移动轮廓方面不同。例如,触敏表面任选地在 用户界面对象11702-2在无效放置目标上方时提供高频周期性触觉输出(例 如,微小嗡嗡声),并且在用户界面对象11702-2在有效放置目标上方时不 提供任何触觉输出或提供低频周期性触觉输出(例如,周期性砰砰声)。

设备检测到接触的强度减小到低于对象释放阈值(11818)。在用户界面 对象11702-2移动至用于放置的目标位置时,用户使接触11708的强度减小 到低于对象释放阈值(例如,在保持接触或将接触抬离触敏表面的同时减 小接触的强度)以进行放置尝试,例如如图5E、5H或5L所示。又如,在 用户对象11732-2移动至用于放置的目标位置时,用户使接触11738的强度 减小到低于对象释放阈值(例如,在保持接触或将接触抬离触敏表面的同 时减小接触的强度)以进行放置尝试,如图5T或5W所示。

响应于检测到强度减小到低于对象释放阈值(11820),根据确定移动满 足预定义的操作执行标准(11822),设备执行操作(11824)并在触敏表面上生 成第一触觉输出(11826)。根据确定移动不满足预定义的操作执行标准 (11828),设备放弃对操作的执行(11830)并在触敏表面上生成第二触觉输 出,其中第二触觉输出不同于第一触觉输出(11832)。例如,响应于接触 11708或11738的强度减小到低于对象释放阈值(例如,在保持接触或将接 触抬离触敏表面的同时减小接触的强度),分别进行对放置用户界面对象 11702-2或11732-2的尝试。放置是否被执行(例如,放置是否成功)取决 于是否满足一个或多个预定义的操作执行标准。在一些实施例中,对于放 置操作,操作执行的标准为放置目标/位置是否有效。如果用户界面对象 11702-2或11732-2处于有效放置目标上,诸如用户界面11700或11736中 的空白空间上(并且因此确定满足放置的预定义的操作执行标准),则放 置被执行,分别如图5E、5L或5T所示,并且在触敏表面451或触敏显示 器112上生成与成功放置相关联的触觉输出。如果用户界面对象11702-2或 11732-2处于无效放置目标上,诸如窗口11704或11734上(并且因此确定 不满足放置的预定义的操作执行标准),则放置未被执行,分别如图5H或 5W所示,并且在触敏表面451或触敏显示器112上生成与不成功放置相关 联的触觉输出。

在一些实施例中,操作为对象放置操作(例如,文件移动操作,诸如 将表示文件的图标拖拽到文件管理器用户界面中的新位置),移动对应于 用户界面对象到用户界面中相应位置的移动,在相应位置是有效放置位置 时移动满足预定义的操作执行标准,并且在相应位置是无效放置位置时移 动不满足预定义的操作执行标准(11834)。如上所述,接触11708的移动任 选地是用于对用户界面对象11702-2执行与用户界面对象11702-2到用户界 面11700中新位置的移动对应的拖放操作的手势的一部分。在用户界面对 象11702-2移动至有效放置目标/位置时,手势中的移动被视为满足用于执 行放置操作的标准,并且放置被执行,例如如图5E或5L所示。另一方 面,在用户界面对象11702-2移动至无效放置目标/位置时,手势中的移动 被视为不满足用于执行放置操作的标准,并且放置未被执行,例如如图5H 所示。类似地,接触11738的移动任选地是用于对用户界面对象11732-2执 行与用户界面对象11732-2到用户界面11736中新位置的移动对应的拖放操 作的手势的一部分。在用户界面对象11732-2移动至有效放置目标/位置 时,手势中的移动被视为满足用于执行放置操作的标准;放置被执行,例 如如图5T所示。另一方面,在用户界面对象11732-2移动至无效放置目标/ 位置时,手势中的移动被视为不满足用于执行放置操作的标准;放置未被 执行,例如如图5W所示。

在一些实施例中,第一触觉输出由触敏表面的包括第一主要移动分量 (例如,与初始推动力对应的移动,忽略任何非预期谐振)的移动来生 成,第二触觉输出由触敏表面的包括第二主要移动分量的移动来生成,并 且第一主要移动分量和第二主要移动分量具有相同的移动轮廓(例如,相 同的波形形状,诸如方形、正弦、斜、锯齿或三角形;和/或大致相同的宽 度/周期)以及不同的振幅(11836)。针对成功放置的触觉输出以及针对不成 功放置的触觉输出两者均具有相应主要移动分量,所述相应主要移动分量 具有相应移动轮廓(例如,分别在图5N和5O中所描绘的移动轮廓)。这 两个触觉输出任选地具有相同的移动轮廓但不同的振幅,例如如图5N和图 5O所示。因此,在一些实施例中,针对成功放置的触觉输出以及针对不成 功放置的触觉输出任选地在振幅上不同,而不是在移动轮廓上不同;一种 感觉是另一种感觉的更强烈的版本。

在一些实施例中,选择触觉输出对应于模拟机械按钮的向下点击的触 感,第一触觉输出对应于模拟机械按钮的松开点击的第一触感,并且第二 触觉输出对应于模拟机械按钮的松开点击的第二触感,其中(例如,对于 设备的用户而言)第二触感与第一触感的感觉是不同的(11838)。选择触觉 输出对应于对例如设备300的触控板或鼠标350上的鼠标按钮的点击并保 持的模拟。第一触觉输出对应于模拟鼠标按钮(或触控板按钮)的释放的 触感。第二触觉输出对应于以不同于第一触觉输出的方式模拟鼠标按钮 (或触控板按钮)的释放的触感。第一触感和第二触感任选地通过使用例 如不同的振幅和/或不同的移动轮廓来以不同方式模拟鼠标按钮释放。

应当理解,对图6A-6B中已经进行描述的操作的特定顺序仅是示例性 的,并非意图表明所述顺序是可以执行所述操作的仅有顺序。本领域的普 通技术人员会想到各种方式来对本文所述的操作进行重新排序。此外,应 当注意,本文中相对于本文描述的其他方法(例如,在段落[0051]中列出的 那些方法)所描述的其他过程的细节也以类似的方式适用于上文相对于图 6A-6B所描述的方法11800。例如,上文参考方法11800所描述的接触、用 户界面对象、触觉输出、强度阈值和焦点选择器任选地具有本文参考本文 所述的其他方法(例如,在段落[0051]中列出的那些)所描述的接触、手 势、用户界面对象、触觉输出、强度阈值和焦点选择器的特征中的一者或 多者。为简明起见,这里不重复这些细节。

根据一些实施例,图7示出了根据各种所描述的实施例的原理配置的 电子设备11900的功能框图。该设备的功能块任选地由进行各种所描述的 实施例的原理的硬件、软件、或硬件和软件的组合来实现。本领域的技术 人员应当理解,图7中所述的功能块任选地被组合或被分离为子块以实现 各种所描述的实施例的原理。因此,本文的描述任选地支持本文所述功能 块的任何可能的组合或分离或进一步限定。如图7所示,电子设备11900 包括被配置为显示用户界面对象的显示单元11902、被配置为接收接触的触 敏表面单元11904、被配置为检测与触敏表面单元11904的接触的强度的一 个或多个传感器单元11905、以及耦接至显示单元11902、触敏表面单元 11904和传感器单元11905的处理单元11906。在一些实施例中,处理单元 11906包括检测单元11908、执行单元11910和生成单元11912。

处理单元11906被配置为:(例如,用检测单元11908)在触敏表面 单元11904上检测具有高于对象选择阈值的强度的接触;(例如,用检测 单元11908)检测接触在触敏表面单元11904上的移动,该移动对应于手势 的用于执行与用户界面对象对应的操作的初期部分;(例如,用检测单元 11908)检测到接触的强度减小到低于对象释放阈值;并且响应于检测到强 度减小到低于对象释放阈值:根据确定移动满足预定义的操作执行标准: (例如,用执行单元11910)执行操作;以及(例如,用生成单元11912) 在触敏表面单元11904上生成第一触觉输出;以及根据确定移动不满足预 定义的操作执行标准:(例如,用执行单元11910)放弃对操作的执行;以 及(例如,用生成单元11912)在触敏表面单元11904上生成第二触觉输 出,其中第二触觉输出不同于第一触觉输出。

在一些实施例中,操作为对象放置操作,移动对应于用户界面对象到 用户界面中相应位置的移动,在相应位置是有效放置位置时移动满足预定 义的操作执行标准,并且在相应位置是无效放置位置时移动不满足预定义 的操作执行标准。

在一些实施例中,处理单元11906被配置为,在检测到接触在触敏表 面单元11904上的移动之前:响应于检测到接触的强度增大到高于对象选 择阈值,(例如,用生成单元11912)在触敏表面单元11904上生成用于指 示选择的选择触觉输出。

在一些实施例中,选择触觉输出对应于模拟机械按钮的向下点击的触 感,第一触觉输出对应于模拟机械按钮的松开点击的第一触感,并且第二 触觉输出对应于模拟机械按钮的松开点击的第二触感,其中第二触感与第 一触感的感觉是不同的。

在一些实施例中,第一触觉输出由触敏表面单元11904的包括第一主 要移动分量的移动来生成,第二触觉输出由触敏表面单元11904的包括第 二主要移动分量的移动来生成,并且第一主要移动分量和第二主要移动分 量具有相同的移动轮廓和不同的振幅。

在一些实施例中,在手势期间的第一时间段内,用户界面对象处于无 效放置目标上,在手势期间的第二时间段内,用户界面对象处于有效放置 目标上,并且处理单元11906被配置为:在第一时间段期间,(例如,用 生成单元11912)在触敏表面单元11904上生成无效放置目标触觉输出,以 及在第二时间段期间,(例如,用生成单元11912)在触敏表面单元11904 上生成有效放置目标触觉输出,其中无效放置目标触觉输出不同于有效放 置目标触觉输出。

上述信息处理方法中的操作任选地通过运行信息处理装置中的一个或 多个功能模块来实现,该信息处理装置诸如为通用处理器(例如,如以上 相对于图1A和图3所描述)或特定于应用的芯片。

以上参考图6A-6B所述的操作任选地由图1A-1B或图7中所描绘的部 件来实现。例如,检测操作11804、11810和11818、执行操作11824、放 弃操作11830以及生成操作11826和11832任选地由事件分类器170、事件 识别器180和事件处理程序190来实现。事件分类器170中的事件监视器 171检测在触敏显示器112上的接触,并且事件分配器模块174将事件信息 递送到应用程序136-1。应用程序136-1的相应的事件识别器180将事件信 息与相应的事件定义186进行对比,并且确定触敏表面上的第一位置处的 第一接触是否对应于预定义事件或子事件,诸如选择用户界面上的对象。 当检测到相应的预定义事件或子事件时,事件识别器180激活与检测到该 事件或子事件相关联的事件处理程序190。事件处理程序190任选地使用或 调用数据更新器176或对象更新器177来更新应用程序内部状态192。在一 些实施例中,事件处理程序190访问相应GUI更新器178来更新应用程序 显示的内容。类似地,本领域的普通技术人员会清楚地知道基于在图1A- 1B、图3中所示的部件可如何实现其他过程。

基于已修改的输入执行操作

许多电子设备包括鼠标或提供用于激活不同操作的左击功能和右击功 能的类似输入设备。由于设备在按钮和输入设备的数目方面的节省,因此 使用一个输入设备,诸如触控板,来任选地调用左击功能和右击功能。在 现有的方法中,在使用所述一个输入设备来调用任一功能时,不向用户提 供用于指示所激活的操作是不与修改输入相关联的操作(例如,左击操 作)还是与修改输入相关联的操作(例如,右击操作)的足够反馈。以下 实施例通过在设备检测到输入的同时检测到修改输入的情况下与在设备检 测到类似输入的同时未检测到修改输入的情况下提供不同触觉输出来改进 现有方法。因此,代替用于指示修改输入被检测到的任何视觉或听觉反馈 或除此之外,设备为用户提供用于指示修改输入是否被检测到的触觉反 馈。该另外(或另选)的反馈让用户能够更快且更有效地操作设备,从而 创建更有效的人机界面。

图8A-8V示出了根据一些实施例的用于提供对应于修改输入的反馈的 示例性用户界面。这些附图中的用户界面被用于示出下文描述的过程,包 括图9A-9B中的过程。图8A-8V包括强度图,其示出触敏表面上的接触相 对于包括第一激活阈值(例如,“ITL”)和第二激活阈值(例如,“IT1” 或“ITL”)的多个强度阈值的当前强度。在一些实施例中,与下文参考 “ITL”描述的那些操作类似的操作是参考不同的强度阈值(例如, “ITD”)来执行的。

图8A示出了在设备(例如,设备300)的显示器450(例如,显示器 340)上显示的用户界面12000(例如,桌面用户界面)。任选地在用户界 面12000上显示一个或多个用户界面对象12002。在图8A中,在用户界面 12000上显示了用户界面对象12002-1至12002-3。用户界面对象12002任 选地为例如应用程序快捷方式或启动图标。

在用户界面12000上还显示了光标12004。在一些实施例中,光标 12004是鼠标指针。光标12004是焦点选择器的示例。在图8A中,光标 12004显示在用户界面对象12002-2上方。

设备包括一个或多个传感器,所述传感器检测与设备的触敏表面451 (例如,触摸板355)的接触的强度。在图8A中,检测到接触12006的强 度低于第一激活阈值(例如,“ITL”)。

触敏表面451上的接触(例如,接触12006)的强度任选地通过例如 用户分别增大或减小具有接触的触敏表面451上的压力来增大或减小。接 触的强度的改变任选地通过设备中的传感器来检测。

在图8B中,设备检测到接触12006的强度增大到高于第一激活阈值。 在一些情况下,在检测到接触12006的强度增大之后,通过设备中的强度 传感器检测到接触12006的强度(例如,接触12006从触敏表面451的抬 离)减小到低于第二激活阈值(例如,“IT1”)。在一些实施例中,第一 激活阈值和第二激活阈值不同,并且第二激活阈值低于第一激活阈值(例 如,第一激活阈值为“ITL”,并且第二激活阈值为“IT1”,或者另选地, “IT0”)。在一些其他实施例中,第一激活阈值和第二激活阈值相同(例 如,第一激活阈值为“ITL”,并且第二激活阈值也为“ITL”)。

响应于检测到接触12006的强度减小到低于第二激活阈值(例如, “IT1”),在检测到接触12006的强度增大到高于第一激活阈值(例如, “ITL”)之后,任选地执行与光标12004定位于其上方的用户界面对象 12002-2相关联的一个或多个操作。在一些实施例中,一个或多个操作包括 显示与用户界面对象12002-2相关联的新应用程序窗口。例如,如果用户界 面对象12002-2为对应于应用程序的图标(例如,应用程序启动或快捷方式 图标),则在用户界面12000上任选地显示对应应用程序的窗口12008,如 图8C所示。

在一些实施例中,响应于检测到强度的增大然后减小,或者响应于检 测到强度的增大,在视觉上突出显示用户界面对象12002-2。在视觉上突出 显示的示例包括不同的颜色或更粗的边框(如图8C所示)。

此外,响应于检测到接触12006的强度减小到低于第二激活阈值,在 检测到接触12006的强度增大到高于第一激活阈值之后,在触敏表面451 上生成触觉输出。触觉输出任选地根据移动轮廓(例如,图8P-8Q所示的 移动轮廓)和/或振幅来生成。

返回至图8A,在检测到修改输入的同时任选地使接触12006的强度增 大到高于第一激活阈值。修改输入的示例为被指定为修改键的(例如,键 盘上的)键的键按压。键盘12011(例如,键盘350)上的键任选地(例 如,根据默认)被预先指定为修改键或者由用户指定。图8D示出了在检测 到接触12006的强度增大到高于第一激活阈值的同时键盘12011的键12010 上的键按压12012。在同时检测到接触12006的强度增大到高于第一激活阈 值(例如,“ITL”)以及键12010上的键按压12012之后,使接触12006 的强度减小到低于第二激活阈值(例如,“IT1”),如图8E所示(此 时,键12010的继续按压是可选的)。响应于检测到接触12006的强度减 小到低于第二激活阈值,在同时检测到接触12006的强度增大到高于第一 激活阈值以及键12010的键按压12012之后,执行与在未检测到修改输入 时所执行的操作不同的操作。例如,图8E示出了响应于检测到接触12006 的强度减小到低于第二激活阈值,在同时检测到接触12006的强度增大到 高于第一激活阈值以及键12010的按压12012之后,在用户界面12000上 靠近光标12004显示的上下文菜单12014。在检测到接触12006的强度增大 到高于第一激活阈值但未同时检测到键12010的按压之后,显示上下文菜 单12014的操作不同于响应于检测到接触12006的强度减小到低于第二激 活阈值所执行的显示应用程序窗口12008(图8C)的操作。上下文菜单 12014包括与光标12004定位于其上方的用户界面对象12002-2相关联的菜 单选项,诸如“重命名”、“属性”等。菜单选项包括用于对于或相对于 用户界面对象12002-2执行操作的选项。

修改输入的另一示例是在检测到接触12006的同时在触敏表面451上 检测到附加接触。图8F示出了在如图8G所示检测到接触12006的强度增 大到高于第一激活阈值(例如,“ITL”)以及接触12006的强度随后减小 到低于第二激活阈值(例如,“IT1”)的同时在触敏表面451上检测到的 接触12016。响应于检测到接触12006的强度减小到低于第二激活阈值,在 同时检测到接触12006的强度增大到高于第一激活阈值和接触12016之 后,在用户界面12000上显示上下文菜单12014,如图8G所示。

修改输入的又一示例是在触敏表面451上的特定区域处检测到接触 12006,这与触敏表面451上的在触敏表面上特定区域外部的任意位置相 反。图8H示出了在触敏表面451上的区域12018中检测到的强度低于第一 激活阈值的接触12006。检测到区域12018中接触12006的强度增大到高于 第一激活阈值(例如,“ITL”),如图8I所示。然后,检测到区域12018 中接触12006的强度减小到低于第二激活阈值(例如,“ITL”),如图8J 所示。响应于检测到区域12018中接触12006的强度减小到低于第二激活 阈值,在检测到区域12018中接触12006的强度增大到高于第一激活阈值 之后,在用户界面12000上显示上下文菜单12014,如图8J所示。这里, 触敏表面451上定义区域(例如,区域12018)中的接触12006的检测修改 了接触12006的输入。

在一些实施例中,触敏表面451上的用于修改输入的定义区域(例 如,区域12018)是预定义的,或者该定义区域任选地由用户(例如,从选 择的预定义集合中)定义。另外,应当理解的是,图8H-8J所示的区域 12018的尺寸和位置仅是例示性示例,区域12018的其他尺寸和/或位置是 可行的。

此外,响应于检测到接触12006的强度减小到低于第二激活阈值(例 如,“IT1”),在同时检测到接触12006的强度增大到高于第一激活阈值 (例如,“ITL”)以及修改输入(例如,修改键12010的按压12012、接 触12016、在触敏表面451上的区域12018中检测到的接触12006)之后, 在触敏表面451上生成触觉输出(例如,“修改活动触觉输出”)。该触 觉输出(例如,“修改活动触觉输出”)对应于跟与在检测到接触12006 的强度增大到高于第一激活阈值时响应于检测到接触12006的强度减小到 低于第二激活阈值而未检测到修改输入而生成的触觉输出(例如,“无修 改触觉输出”)对应的触感不同的触感,如图8A-8C所示。

因此,在检测到接触12006的强度增大到高于第一激活阈值以及随后 接触12006的强度减小到低于第二激活阈值时,所执行的操作取决于在检 测到强度增大到高于第一激活阈值的同时是否检测到修改输入。在一些实 施例中,在检测到强度增大而未检测到修改输入之后响应于检测到强度减 小而执行的一个或多个操作对应于与鼠标(或类似输入设备)的左击相关 联的操作,并且在检测到强度增大和修改输入之后响应于检测到强度减小 而执行的一个或多个操作对应于与鼠标(或类似输入设备)的右击相关联 的操作。左击操作包括例如激活应用程序启动或快捷方式图标、显示对应 于与图标相关联的应用程序的应用程序窗口、选择图标或其他用户界面对 象,等等。右击操作包括例如显示上下文菜单(例如,上下文菜单12014 或12024)。

在一些其他实施例中,任选地反转所述关联;在检测到强度增大而未 检测到修改输入之后响应于检测到强度减小而执行的一个或多个操作对应 于与鼠标(或类似输入设备)的右击相关联的操作,并且在检测到强度增 大和修改输入之后响应于检测到强度减小而执行的一个或多个操作对应于 与鼠标(或类似输入设备)的左击相关联的操作。

另外,在检测到接触12006的强度的增大之后响应于检测到接触 12006的强度的减小而生成的触觉输出取决于连同检测到强度增大的修改输 入的检测或缺失。在一些实施例中,在检测到修改输入时生成的触觉输出 (例如,“修改活动触觉输出”)在振幅、移动轮廓或这两者上不同于在 未检测到修改输入时生成的触觉输出(例如,“无修改触觉输出”)。

在一些实施例中,在检测到接触的强度的增大之后响应于检测到接触 的强度的减小而执行的操作(如果有的话)取决于在检测到强度的增大时 焦点选择器(例如,光标12004)的位置以及是否检测到修改输入。在上文 参考图8A-8J所描述的示例中,光标12004定位于用户界面对象12002-2上 方。图8K示出了定位于用户界面12000上的“空白空间”上方的远离用户 界面对象12002的光标12004。在触敏表面451上检测到接触12020处于小 于第一激活阈值(例如,“ITL”)的强度处。在图8L中,设备检测到接 触12020的强度增大到高于第一激活阈值(例如,“ITL”)。然后,设备 检测到接触12020的强度减小到低于第二激活阈值(例如,“IT1”),如 图8M所示。响应于强度减小到低于第二激活阈值,不执行操作。在一些 实施例中,忽略在焦点选择器处于空白空间上方时发生的左击,并且因 此,在光标12004处于空白空间上方的同时在不具有修改输入的情况下在 强度上增大和减小的接触12020不使设备执行操作。

另一方面,图8N示出了在检测到接触12020的强度增大到高于第一激 活阈值的同时所检测到的修改输入(例如,接触12022)。随后,设备检测 到接触12020的强度减小到低于第二激活阈值(例如,“IT1”),如图8O 所示。响应于强度减小到低于第二激活阈值,在用户界面12000上显示上 下文菜单12024。上下文菜单12024任选地包括不同于上下文菜单12014 (图8E、8G或8J)的选项,因为上下文通过光标12004在用户界面12000 上的空白空间上方的定位而不是用户界面对象12002-2来改变。在一些实施 例中,在焦点选择器处于空白空间上方时发生的右击激活上下文菜单的显 示,并且因此,在光标12004处于空白空间上方的同时在具有修改输入的 情况下在强度上增大和减小的接触12020使设备显示上下文菜单(例如, 上下文菜单12024)。

如上所述,取决于是否检测到修改输入来任选地生成不同的触觉输 出。图8P-8Q示出了用于生成这些触觉输出的移动轮廓的示例性波形。图 8P示出了具有两个不同移动轮廓(例如,左侧的锯齿波形以及右侧的方波 形)的两个不同触觉输出的主要移动分量。在一些实施例中,移动轮廓中 的一者(例如,锯齿波形)对应于针对在检测到修改输入的同时所检测到 的强度的增大和后续减小的触觉输出(例如,“修改活动触觉输出”); 并且另一移动轮廓(例如,方波形)对应于针对在未检测到修改输入的情 况下所检测到的强度的增大和后续减小的触觉输出(例如,“无修改触觉 输出”)。图8Q示出了具有两个不同振幅(例如,左侧的高振幅方波形以 及右侧的低振幅方波形)的两个不同触觉输出的主要移动分量。在一些实 施例中,振幅中的一者(例如,高振幅方波形)对应于针对在检测到修改 输入的同时所检测到的强度的增大和后续减小的触觉输出(例如,“修改 活动触觉输出”);并且另一振幅(例如,低振幅方波形)对应于针对在 未检测到修改输入的情况下所检测到的强度的增大和后续减小的触觉输出 (例如,“无修改触觉输出”)。在一些实施例中,当设备在检测到接触 的强度的后续减小之前检测到增大时,根据确定是否检测到修改输入来选 择触觉输出的振幅和移动轮廓两者。

图8R-8V示出了在具有触敏显示器112的设备(例如,设备100)上 实现的上文参考图8A-8Q所描述的用户界面的示例。图8R示出了用户界 面12054以及在设备的触敏显示器112上的用户界面12054中显示的用户 界面对象12052。用户界面对象12052类似于上文所述的用户界面对象 12002;这里不重复这些细节。

图8R还示出了在用户界面对象12052-2上检测到的接触12056。如图 8R所示的接触12056具有低于第一激活阈值(例如,“ITL”)的强度。检 测到接触12056的强度增大到高于第一激活阈值,如图8S所示。在检测到 增大之后,检测到接触12056的强度减小到低于第二激活阈值(例如, “IT1”),如图8T所示。

响应于检测到接触12056的强度减小到低于第二激活阈值,在检测到 接触12056的强度增大到高于第一激活阈值之后,任选地执行与于其上检 测到接触12056的用户界面对象12052-2相关联的一个或多个操作。例如, 如果用户界面对象12052-2为对应于应用程序的图标(例如,应用程序启动 或快捷方式图标),则在用户界面12054中显示对应应用程序的窗口 12058,如图8T所示。

此外,响应于检测到接触12056的强度减小到低于第二激活阈值,在 检测到接触12056的强度增大到高于第一激活阈值之后,在触敏显示器112 上生成触觉输出(例如,“无修改触觉输出”)。触觉输出任选地根据移 动轮廓(例如,图8P-8Q所示的移动轮廓)来生成。

返回至图8R,在检测到修改输入的同时任选地使接触12056的强度增 大到高于第一激活阈值。修改输入的示例是在检测到接触12056的同时在 触敏显示器112上检测到附加接触。图8U示出了在检测到接触12056的强 度增大到高于第一激活阈值(例如,“ITL”)的同时在触敏显示器112上 检测到的接触12060。然后,检测到接触12056的强度减小到低于第二激活 阈值(例如,“IT1”),如图8V所示。响应于检测到接触12056的强度 减小到低于第二激活阈值,在同时检测到接触12056的强度增大到高于第 一激活阈值和接触12060之后,在用户界面12054上显示类似于上下文菜 单12014的上下文菜单12062,如图8V所示。在一些实施例中,当在触敏 显示器112的预定义区域中(例如,右上角、左上角、右下角或左下角的 区域)中检测到接触12060时,将附加接触12060确定为修改输入。

另外,响应于检测到接触12056的强度减小到低于第二激活阈值,在 同时检测到接触12056的强度增大到高于第一激活阈值以及修改输入(例 如,接触12060)之后,设备在触敏显示器112上生成触觉输出(例如, “修改活动触觉输出”)。在一些实施例中,该触觉输出(例如,“修改 活动触觉输出”)对应于跟与在检测到接触12056的强度增大到高于第一 激活阈值时响应于检测到接触12056的强度减小到低于第二激活阈值而未 检测到修改输入而生成的触觉输出(例如,“无修改触觉输出”)对应的 触感不同的触感。

图9A-9B是示出了根据一些实施例的提供对应于修改输入的反馈的方 法12100的流程图。该方法12100在具有显示器和触敏表面的电子设备 (例如,图3的设备300或图1A的便携式多功能设备100)上执行。在一 些实施例中,显示器是触摸屏显示器,并且触敏表面在显示器上。在一些 实施例中,显示器与触敏表面是分开的。方法12100中的一些操作任选地 被组合,并且/或者一些操作的顺序任选地被改变。

如下所述,方法12100提供了用于基于已修改的输入执行操作的直观 方法。该方法降低了在提供对应于修改输入的反馈时用户的认知负担,从 而创建了更有效的人机界面。对于电池驱动的电子设备,使用户能够更快 且更有效地执行基于修改输入的操作节省了功率并且增加了电池充电之间 的时间。

设备检测触敏表面上的接触(例如,手指接触)(12102)。例如,在触 敏表面451上任选地检测到接触12006(图8A或8H)或12020(图 8K)。又如,在触敏显示器112上任选地检测到接触12056。

设备检测到接触的强度增大到高于第一激活阈值(例如,“ITL”) (12104)。在一些实施例中,第一激活阈值为指示阈值的“渐增强度”激活 阈值,在所述阈值处,在接触的强度正增大时生成触觉输出。接触12006 的强度例如任选地从低于第一激活阈值的水平(例如,图8A和8H)增大 到高于第一激活阈值的水平(例如,图8B、8D、8F或8I),并且该增大 被检测到。类似地,接触12020的强度任选地从低于第一激活阈值的水平 增大到高于第一激活阈值的水平(图8K-8L、图8N)。又如,接触12056 的强度任选地从低于第一激活阈值的水平增大到高于第一激活阈值的水平 (图8R-8S、图8U)。

在检测到接触的强度增大到高于第一激活阈值之后,设备检测到接触 的强度减小到低于第二激活阈值(例如,“IT1”)(12106)。在一些实施例 中,第二激活阈值为指示阈值的“渐减强度”激活阈值,在所述阈值处, 在接触的强度正减小时生成触觉输出。接触12006的强度例如任选地减小 到低于第二激活阈值的水平(图8C、8E、8G或8J),并且该增大被检测 到。类似地,接触12020的强度任选地减小到低于第二激活阈值的水平 (图8M和8O)。又如,接触12056的强度任选地减小到低于第二激活阈 值的水平(图8T和8V)。

在一些实施例中,第二激活阈值不同于第一激活阈值(例如,第一激 活阈值为“ITL”,第二激活阈值为“IT1”)(12108)。在一些实施例中,第 二激活阈值与第一激活阈值相同(例如,第一激活阈值为“ITL”,第二激 活阈值也为“ITL”)(12110)。

响应于检测到接触的强度减小到低于第二激活阈值(12112),根据确定 在检测到接触的强度增大到高于第一激活阈值的同时检测到修改输入 (12114),设备执行第一操作(12116)并在触敏表面上生成第一触觉输出 (12118)。例如,在图8D中,在检测到接触12006的强度的增大时修改键 12012被按压。在检测到接触12006的强度的减小时(图8E),显示上下 文菜单12014,并且作为响应生成第一触觉输出(例如,“修改活动触觉输 出”)。对于修改输入的其他示例(例如,图8G的接触12016;图8J的区 域12018中的接触12006;图8O的接触12022)而言,出现类似结果。又 如,在图8U中,在检测到接触12056的强度的增大时,检测到附加接触 12060。在检测到接触12056的强度的减小时(图8V),显示上下文菜单 12062,并且作为响应生成第一触觉输出(例如,“修改活动触觉输 出”)。在一些实施例中,强度增大减小与修改输入的组合与鼠标或类似 输入设备的右击相关联;该组合激活与右击相关联的操作。

在一些实施例中,修改输入为选自由以下各项组成的组的输入:修改 键的键按压、触敏表面上的附加接触、以及对触敏表面的指定用于修改输 入的预定义部分(例如,触摸板上的预定义“右击”区域或触敏鼠标的对 应于“鼠标右键”的预定义区域)上的接触的检测(12120)。修改输入任选 地例如为修改键12010的按压12012(图8D)、附加接触12016(图8F) 或12022(图8N)或12060(图8U)、或者对触敏表面451上区域12018 中的接触12006的检测。

响应于检测到接触的强度减小到低于第二激活阈值(例如,“IT1”) (12112),根据确定在检测到接触的强度增大到高于第一激活阈值(例如, “ITL”)的同时未检测到修改输入(12122),设备执行不同于第一操作的第 二操作(12124)并在触敏表面上生成第二触觉输出(例如,“无修改触觉输 出”),其中第二触觉输出不同于第一触觉输出(12126)。例如,在图8B 中,在检测到接触12006的强度的增大时不存在修改输入,并且因此在检 测到接触12006的强度的减小时(图8C),显示窗口12008,并且作为响 应生成第二触觉输出(例如,“无修改触觉输出”)。又如,在图8S中, 在检测到接触12056的强度的增大时不存在修改输入,并且因此在检测到 接触12056的强度的减小时(图8T),显示窗口12058,并作为响应生成 第二触觉输出(例如,“无修改触觉输出”)。在一些实施例中,强度增 大减小与修改输入的缺失的组合与鼠标或类似输入设备的左击相关联;该 组合激活与左击相关联的操作。

在一些实施例中,第一操作对应于右击操作(例如,与点击双按钮或 三按钮鼠标或触控板的最右侧按钮对应的操作,有时称为“右击鼠标操 作”),并且第二操作对应于左击操作(例如,与点击双按钮或三按钮鼠 标或触控板的最左侧按钮对应的操作,有时称为“左击鼠标操作”) (12128)。例如,对上下文菜单12014或12024或12062的显示是右击操 作,对窗口12008的显示(图8C)是左击操作。

在一些实施例中,在焦点选择器处于显示器上的图标上方时在触敏表 面上检测到接触,第一操作包括显示上下文菜单,所述上下文菜单包括用 于执行与图标相关联的操作的可选选项,并且第二操作包括显示与图标相 关联的新应用程序窗口(例如,启动应用程序,或者如果应用程序已经启 动,则打开应用程序的包括与图标相关联的文档的新窗口)(12130)。例 如,在图8A-8J中,在光标12004显示在用户界面对象12002-2上方时在触 敏表面451上检测到接触12006。当不存在已检测到的修改输入时,显示应 用程序的与用户界面对象12002-2相关联的窗口12008,如图8C所示。在 检测到修改输入时,显示上下文菜单12014,如图8E、8G和8J所示。上 下文菜单12014包括用于执行与用户界面对象12002-2相关联的操作的可选 选项。类似地,在图8R-8V中,在触敏显示器112上的用户界面对象 12052-2上检测到接触12056。当不存在已检测到的修改输入时,显示应用 程序的与用户界面对象12052-2相关联的窗口12058,如图8T所示。在检 测到修改输入时,显示上下文菜单12062,如图8V所示。上下文菜单 12062包括用于执行与用户界面对象12052-2相关联的操作的可选选项。

在一些实施例中,第一触觉输出由触敏表面的包括第一主要移动分量 (例如,与初始推动力对应的移动,忽略任何非预期谐振)的移动来生 成,第二触觉输出由触敏表面的包括第二主要移动分量的移动来生成,并 且第一主要移动分量和第二主要移动分量具有相同的移动轮廓(例如,相 同的波形形状,诸如方形、正弦、斜、锯齿、三角形或大致相同的宽度/周 期)以及不同的振幅,如图8Q所示(12132)。因此,在一些实施例中,具 有和不具有修改输入的触觉输出任选地在振幅上不同,而不是在移动轮廓 上不同,使得一个触感是另一个触感的更强烈的版本。相比之下,在一些 实施例中,在检测到修改输入时生成的触觉输出(例如,“修改活动触觉 输出”)以及在未检测到修改输入时生成的触觉输出(例如,“无修改触 觉输出”)两者均具有相应主要移动分量,所述相应主要移动分量具有不 同的相应移动轮廓(例如,图8P中所描绘的移动轮廓),其具有相同的最 大振幅或不同的最大振幅。

应当理解,对图9A-9B中已经进行描述的操作的特定顺序仅仅是示例 性的,并非意图表明所述顺序是可以执行所述操作的仅有顺序。本领域的 普通技术人员会想到各种方式来对本文所述的操作进行重新排序。另外, 应当注意,本文中相对于本文描述的其他方法(例如,在段落[0051]中列出 的那些方法)所描述的其他过程的细节也以类似的方式适用于上文相对于 图9A-9B所描述的方法12100。例如,上文参考方法12100所描述的接 触、手势、用户界面对象、触觉输出、强度阈值和焦点选择器任选地具有 本文参考本文所述的其他方法(例如,在段落[0051]中列出的那些)所描述 的接触、手势、用户界面对象、触觉输出、强度阈值和焦点选择器的特征 中的一者或多者。为简明起见,这里不重复这些细节。

根据一些实施例,图10示出了根据各种所描述的实施例的原理配置的 电子设备12200的功能框图。该设备的功能块任选地由进行各种所描述的 实施例的原理的硬件、软件、或硬件和软件的组合来实现。本领域的技术 人员应当理解,图10中所述的功能块任选地被组合或被分离为子块以实现 各种所描述的实施例的原理。因此,本文的描述任选地支持本文所述功能 块的任何可能的组合或分离或进一步限定。

如图10所示,电子设备12200包括显示单元12202、被配置为接收接 触的触敏表面单元12204、被配置为检测与触敏表面单元12204的接触的强 度的一个或多个传感器单元12205,以及耦接至显示单元12202、触敏表面 单元12204和传感器单元12205的处理单元12206。在一些实施例中,处理 单元12206包括检测单元12208、执行单元12210和生成单元12212。

处理单元12206被配置为:(例如,用检测单元12208)检测触敏表 面单元12204上的接触;(例如,用检测单元12208)检测到接触的强度增 大到高于第一激活阈值;在检测到接触的强度增大到高于第一激活阈值之 后,(例如,用检测单元12208)检测到接触的强度减小到低于第二激活阈 值;并且响应于检测到接触的强度减小到低于第二激活阈值:根据确定在 检测到接触的强度增大到高于第一激活阈值时检测到修改输入:(例如, 用执行单元12210)执行第一操作并(例如,用生成单元12212)在触敏表 面单元12204上生成第一触觉输出;并且根据确定在检测到接触的强度增 大到高于第一激活阈值时未检测到修改输入:(例如,用执行单元12210) 执行不同于第一操作的第二操作并(例如,用生成单元12212)在触敏表面 单元12204上生成第二触觉输出,其中第二触觉输出不同于第一触觉输 出。

在一些实施例中,修改输入为选自由以下各项组成的组的输入:修改 键的键按压、触敏表面单元12204上的附加接触、以及对触敏表面单元 12204的指定用于修改输入的预定义部分上的接触的检测。

在一些实施例中,第一操作对应于右击操作,第二操作对应于左击操 作。

在一些实施例中,在焦点选择器处于显示单元12202上的图标上方时 在触敏表面单元12204上检测到接触,第一操作包括显示上下文菜单,所 述上下文菜单包括用于执行与图标相关联的操作的可选选项,并且第二操 作包括显示与图标相关联的新应用程序窗口。

在一些实施例中,第二激活阈值不同于第一激活阈值。

在一些实施例中,第二激活阈值与第一激活阈值相同。

在一些实施例中,第一触觉输出由触敏表面单元12204的包括第一主 要移动分量的移动来生成,第二触觉输出由触敏表面单元12204的包括第 二主要移动分量的移动来生成,并且第一主要移动分量和第二主要移动分 量具有相同的移动轮廓和不同的振幅。

上述信息处理方法中的操作任选地通过运行信息处理装置中的一个或 多个功能模块来实现,该信息处理装置诸如为通用处理器(例如,如以上 相对于图1A和图3所描述)或特定于应用的芯片。

以上参考图9A-9B所述的操作任选地由图1A-1B或图10中所描绘的 部件来实现。例如,检测操作12102、12104和12106、执行操作12116和 12124以及生成操作12118和12126任选地由事件分类器170、事件识别器 180和事件处理程序190来实现。事件分类器170中的事件监视器171检测 在触敏显示器112上的接触,并且事件分配器模块174将事件信息递送到 应用程序136-1。应用程序136-1的相应的事件识别器180将事件信息与相 应的事件定义186进行对比,并且确定触敏表面上的第一位置处的第一接 触是否对应于预定义事件或子事件,诸如选择用户界面上的对象。当检测 到相应的预定义事件或子事件时,事件识别器180激活与检测到该事件或 子事件相关联的事件处理程序190。事件处理程序190任选地使用或调用数 据更新器176或对象更新器177来更新应用程序内部状态192。在一些实施 例中,事件处理程序190访问相应GUI更新器178来更新应用程序显示的 内容。类似地,本领域技术人员会清楚地知道基于在图1A-1B中所示的部 件可如何实现其他过程。

针对改变用户界面的激活状态来提供反馈

许多电子设备具有包括用户界面对象的图形用户界面,所述用户界面 对象诸如视觉按钮和开关。在一些情况下,用户激活用户界面对象以执行 操作或调节参数或属性。为使虚拟按钮或开关更容易使用,虚拟对象任选 地模拟对应物理对象的行为。例如,在一些情况下,在操作虚拟开关时, 感觉到触感,其中所述触感模拟对应物理开关的感觉,诸如模拟激活开关 的物理致动器机构(例如,鼠标按钮)的点击。但在一些情况下,物理对 象诸如真实按钮和开关将在一些情况下提供过多触觉反馈,而在其他情况 下则提供过少反馈。在此类情况下,仅模拟对应物理对象的感觉的虚拟对 象还提供过多(或过少)反馈。但虚拟对象不必提供有仅模拟来自对应物 理对象的触感的触觉反馈。下文所述的实施例提供与虚拟按钮、开关或其 他用户界面对象的激活状态的改变对应的触觉反馈,而不是1:1地与将由用 户在使用物理控件来执行类似操作时所感觉的触感对应的触觉反馈。在针 对虚拟按钮或开关的激活状态改变提供触感时,用户可更好地辨别虚拟按 钮的激活状态而不因过多或过少视觉反馈而分心或困惑。该针对虚拟对象 的改善的触觉反馈让用户能够更快且更有效地操作设备,从而创建更有效 的人机界面。

图11A-11N示出了根据一些实施例的用于针对改变用户界面对象的激 活状态来提供反馈的示例性用户界面。这些附图中的用户界面被用于示出 下文描述的过程,包括图12A-12B中的过程。图11A-11N包括强度图,其 示出触敏表面上的接触相对于包括轻按压强度阈值(例如,“ITL”)和深 按压强度阈值(例如,“ITD”)的多个强度阈值的当前强度。在一些实施 例中,与下文参考“ITL”和“ITD”描述的那些操作类似的操作是参考不同 的强度阈值来执行的。

图11A示出了包括一个或多个用户界面对象的用户界面的示例。在设 备(例如,设备300)的显示器450(例如,显示器340)上显示了图像编 辑器用户界面12300。在图像编辑器用户界面12300中显示图像12302以用 于根据用户命令进行编辑。一个或多个用户界面对象(例如,按钮、滑 块、摇臂开关)任选地包括控制用户界面对象诸如摇臂开关12304以及状 态用户界面对象诸如在图像编辑器用户界面12300中显示的值指示器 12306。图11A-11G中的用户界面对象被配置为允许用户发出编辑图像 12302的命令,并且图11H-11N中的用户界面对象被配置为允许用户发出 编辑图像12322的命令。例如,在图像编辑器用户界面12300中显示了一 个或多个摇臂开关12304,用于修改图像12302的相应参数。表示相应参数 的值任选地显示在相应的值指示器12306中。摇臂开关12304-1允许用户修 改例如图像12302的亮度,并且亮度值(例如,由整数表示,其中0作为 上限值与下限值之间的中间值)显示在值指示器12306-1中。显然,中间值 0仅是示例性的。例如,上限值100和下限值0将具有中间值50(未示 出)等。在用户界面12300中还显示了光标12308。在一些实施例中,光标 12308是鼠标指针。光标12308是焦点选择器的示例。

相应摇臂开关12304任选地具有用于减小与摇臂开关相关联的参数的 值的由减号指示的“减”部分,以及用于增大与摇臂开关相关联的参数的 值的由加号指示的“加”部分。在焦点选择器(例如,光标12308)定位于 摇臂开关的一部分上方并且与焦点选择器相关联的接触的强度改变时,任 选地激活摇臂开关12304。在一些实施例中,取决于焦点选择器定位于其上 方的部分,对应值减小或增大。在焦点选择器定位于“减”部分上时,在 激活摇臂开关时,对应值减小。在焦点选择器定位于“加”部分上时,在 激活摇臂开关时,对应值增大。在图11A中,光标12308定位于摇臂开关 12304-1的“减”部分上。

在摇臂开关12304-1未激活时,摇臂开关12304-1显示在空档位置,如 图11A所示。当激活摇臂开关12304-1时,摇臂开关12304-1被显示为好像 “减”部分(如果在激活摇臂开关12304-1时光标12308定位于“减”部分 上,则因此激活摇臂开关12304-1以减小值)或“加”部分(如果在激活摇 臂开关12304-1时光标12308定位于“加”部分上,则因此激活摇臂开关 12304-1以增大值)被下压一样,分别如图11B(“减”部分被下压)和图 11E(“加”部分被下压)所示。在一些实施例中,当摇臂开关12304-1被 激活时,显示示出了摇臂开关12304-1从空档位置过渡至任一下压位置的动 画;并且当摇臂开关12304-1被去激活时,显示示出了摇臂开关12304-1从 任一下压位置过渡至空档位置的动画。

图11A示出了在设备的触敏表面451(例如,触摸板355)上检测到 的强度高于接触检测阈值(例如,“IT0”)且低于用于激活摇臂开关 12304-1的轻按压强度阈值(例如,“ITL”)的接触12310。当在触敏表面 451上继续检测到接触12310并且光标12308定位于摇臂开关12304-1的 “减”部分上时,在一些情况下,接触12310的强度增大到高于用于激活 摇臂开关12304-1的轻按压强度阈值(例如,“ITL”)的第一强度,并且 检测到强度的增大,如图11B所示。响应于检测到强度的增大,激活摇臂 开关12304-1并且值指示器12306-1中的亮度值减小。图像12302的亮度根 据亮度值的改变而改变。在一些实施例中,亮度值以相对慢的速率(例 如,值每秒-1)减小。在一些实施例中,对摇臂开关12304-1进行动画化以 示出“减”部分被下压。在一些实施例中,只要接触12310的强度不减小 到低于轻按压强度阈值(例如,“ITL”),亮度值便会继续减小。

在一些情况下,接触12310的强度进一步增大。当在触敏表面451上 继续检测到接触12310并且光标12308仍定位于摇臂开关12304-1的“减” 部分上时,设备检测到接触12310的强度从第一强度(例如,ITL与ITD之 间的强度)增大到高于深按压强度阈值(例如,“ITD”)的第二更高强 度。响应于强度的这种增大,摇臂开关12304-1改变成其他激活状态,如图 11C所示,其中摇臂开关的在焦点选择器12308下方的部分被推“入”显 示器,并且图像12302的亮度值以比第一强度下的减小速率更快的速率 (例如,每秒-10)减小,并且图像12302的亮度根据亮度值的改变而改 变,如图11C所示。

在一些情况下,接触12310的强度然后快速地减小到低于轻按压强度 阈值(例如,“ITL”)(例如,在0.05秒或更少时间内从高于ITD的第二 强度减小到低于ITL的强度)。响应于检测到强度减小到低于轻按压强度阈 值(例如,“ITL”),亮度值停止改变,并且图像12302的亮度停止改 变,如图11D所示。取决于强度从第二强度减小到低于轻按压强度阈值 (例如,“ITL”)的强度的速率,亮度值任选地响应于检测到强度减小而 立即停止改变,或者亮度值的改变速率任选地在亮度值停止改变之前先减 小到更慢的速率(例如,第一强度下的速率)。

摇臂开关12304-1包括多个激活状态。在一些实施例中,摇臂开关 12304-1的激活状态是在亮度值改变时的不同亮度水平。在一些实施例中, 在亮度值正以“缓慢”速率(例如,每秒-1)减小时,基于减小速率的每 个亮度值增量(例如,-1、-2、-3等)均被视为激活状态,并且在亮度值正 以“快速”速率(例如,每秒-10)减小时,基于减小速率的每个亮度值增 量(例如,每第-10个增量)均被视为激活状态。在这些实施例中的一些 中,在每个激活状态下,任选地在触敏表面451上生成触觉输出。例如, 在值从-1减小至-2,然后至-3并且然后至-13时,任选地在-2、-3和-13下 生成触觉输出。

在一些其他实施例中,激活状态是亮度值于其下改变的不同速率。例 如,“缓慢”速率是一个激活状态,“快速”速率是另一个激活状态,并 且摇臂开关12304-1的激活的停止(例如,每秒0的速率)是摇臂开关的另 一个激活状态。每当亮度值的减小或增大的速率改变时或在激活或停止激 活摇臂开关12304-1时,任选地生成触觉输出。例如,在亮度值不改变时, 摇臂开关12304-1处于第一(“空档”)激活状态;在亮度值正以“缓慢” 速率(例如,每秒-1)减小时,摇臂开关12304-1处于第二(“轻按压”) 激活状态;并且在亮度值正以“快速”速率(例如,每秒-10)减小时,摇 臂开关12304-1处于第三(“深按压”)激活状态。在每个激活状态下,任 选地在触敏表面451上生成触觉输出。例如,在激活状态从图11A所示的 第一(“空档”)激活状态改变成图11B所示的第二(“轻按压”)激活 状态时,设备生成与激活状态的改变对应的触觉输出。又如,在激活状态 从图11B所示的第二(“轻按压”)激活状态改变成图11C所示的第三 (“深按压”)激活状态时,设备生成与激活状态的改变对应的触觉输 出。

在一些实施例中,取决于激活状态的改变响应于接触12310的强度增 大还是减小,响应于激活状态的改变而生成的触觉输出任选地改变。针对 响应于强度增大的激活状态改变而生成的触觉输出任选地不同于针对响应 于强度减小的激活状态改变而生成的触觉输出。触觉输出任选地在移动轮 廓、振幅或这两者上不同。在一些实施例中,针对响应于强度增大的激活 状态改变而生成的触觉输出对应于模拟物理按钮(例如,鼠标按钮)的向 下点击(例如,按压并保持)的触感,并且针对响应于强度减小的激活状 态改变而生成的触觉输出对应于模拟物理按钮的松开点击(例如,自按压 并保持中释放)的触感。

返回至图11D,光标12308已(例如,从位置12308-a到位置12308- b)移动至摇臂开关12304-1的“加”部分(例如,根据图11D中在接触 12310具有在IT0与ITL之间的强度时接触12310在触敏表面451上从位置 12310-a到位置12310-b的移动)。接触12310的强度被快速地增大到第二 强度(例如,接触12310-b的强度在0.05秒或更少时间内从图11D中低于 ITL的强度增大到图11E中高于ITD的第二强度),如图11E所示。响应于 强度增大,亮度值以“快速”速率(例如,每秒+10)增大。如图11D所 示,摇臂开关12304-1处于空档激活状态并且响应于接触12310的强度的到 高于ITD的强度的快速增大而直接过渡至图11E中的深按压激活状态。

如图11F所示,接触12310的强度随后从第二强度(例如,高于ITD的强度)减小到第一强度(例如,在ITL与ITD之间的强度)。响应于检测 到强度减小到第一强度,亮度值以“缓慢”速率(例如,每秒+1)增大, 如图11F所示,并且摇臂开关12304-1以轻按压激活状态示出。

如图11G所示,接触12310的强度随后进一步从第一强度(例如,在 ITL与ITD之间的强度)减小到低于轻按压强度阈值(例如,“ITL”)的强 度。响应于接触12310的强度的进一步减小,亮度值停止增大(例如,改 变速率变为每秒0),如图11G所示,并且摇臂开关12304-1以空档激活状 态示出。

如上所述,摇臂开关12304-1的激活状态根据改变速率或不同的改变 速率而任选地对应于值的改变增量。每当一个激活状态改变成另一个激活 状态(例如,一个增量改变成下一个增量或者一个改变速率改变成下一个 改变速率)时,便任选地生成触觉输出。

图11H-11N示出了在具有触敏显示器112的设备(例如,设备100) 上实现的上文参考图11A-11G所描述的用户界面的示例。图11H示出了在 设备的触敏显示器112上显示的图像编辑器用户界面12328。在图像编辑器 用户界面12328中显示图像12322以用于根据用户命令编辑。一个或多个 用户界面对象(例如,按钮、滑块、摇臂开关)任选地包括控制用户界面 对象诸如摇臂开关12324以及状态用户界面对象诸如在图像编辑器用户界 面12328中显示的值指示器12326。图11H-11N中的用户界面对象被配置 为让用户能够发出用于编辑图像12322的命令。例如,在图像编辑器用户 界面12328中显示一个或多个摇臂开关12324,用于修改图像12322的相应 参数。表示相应参数的值任选地显示在相应的值指示器12326中。摇臂开 关12324-1例如让用户能够根据在焦点选择器处于摇臂开关12324-1上方时 接触12330的强度的改变来修改图像12322的亮度,并且亮度值(例如, 由整数表示,其中0作为上限值与下限值之间的中间值)显示在值指示器 12326-1中。接触12330是焦点选择器的示例。

相应摇臂开关12324任选地具有“减”部分和“加”部分,所述 “减”部分用于减小与摇臂开关相关联的参数的值且由减号指示,所述 “加”部分用于增大与摇臂开关相关联的参数的值且由加号指示。在接触 定位于摇臂开关的一部分上并且与焦点选择器相关联的接触的强度改变 时,任选地激活摇臂开关12324。在一些实施例中,取决于接触定位于其上 方的部分,对应值减小或增大。在接触定位于“减”部分上时,在激活摇 臂开关时,对应值减小。在接触定位于“加”部分上时,在激活摇臂开关 时,对应值增大。在图11H中,接触12330定位于摇臂开关12324-1的 “减”部分上。

在摇臂开关12324-1未激活时,摇臂开关12324-1显示在空档位置,如 图11H所示。在激活摇臂开关12324-1时,摇臂开关12324-1被显示为好像 “减”部分(如果在激活摇臂开关12324-1时接触12330定位于“减”部分 上,则因此激活摇臂开关12324-1以减小值)或“加”部分(如果在激活摇 臂开关12324-1时接触12330定位于“加”部分上,则因此激活摇臂开关 12324-1以增大值)被下压一样,分别如图11I(“减”部分被下压)和图 11L(“加”部分被下压)所示。在一些实施例中,当摇臂开关12324-1被 激活时,显示示出了摇臂开关12324-1从空档位置过渡至任一下压位置的动 画;并且当摇臂开关12324-1被去激活时,显示示出了摇臂开关12324-1从 任一下压位置过渡至空档位置的动画。

图11H示出了在触敏显示器112上检测到的强度高于接触检测阈值 (例如,“IT0”)且低于用于激活摇臂开关12324-1的轻按压强度阈值 (例如,“ITL”)的接触12330。当在触敏显示器112上在摇臂开关 12324-1的“减”部分上继续检测到接触12330时,在一些情况下,接触 12330的强度增大到高于用于激活摇臂开关12324-1的轻按压强度阈值(例 如,“ITL”)的第一强度,并且检测到强度的增大,如图11I所示。响应 于检测到强度的增大,激活摇臂开关12324-1并且值指示器12326-1中的亮 度值减小。图像12322的亮度根据亮度值的改变而改变。在一些实施例 中,亮度值以相对慢的速率(例如,值每秒-1)减小。在一些实施例中, 对摇臂开关12324-1进行动画化以示出“减”部分被下压。在一些实施例 中,只要接触12330的强度不减小到低于轻按压强度阈值(例如, “ITL”),亮度值便会继续减小。

在一些情况下,接触12330的强度进一步增大。当在触敏显示器112 上在摇臂开关12324-1的“减”部分上继续检测到接触12330时,设备检测 到接触12330的强度从第一强度(例如,ITL与ITD之间的强度)增大到高 于深按压强度阈值(例如,“ITD”)的第二更高强度。响应于强度的这种 增大,摇臂开关12324-1改变成其他激活状态,如图11J所示,其中摇臂开 关的在接触12330下方的部分被推“入”显示器,并且图像12322的亮度 值以比第一强度下的减小速率更快的速率(例如,每秒-10)减小,并且图 像12322的亮度根据亮度值的改变而改变,如图11J所示。

在一些情况下,接触12330的强度然后快速地减小到低于轻按压强度 阈值(例如,“ITL”)(例如,在0.05秒或更少时间内从高于ITD的第二 强度减小到低于ITL的强度)。响应于检测到强度减小到低于轻按压强度阈 值(例如,“ITL”),亮度值停止改变,并且图像12322的亮度停止改 变,如图11K所示。取决于强度从第二强度减小到低于轻按压强度阈值 (例如,“ITL”)的强度的速率,亮度值任选地响应于检测到强度减小而 立即停止改变,或者亮度值的改变速率任选地在亮度值停止改变之前先减 小到更慢的速率(例如,第一强度下的速率)。

摇臂开关12324-1包括多个激活状态。在一些实施例中,摇臂开关 12324-1的激活状态是在亮度值改变时的不同亮度水平。在一些实施例中, 在亮度值正以“缓慢”速率(例如,每秒-1)减小时,基于减小速率的每 个亮度值增量(例如,-1、-2、-3等)均被视为激活状态,并且在亮度值正 以“快速”速率(例如,每秒-10)减小时,基于减小速率的每个亮度值增 量(例如,每第-10个增量)均被视为激活状态。在这些实施例中的一些 中,在每个激活状态下,任选地在触敏显示器112上生成触觉输出。例 如,在值从-1减小至-2,然后至-3并且然后至-13时,任选地在-2、-3和-13 下生成触觉输出。

在一些其他实施例中,激活状态是亮度值于其下改变的不同速率。例 如,“缓慢”速率是一个激活状态,“快速”速率是另一个激活状态,并 且摇臂开关12324-1的激活的停止(例如,每秒0的速率)是另一个激活状 态。每当亮度值的减小或增大的速率改变时或在激活或停止激活摇臂开关 12324-1时,任选地生成触觉输出。例如,在亮度值不改变时,摇臂开关 12324-1处于第一(“空档”)激活状态;在亮度值正以“缓慢”速率(例 如,每秒-1)减小时,摇臂开关12324-1处于第二(“轻按压”)激活状 态;并且在亮度值正以“快速”速率(例如,每秒-10)减小时,摇臂开关 12324-1处于第三(“深按压”)激活状态。在每个激活状态下,任选地在 触敏显示器112上生成触觉输出。例如,在激活状态从图11H所示的第一 (“空档”)激活状态改变成图11I所示的第二(“轻按压”)激活状态 时,设备生成与激活状态的改变对应的触觉输出。又如,在激活状态从图 11I所示的第二(“轻按压”)激活状态改变成图11J所示的第三(“深按 压”)激活状态时,设备生成与激活状态的改变对应的触觉输出。

在一些实施例中,取决于激活状态的改变响应于接触12330的强度增 大还是减小,响应于激活状态的改变而生成的触觉输出任选地改变。针对 响应于强度增大的激活状态改变而生成的触觉输出任选地不同于针对响应 于强度减小的激活状态改变而生成的触觉输出。触觉输出任选地在移动轮 廓、振幅或这两者上不同。在一些实施例中,针对响应于强度增大的激活 状态改变而生成的触觉输出对应于模拟物理按钮(例如,鼠标按钮)的向 下点击(例如,按压并保持)的触感,并且针对响应于强度减小的激活状 态改变而生成的触觉输出对应于模拟物理按钮的松开点击(例如,自按压 并保持中释放)的触感。

返回至图11K,接触12330已(例如,在接触12330具有在IT0与ITL之间的强度时从位置12330-a到位置12330-b)移动至摇臂开关12324-1的 “加”部分。接触12330的强度被快速地增大到第二强度(例如,接触 12330的强度在0.05秒或更少时间内从图11K中的接触12330-b的低于ITL的强度增大到图11L中高于ITD的第二强度),如图11L所示。响应于强 度增大,亮度值以“快速”速率(例如,每秒+10)增大。如图11K所示, 摇臂开关12324-1处于空档激活状态并且响应于接触12330的强度的到高于 ITD的强度的快速增大而直接过渡至图11L中的深按压激活状态。

如图11M所示,接触12330的强度随后从第二强度(例如,高于ITD的强度)减小到第一强度(例如,在ITL与ITD之间的强度)。响应于检测 到强度减小到第一强度,亮度值以“缓慢”速率(例如,每秒+1)增大, 如图11M所示,并且摇臂开关12324-1以轻按压激活状态示出。

如图11N所示,接触12330的强度随后进一步从第一强度(例如,在 ITL与ITD之间的强度)减小到低于轻按压强度阈值(例如,“ITL”)的强 度。响应于接触12330的强度的进一步减小,亮度值停止增大(例如,改 变速率变为每秒0),如图11N所示,并且摇臂开关12324-1以空档激活状 态示出。

如上所述,摇臂开关12324-1的激活状态根据改变速率或不同的改变 速率而任选地对应于值的改变增量。每当一个激活状态改变成另一个激活 状态(例如,一个增量改变成下一个增量或者一个改变速率改变成下一个 改变速率)时,便任选地生成触觉输出。

图12A-12B是示出了根据一些实施例的提供用于改变用户界面对象的 激活状态的反馈的方法12400的流程图。方法12400在具有显示器和触敏 表面的电子设备(例如,图3的设备300或图1A的便携式多功能设备 100)上执行。在一些实施例中,显示器是触摸屏显示器,并且触敏表面在 显示器上。在一些实施例中,显示器与触敏表面是分开的。方法12400中 的一些操作任选地被组合,并且/或者一些操作的顺序任选地被改变。

如下所述,方法12400提供了一种在改变用户界面对象的激活状态时 提供反馈的更高效的方法。该方法减少了用户在改变用户界面对象的激活 状态时的认知负担,从而创建了一种更有效的人机接口。对于电池驱动的 电子设备,使用户能够更快且更有效地改变用户界面对象的激活状态,这 将节省功率并且增加电池充电之间的时间。

设备在显示器上显示用户界面对象,其中用户界面对象具有多个激活 状态(12402)。例如,图11A示出了在显示器450上的图像编辑器用户界面 12300中显示的用于调节图像的参数的摇臂开关12304,该显示器与于其上 检测到接触的触敏表面451分开。又如,图11H示出了在于其上检测到接 触的触敏显示器112上的图像编辑器用户界面12328中显示的用于调节图 像的参数的摇臂开关12324。相应摇臂开关12304或12324具有多个激活状 态,所述激活状态任选地为对应参数值的改变增量或者参数值的改变速率 (例如,空档激活状态、轻按压激活状态和深按压激活状态)。

设备检测触敏表面上的接触(例如,手指接触)(12404)。如图11A所 示,例如,在触敏表面451上检测到接触12310。又如,图11H示出了在 触敏显示器112上检测到的接触12330。

设备检测到触敏表面上的接触的强度从第一强度(例如,在ITL与ITD之间的强度)增大到第二强度(例如,高于ITD的强度)(12406)。图11A- 11C示出了接触12310的强度从低于用于激活摇臂开关12304-1的轻按压强 度阈值(例如,“ITL”)的强度增大到高于轻按压强度阈值(例如, “ITL”)的第一强度并且然后增大到高于第一强度的第二强度。又如,在 图11D-11E中,设备检测到接触12310的强度从低于轻按压强度阈值(例 如,“ITL”)的强度快速地增大到高于第一强度的第二强度(例如,强度 在0.05秒或更少时间内从低于阈值的强度增大到第二强度)。在图11H- 11J中,设备检测到接触12330的强度从低于用于激活摇臂开关12324-1的 轻按压强度阈值(例如,“ITL”)的强度增大到高于轻按压强度阈值(例 如,“ITL”)的第一强度并且然后增大到高于第一强度的第二强度。又 如,在图11K-11L中,设备检测到接触12330的强度从低于轻按压强度阈 值(例如,“ITL”)的强度快速地增大到高于第一强度的第二强度(例 如,强度在0.05秒或更少时间内从低于阈值的强度增大到第二强度)。

响应于检测到强度的增大(12408),设备将用户界面对象的激活状态改 变M次,其中M为正整数(12410),并且在触敏表面上生成与用户界面对 象的激活状态的每次改变对应的触觉输出(12412)。例如,在图11A-11C或 图11H-11J中,响应于检测到强度从低于轻按压强度阈值(例如, “ITL”)增大到第一强度(例如,在ITL与ITD之间的强度)并且然后增 大到第二强度(例如,高于ITD的强度),摇臂开关从空档激活状态(对应 于图像的亮度无改变)改变成轻按压激活状态(对应于图像的亮度的缓慢 改变速率)并且然后改变成深按压激活状态(对应于图像的亮度的快速改 变速率)。这里,激活状态(在该情况下,为改变速率)改变了两次,并 且生成了两个触觉输出。

又如,在图11D-11E或图11K-11L中,响应于检测到强度从低于轻按 压强度阈值(例如,“ITL”)到第二强度(例如,高于ITD的强度)的快 速增大,摇臂开关从空档激活状态(对应于图像的亮度无改变)改变成深 按压激活状态(对应于图像的亮度的快速改变速率),从而跳过了轻按压 激活状态(对应于图像的亮度的缓慢改变速率)。这里,激活状态(在该 情况下,为改变速率)改变了一次,并且即使设备已检测到具有与图11A 与图11C之间的接触12310的强度改变相同的量值的接触的强度改变,仍 生成一个触觉输出。

在一些实施例中,用户界面对象在第一激活状态下具有第一外观;用 户界面对象在第二激活状态下具有不同于第一外观的第二外观;并且响应 于检测到强度的增大,设备显示用户界面对象从第一外观过渡至第二外观 的动画(12414)。摇臂开关12304-1在图11A-11G中的多个激活状态下出 现,例如,摇臂开关12304-1在改变速率为0时出现在空档位置(例如,摇 臂开关12304-1处于如图11A、图11D和图11G所示的空档激活状态), 并且在速率为非零时表现为具有下压的“减”部分或“加”部分(例如, 摇臂开关12304-1处于如图11B和图11F所示的轻按压激活状态或者处于 如图11C和图11E所示的深按压激活状态)。在摇臂开关12304-1被激活 或去激活(例如,改变速率改变)时,任选地显示分别示出了从空档位置 到下压位置或与之相反的过渡的动画。摇臂开关12324-1在图11H-11N中 的多个激活状态下出现,例如,摇臂开关12324-1在改变速率为0时出现在 空档位置(例如,摇臂开关12324-1处于如图11H、图11K和图11N所示 的空档激活状态),并且在速率为非零时表现为具有下压的“减”部分或 “加”部分(例如,摇臂开关12324-1处于如图11I和图11M所示的轻按 压激活状态或者处于如图11J和图11L所示的深按压激活状态)。在摇臂 开关12324-1被激活或去激活(例如,改变速率改变)时,任选地显示分别 示出了从空档位置到下压位置或与之相反的过渡的动画。

设备检测到接触的强度从第二强度减小到第一强度(12416)。例如,如 图11C-11D所示,检测到接触12310的强度从第二强度到低于轻按压强度 阈值(例如,“ITL”)的快速减小。又如,在图11E-11G中,检测到接触 12310的强度从第二强度减小到第一强度并且然后减小到低于轻按压强度阈 值(例如,“ITL”)。再又如,在图11J-11K中,例如检测到接触12330 的强度从第二强度到低于轻按压强度阈值(例如,“ITL”)的快速减小。 在图11L-11N中,检测到接触12330的强度从第二强度减小到第一强度并 且然后减小到低于轻按压强度阈值(例如,“ITL”)。

响应于检测到强度的减小(12418),设备将用户界面对象的激活状态改 变N次,其中N为正整数(12420),并且在触敏表面上生成与用户界面对象 的激活状态的每次改变对应的触觉输出,其中N不同于M(12424)。例如, 在图11C-11D或图11J-11K中,响应于检测到强度的减小,亮度值的改变 速率从“快速”速率(例如,摇臂开关12324-1的深按压激活状态)改变成 0(例如,摇臂开关12324-1的空档激活状态),并且生成一个触觉输出, 而在图11A-11C和图11H-11J中,分别响应于检测到强度的增大而生成两 个触觉输出。又如,在图11E-11G或图11L-11N中,响应于检测到强度的 减小,亮度值的改变速率从0(例如,摇臂开关12324-1的空档激活状态) 改变成“缓慢”速率(例如,摇臂开关12324-1的轻按压激活状态)并且然 后改变成“快速”速率(例如,摇臂开关12324-1的深按压激活状态),并 且生成两个触觉输出,而在图11D-11E和图11K-11L中,分别响应于检测 到强度的增大而生成仅一个触觉输出。

在一些实施例中,不同的触觉输出是为了提供对应于用户界面事件 (例如,用户界面对象的激活状态的改变,诸如按钮或其他控件的激活) 的反馈而生成的触觉输出。在一些实施例中,由致动器根据每个用户界面 事件的独立波形来移动触敏表面。不同用户界面事件的波形任选地重叠, 但为了针对特定用户界面事件(例如,按钮的激活或控件诸如摇臂开关的 激活状态的改变)提供触觉反馈而生成的波形将仍生成不同的触觉输出。 在一些实施例中,用户界面对象的激活状态对应于电子设备上的应用程序 的操作状态,并且改变用户界面对象的激活状态就会改变应用程序的操作 状态。如果用户界面对象是可调控制界面,诸如多状态按钮、摇臂开关或 滑块,则通常通过改变可调控制界面的视觉外观(例如,作为按钮的阴影 的改变、摇臂开关的旋转的改变或者滑块的位置的改变)来显示按钮/开关/ 滑块的激活状态。此外,在按钮/开关/滑块的激活状态改变时,与按钮/开 关/滑块相关联的应用程序的操作也相应地改变。例如,如果摇臂开关控制 图像的亮度,则摇臂开关的激活状态对应于图像的不同亮度水平,并且在 摇臂开关从第一激活状态改变成第二激活状态时,图像的亮度从与摇臂开 关的第一激活状态对应的第一亮度水平改变成与摇臂开关的第二激活状态 对应的第二亮度水平。在一些实施例中,激活状态对应于图像属性水平 (例如,色调、饱和度、曝光度、亮度、对比度)、内容导航状态(例 如,信道选择、前向导航、后向导航、逐帧导航)、系统属性调节(例 如,音量控制、屏幕亮度、日期/时间设置)、改变速率(例如,可调参数 值增大或减小的速率、前向或后向搜寻遍历视频或音频的速度)或其他可 调属性。

在一些实施例中,M大于N(12424)。例如,在图11A-11D或图11H- 11K中,响应于检测到接触的强度增大的激活状态的改变(例如,图11A- 11C和图11H-11J所示的从空档激活状态到轻按压激活状态的改变以及从轻 按压激活状态到深按压激活状态的改变)次数大于响应于检测到接触的强 度减小的激活状态的改变(例如,图11C-11D和图11J-11K所示的从深按 压激活状态到空档激活状态的改变)次数。

在一些实施例中,M小于N(12426)。例如,在图11D-11G或图11K- 11N中,响应于检测到接触的强度增大的激活状态的改变(例如,图11D- 11E和图11K-11L所示的从空档激活状态到深按压激活状态的改变)次数 小于响应于检测到接触的强度减小的激活状态的改变(例如,图11E-11G 和图11L-11N所示的从深按压激活状态到轻按压激活状态的改变以及从轻 按压激活状态到空档激活状态的改变)次数。

在一些实施例中,M等于1且N等于2(12428)。例如,在图11D-11G 或图11K-11N中,在响应于检测到强度的增大的激活状态中存在一次改 变,并且在响应于检测到强度的减小的激活状态中存在两次改变。

在一些实施例中,M等于2且N等于1(12430)。例如,在图11A-11D 或图11H-11K中,在响应于检测到强度的增大的激活状态中存在两次改 变,并且在响应于检测到强度的减小的激活状态中存在一次改变。

在一些实施例中,响应于检测到强度的增大而生成的至少一个触觉输 出对应于模拟物理致动器机构的向下点击(例如,模拟在用户激活物理按 钮时由物理按钮的机械按钮装置所生成的物理“向下点击感觉”)的触 感,并且响应于检测到强度的减小而生成的至少一个触觉输出对应于模拟 物理致动器机构的松开点击(例如,模拟在用户激活物理按钮时由物理按 钮的机械按钮装置所生成的物理“松开点击感觉”)的触感(12432)。例 如,针对响应于检测到接触12310或12330的强度增大的激活状态改变而 生成的触觉输出对应于模拟向下点击的触感,并且针对响应于检测到接触 12310或12330的强度减小的激活状态改变而生成的触觉输出对应于模拟松 开点击的触感。

虽然本文已将M和N作为正整数来讨论,但在一些情况下,M为零 (例如,用户界面对象的激活状态不响应于检测到接触的强度增大而改 变)和/或N为零(例如,用户界面对象的激活状态不响应于检测到接触的 强度减小而改变)。此外,虽然M已被描述为不同于N,但在一些情况 下,M等于N(例如,响应于检测到接触的强度增大而改变的激活状态的 数目与响应于检测到接触的强度减小而改变的激活状态的数目相同)。

应当理解,对图12A-12B中已经进行描述的操作的特定顺序仅仅是示 例性的,并非意图表明所述顺序是可以执行这些操作的唯一顺序。本领域 的普通技术人员会想到各种方式来对本文所述的操作进行重新排序。此 外,应当注意,本文中相对于本文描述的其他方法(例如,在段落[0051]中 列出的那些方法)所描述的其他过程的细节也以类似的方式适用于上文相 对于图12A-12B所描述的方法12400。例如,上文参考方法12400所描述 的接触、用户界面对象、触觉输出、强度阈值、焦点选择器和动画任选地 具有本文参考本文所述的其他方法(例如,在段落[0051]中列出的那些)所 描述的接触、用户界面对象、触觉输出、强度阈值、焦点选择器和动画的 特征中的一者或多者。为简明起见,这里不重复这些细节。

根据一些实施例,图13示出了根据各种所描述的实施例的原理配置的 电子设备12500的功能框图。该设备的功能块任选地由进行各种所描述的 实施例的原理的硬件、软件、或硬件和软件的组合来实现。本领域的技术 人员应当理解,图13中所述的功能块任选地被组合或被分离为子块以实现 各种所描述的实施例的原理。因此,本文的描述任选地支持本文所述功能 块的任何可能的组合或分离或进一步限定。

如图13所示,电子设备12500包括被配置为显示用户界面对象的显示 单元12502,其中用户界面对象具有多个激活状态;被配置为接收接触的触 敏表面单元12504;被配置为检测与触敏表面单元12504的接触的强度的一 个或多个传感器单元12505;以及耦接至显示单元12502、触敏表面单元 12504以及传感器单元12505的处理单元12506。在一些实施例中,处理单 元12506包括检测单元12508、改变单元12510、生成单元12512以及显示 实现单元12514。

处理单元12506被配置为:(例如,用检测单元12508)检测触敏表 面单元12504上的接触;(例如,用检测单元12508)检测到触敏表面单元 12504上的接触的强度从第一强度增大到第二强度;响应于检测到强度的增 大:(例如,用改变单元12510)将用户界面对象的激活状态改变M次, 其中M为正整数,并且(例如,用生成单元12512)在触敏表面单元 12504上生成与用户界面对象的激活状态的每次改变对应的触觉输出;(例 如,用检测单元12508)检测到接触的强度从第二强度减小到第一强度;并 且响应于检测到强度的减小:(例如,用改变单元12510)将用户界面对象 的激活状态改变N次,其中N为正整数,并且(例如,用生成单元 12512)在触敏表面单元12504上生成与用户界面对象的激活状态的每次改 变对应的触觉输出,其中N不同于M。

在一些实施例中,用户界面对象在第一激活状态下具有第一外观,用 户界面对象在第二激活状态下具有不同于第一外观的第二外观,并且处理 单元12506被配置为:响应于检测到强度的增大,(例如,用显示实现单 元12514)实现用户界面对象从第一外观过渡至第二外观的动画的显示。

在一些实施例中,M大于N。

在一些实施例中,M小于N。

在一些实施例中,M等于1且N等于2。

在一些实施例中,M等于2且N等于1。

在一些实施例中,响应于检测到强度的增大而(例如,用生成单元 12512)生成的至少一个触觉输出对应于模拟物理致动器机构的向下点击的 触感,并且响应于检测到强度的减小而(例如,用生成单元12512)生成的 至少一个触觉输出对应于模拟物理致动器机构的松开点击的触感。

上述信息处理方法中的操作任选地通过运行信息处理装置中的一个或 多个功能模块来实现,该信息处理装置诸如为通用处理器(例如,如以上 相对于图1A和图3所描述)或特定于应用的芯片。

以上参考图12A-12B所述的操作任选地由图1A-1B或图13中所描绘 的部件来实现。例如,检测操作12404、12406、12416,改变操作12410、 12420以及生成操作12412、12422任选地由事件分类器170、事件识别器 180和事件处理程序190来实现。事件分类器170中的事件监视器171检测 在触敏显示器112上的接触,并且事件分配器模块174将事件信息递送到 应用程序136-1。应用程序136-1的相应的事件识别器180将事件信息与相 应的事件定义186进行对比,并且确定触敏表面上的第一位置处的第一接 触是否对应于预定义事件或子事件,诸如选择用户界面上的对象。当检测 到相应的预定义事件或子事件时,事件识别器180激活与检测到该事件或 子事件相关联的事件处理程序190。事件处理程序190任选地使用或调用数 据更新器176或对象更新器177来更新应用程序内部状态192。在一些实施 例中,事件处理程序190访问相应GUI更新器178来更新应用程序显示的 内容。类似地,本领域技术人员会清楚地知道基于在图1A-1B中所示的部 件可如何实现其他过程。

针对改变用户界面对象的激活状态来提供反馈

许多电子设备具有包括用户界面对象的图形用户界面,所述用户界面 对象诸如按钮和开关。在一些情况下,用户激活用户界面对象以执行操作 或调节参数或属性。在一些设备中,触感在一些情况下由用户针对对应的 物理输入而感知,所述物理输入诸如对激活开关的物理致动器机构(例 如,鼠标按钮)的点击。为使虚拟按钮或开关更容易使用,虚拟对象任选 地模拟对应物理对象的行为。例如,在一些情况下,在操作虚拟开关时, 感觉到触感,其中所述触感模拟对应物理开关的感觉,诸如模拟激活开关 的物理致动器机构(例如,鼠标按钮)的点击。但在一些情况下,物理对 象诸如真实按钮和开关在一些情况下提供过多触觉反馈,而在其他情况下 则提供过少反馈。在此类情况下,仅模拟对应物理对象的感觉的虚拟对象 还提供过多(或过少)反馈。但虚拟对象不必提供有仅模拟来自对应物理 对象的触感的触觉反馈。下文所述的实施例提供不与物理致动器机构的致 动相关联的触觉反馈。例如,任选地提供与激活状态改变相关的触感。在 被提供不与物理致动相关联的触感时,用户可更好地辨别虚拟按钮的激活 状态而不因过多或过少视觉反馈而分心。如果用户界面对象以迅速连续的 方式历经两次或更多次激活状态改变,则不需要针对激活状态的每次改变 提供触觉反馈,但对应物理对象将提供更多触觉反馈。另外,当接触在强 度上增大时提供触觉反馈的次数不必与当接触在强度上减小时提供触觉反 馈的次数相同。在一些实施例中,当接触在强度上增大或在强度上减小时 提供触觉反馈的次数的这种不对称取决于接触强度改变的速度,以及在其 他实施例中,与接触强度改变的速度无关。该另外(或另选)的反馈让用 户能够更快且更有效地操作设备,从而创建更有效的人机界面。

图14A-14N示出了根据一些实施例的用于针对改变用户界面对象的激 活状态来提供反馈的示例性用户界面。这些附图中的用户界面被用于示出 下文描述的过程,包括图15A-15C中的过程。图14A-14N包括强度图,其 示出触敏表面上的接触相对于包括轻按压强度阈值(例如,“ITL”)和深 按压强度阈值(例如,“ITD”)的多个强度阈值的当前强度。在一些实施 例中,与下文参考“ITL”和“ITD”描述的那些操作类似的操作是参考不同 的强度阈值来执行的。

图14A示出了包括一个或多个用户界面对象的用户界面的示例。在设 备(例如,设备300)的显示器450(例如,显示器340)上显示图像编辑 器用户界面12600。在图像编辑器用户界面12600中显示图像12602以用于 根据用户命令编辑。一个或多个用户界面对象(例如,按钮、滑块、摇臂 开关)任选地包括控制用户界面对象诸如摇臂开关12604以及状态用户界 面对象诸如在图像编辑器用户界面12600中显示的值指示器12606。图 14A-14G中的用户界面对象被配置为让用户能够发出用于编辑图像12602 的命令。例如,在图像编辑器用户界面12600中显示一个或多个摇臂开关 12604,用于修改图像12602的相应参数。表示相应参数的值任选地显示在 相应的值指示器12606中。摇臂开关12604-1任选地用于修改例如图像 12602的亮度,并且亮度水平(例如,由整数表示,其中0作为上限值与下 限值之间的中间值)显示在值指示器12606-1中。在用户界面12600上还显 示了光标12608。在一些实施例中,光标12608是鼠标指针。光标12608是 焦点选择器的示例。

相应摇臂开关12604任选地具有“减”部分和“加”部分,所述 “减”部分用于减小与摇臂开关相关联的参数的值且由减号指示,所述 “加”部分用于增大与摇臂开关相关联的参数的值且由加号指示。在焦点 选择器(例如,光标12608)定位于摇臂开关的任一部分上并且与焦点选择 器相关联的接触的强度改变时,任选地激活摇臂开关12604。在一些实施例 中,取决于焦点选择器定位于其上方的部分,对应值减小或增大。在焦点 选择器定位于“减”部分上时,在激活摇臂开关时,对应值减小。在焦点 选择器定位于“加”部分上时,在激活摇臂开关时,对应值增大。在图 14A中,光标12608定位于摇臂开关12604-1的“减”部分上。

在摇臂开关12604-1未激活时,摇臂开关12604-1显示在空档位置,如 图14A所示。当激活摇臂开关12604-1时,摇臂开关12604-1被显示为好像 “减”部分(如果在激活摇臂开关12604-1时光标12608定位于“减”部分 上,则因此激活摇臂开关12604-1以减小值)或“加”部分(如果在激活摇 臂开关12604-1时光标12608定位于“加”部分上,则因此激活摇臂开关 12604-1以增大值)被下压一样。例如,图14B示出了摇臂开关12604-1的 被下压的“减”部分。在一些实施例中,当摇臂开关12604-1被激活时,任 选地显示示出了摇臂开关12604-1从空档位置过渡至任一下压位置的动画; 并且当摇臂开关12604-1被去激活时,任选地显示示出了摇臂开关12604-1 从任一下压位置过渡至空档位置的动画。

图14A示出了在设备的触敏表面451(例如,触摸板355)上检测到 的强度高于接触检测阈值(例如,“IT0”)且低于用于激活摇臂开关 12604-1的轻按压强度阈值(例如,“ITL”)的接触12610。当在触敏表面 451上继续检测到接触12610并且光标12608定位于摇臂开关12604-1的 “减”部分上时,在一些情况下,接触12610的强度增大到高于用于激活 摇臂开关12604-1的轻按压强度阈值(例如,“ITL”)的轻按压强度,并 且检测到强度的增大,如图14B所示。响应于检测到强度的增大,激活摇 臂开关12604-1并且值指示器12606-1中的亮度水平减小。图像12602的亮 度根据亮度水平的改变而改变。在一些实施例中,亮度水平的改变速率为 相对缓慢的速率(例如,1个亮度水平/时间阶跃)。在一些实施例中,对 摇臂开关12604-1进行动画化以示出“减”部分被下压。只要接触12610的 强度不减小到低于轻按压强度阈值(例如,“ITL”),亮度水平便会继续 减小。

在一些情况下,接触12610的强度进一步增大。当在触敏表面451上 继续检测到接触12610并且光标12608仍定位于摇臂开关12604-1的“减” 部分上时,设备检测到接触12610的强度从轻按压强度(例如,ITL与ITD之间的强度)增大到高于深按压强度阈值(例如,“ITD”)的第二更高强 度。响应于强度的这种增大,摇臂开关12604-1改变成其他激活状态,如图 14C所示,其中摇臂开关的在焦点选择器12608下方的部分被推“入”显 示器,并且亮度水平以比轻按压强度下的改变速率更快的“中等”速率 (例如,5个亮度水平/时间阶跃)减小,并且图像12602的亮度根据亮度 水平的改变而改变,如图14C所示。

在一些情况下,接触12610的强度更进一步增大。当在触敏表面451 上继续检测到接触12610并且光标12608仍定位于摇臂开关12604-1的 “减”部分上时,接触12610的强度从第一深按压强度(例如,图14C所 示的高于ITD的强度)增大到高于第一深按压强度的第二深按压强度(例 如,图14D所示的高于ITD的强度)。响应于强度的这种增大,摇臂开关 12604-1改变成其他激活状态,如图14D所示,其中摇臂开关的在焦点选择 器12608下方的部分相比图14C所示被更进一步推“入”显示器,并且亮 度水平以比第一深按压强度下的改变速率更快的“快速”速率(例如,10 个亮度水平/时间阶跃)减小,并且图像12602的亮度根据亮度水平的改变 而改变,如图14D所示。

从第二深按压强度起,在一些情况下,接触12610的强度更进一步增 大。取决于具体实施,由于第二深按压强度下的改变速率任选地为预定义 下限(或对于亮度水平增大的改变速率而言,上限)改变速率,亮度水平 改变的速率任选地响应于检测到强度的增大而进一步改变或不进一步改 变。

接触12610的强度任选地从第二深按压强度减小到第一深按压强度 (例如,高于ITD但低于第二深按压强度的强度)。当在触敏表面451上继 续检测到接触12610并且光标12608仍定位于摇臂开关12604-1的“减”部 分上时,设备检测到接触12610的强度从第二深按压强度减小到第一深按 压强度,如图14E所示。响应于强度的这种减小,继续激活摇臂开关 12604-1,并且亮度水平以对应于第一深按压强度的速率(例如,每个时间 单位5个亮度水平)减小,并且图像12602的亮度根据亮度水平的改变而 改变,如图14E所示。

接触12610的强度任选地进一步从第一深按压强度减小到轻按压强度 (例如,ITL与ITD之间的强度)。当在触敏表面451上继续检测到接触 12610并且光标12608仍定位于摇臂开关12604-1的“减”部分上时,设备 检测到接触12610的强度从第一深按压强度减小到轻按压强度,如图14F 所示。响应于强度的这种减小,继续激活摇臂开关12604-1,并且亮度水平 以对应于轻按压强度的速率(例如,每个时间单位1个亮度水平)减小, 并且图像12602的亮度根据亮度水平的改变而改变,如图14F所示。

接触12610的强度任选地进一步从轻按压强度(例如,ITL与ITD之间 的强度)减小到低于轻按压强度阈值(例如,“ITL”)的强度。当在触敏 表面451上继续检测到接触12610并且光标12608仍定位于摇臂开关 12604-1的“减”部分上时,设备检测到接触12610的强度从轻按压强度减 小到低于轻按压强度阈值(例如,“ITL”)的强度,如图14G所示。响应 于检测到强度的这种减小,摇臂开关12604-1被去激活,并且亮度水平停止 减小,如图14G所示。图像12602的亮度根据亮度水平停止减小而停止改 变。

用户界面对象,诸如摇臂开关12604-1,任选地具有多个激活状态。例 如,摇臂开关12604-1的激活状态是亮度水平改变的不同速率。例如,在摇 臂开关12604-1处于“空档激活状态”下时,在接触具有低于轻按压强度阈 值(例如,低于ITL的强度)的强度时,亮度水平不改变,如图14A所 示;在摇臂开关12604-1处于“轻按压激活状态”下时,在接触具有轻按压 强度(例如,ITL与ITD之间的强度)时,亮度水平以缓慢速率改变,如图 14B所示;在摇臂开关12604-1处于“第一深按压激活状态”下时,在接触 具有第一深按压强度(例如,高于ITD的强度)时,亮度水平以中等速率改 变,如图14C所示;并且在摇臂开关12604-1处于“第二深按压激活状 态”下时,在接触具有第二深按压强度(例如,高于ITD即高于第一深按压 强度的强度)时,亮度水平以快速速率改变,如图14D所示。或者,摇臂 开关的激活状态对应于参数的值(例如,第一激活状态对应于0,第二激活 状态对应于1,第三激活状态对应于2,等等)。

在接触12610的强度改变时,摇臂开关12604-1任选地从起始强度下 的激活状态(例如,空档激活状态,如图14A所示)改变成目标强度下的 激活状态(例如,第二深按压激活状态,如图14D所示)。例如,在接触 12610的强度从低于轻按压强度阈值(例如,“ITL”)的强度改变成第二 深按压强度(例如,高于ITD即高于第一深按压强度的强度)时,摇臂开关 12604-1的激活状态从每个时间阶跃0个亮度水平的速率改变成每个时间阶 跃10个亮度水平的速率。又如,在接触12610的强度从第二深按压强度改 变成第一深按压强度(例如,如图14D-14E所示)时,摇臂开关12604-1 的激活状态从每个时间阶跃10个亮度水平的速率改变成每个时间阶跃5个 亮度水平。因此,上文参考图14A-14G所描述的亮度水平的改变速率的改 变是摇臂开关12604-1的激活状态的改变。

在一些实施例中,摇臂开关12604-1在从起始强度下的激活状态改变 成目标强度下的激活状态的过程中任选地改变成零个或多个中间激活状 态。例如,在接触12610的强度从低于轻按压强度阈值(例如,“ITL”) 增大到第二深按压强度时,摇臂开关12604-1在从低于轻按压强度阈值(例 如,“ITL”)的强度下的激活状态改变成第二深按压强度下的激活状态 (例如,第二深按压激活状态)的过程中改变成轻按压强度下的激活状态 (例如,对应于轻按压激活状态),并且然后改变成第一深按压强度下的 激活状态(例如,对应于第一深按压激活状态)。第一强度和第二强度下 的激活状态(例如,轻按压激活状态和第一深按压激活状态)是低于轻按 压强度阈值(例如,“ITL”)的强度下的激活状态与第二深按压强度下的 激活状态之间的中间激活状态。

在一些实施例中,针对强度增大的介于起始激活状态与目标激活状态 之间的中间激活状态的数目不同于针对强度减小的介于起始激活状态与目 标激活状态之间的中间激活状态的数目。例如,重新参考上文所述的图 14A-14G,在图14D-14G所示的接触12610的强度减小时,在从第二深按 压强度下的改变速率改变成空档激活状态下的速率的过程中,摇臂开关 12604-1任选地跳过轻按压强度下的速率(例如,对应于轻按压激活状态) 以及第一深按压强度下的速率(例如,对应于第一深按压激活状态)中的 任一者或两者,而在图14A-14D所示的强度增大时,不跳过这些速率。在 一些其他实施例中,不跳过中间激活状态,但在一些情况下,到这些状态 的过渡对于用户而言是不明显的,因为强度的增大或减小的速度引起激活 状态之间以如此快速的接续过渡,使得用户将在一些情况下将整个激活状 态序列感知为仅从起始激活状态到目标激活状态的过渡。在一些实施例 中,设备被预配置为在强度增大或减小时跳过中间激活状态。在一些其他 实施例中,如果强度以超过阈值的速率(例如,与在小于0.5、0.25、0.1、 0.05秒内或一些其他合理时间量内在低于ITL的强度与高于ITD的强度之间 过渡对应的速率)增大或减小,则跳过中间激活状态。在后一种情况下, 在用户控制强度增大或减小的速度时,用户对是否跳过中间激活状态具有 一定控制。

响应于接触12610的强度增大,任选地在触敏表面451上生成一个或 多个不同的触觉输出。例如,在强度从低于轻按压强度阈值(例如, “ITL”)增大到第二深按压强度时,如上文参考图14A-14D所描述,任选 地在触敏表面451上生成一个或多个不同的触觉输出。为方便起见,在下 文中将响应于检测到强度的增大而生成的触觉输出的数目称为变量 “M”。

响应于接触12610的强度的减小,任选地在触敏表面451上生成一个 或多个不同的触觉输出。例如,在强度从第二深按压强度减小到低于轻按 压强度阈值(例如,“ITL”)的强度时,如上文参考图14D-14G所描述, 任选地在触敏表面451上生成一个或多个不同的触觉输出。为方便起见, 在下文中将响应于检测到强度的减小而生成的不同的触觉输出的数目称为 变量“N”。在一些情况下,M和N相同,而在一些情况下,M和N不 同,例如,响应于检测到强度的减小而生成的触觉输出的数目在一些情况 下与响应于检测到强度的增大而生成的触觉输出的数目相同或不同。

例如,在亮度水平响应于检测到接触12610的强度的增大而改变时, 所述M个触觉输出任选地为在亮度水平的增量或亮度水平的改变的增量下 生成的触觉输出。例如,触觉输出任选地每隔10个亮度水平生成或者在从 起始水平起的每第10个水平生成。类似地,在亮度水平响应于检测到接触 12610的强度的减小而改变时,所述N个触觉输出任选地为在亮度水平的 增量或亮度水平的改变的增量下生成的触觉输出。在该示例中,不必响应 于激活状态的过渡而生成触觉输出。

在一些实施例中,针对激活状态的改变或过渡而生成所述M个或N个 触觉输出;触觉输出标记激活状态的改变或过渡。例如,在接触12610的 强度增大时,以亮度水平的改变速率在每次改变下任选地生成触觉输出 (例如,所述M个触觉输出中的每一者对应于激活状态的相应改变),并 且在接触12610的强度减小时,以亮度水平的改变速率在每次改变下任选 地生成触觉输出(例如,所述N个触觉输出中的每一者对应于激活状态的 相应改变)。在一些实施例中,在激活状态的改变或过渡被跳过或对于用 户而言不明显(例如,因为接触12610的强度的增大或减小速率发生得比 改变速率阈值更快)时,任选地放弃一个或多个对应触感的生成(例如, 即使发生激活状态的改变,设备仍不生成与激活状态的对应改变相关联的 一个或多个对应触感)。

在一些实施例中,取决于是否响应于接触12610的强度的增大或减小 而生成触觉输出,触觉输出改变。响应于检测到接触12610的强度的增大 而生成的触觉输出任选地不同于响应于检测到接触12610的强度的减小而 生成的触觉输出。触觉输出任选地在移动轮廓、振幅或这两者上不同。在 一些实施例中,响应于检测到接触12610的强度的增大而生成的触觉输出 对应于模拟物理按钮(例如,鼠标按钮)的向下点击(例如,按压并保 持)的触感,并且响应于检测到接触12610的强度的减小而生成的触觉输 出对应于模拟物理按钮的松开点击(例如,自按压并保持中释放)的触 感。

图14H-14N示出了在具有触敏显示器112的设备(例如,设备100) 上实现的上文参考图14A-14G所描述的用户界面的示例。图14H示出了在 设备的触敏显示器112上显示的图像编辑器用户界面12628。在图像编辑器 用户界面12628中显示图像12622以用于根据用户命令进行编辑。一个或 多个用户界面对象(例如,按钮、滑块、摇臂开关)任选地包括控制用户 界面对象诸如摇臂开关12604以及状态用户界面对象诸如在图像编辑器用 户界面12628中显示的值指示器12606。图14H-14N中的用户界面对象被 配置为允许用户发出用于编辑图像12622的命令。例如,在图像编辑器用 户界面12628中显示了一个或多个摇臂开关12624,用于修改图像12622的 相应参数。表示相应参数的值任选地显示在相应的值指示器12626中。摇 臂开关12624-1任选地用于修改例如图像12622的亮度,并且亮度值(例 如,由整数表示,其中0作为上限值与下限值之间的中间值)显示在值指 示器12626-1中。

相应摇臂开关12624任选地具有“减”部分和“加”部分,所述 “减”部分用于减小与摇臂开关相关联的参数的值且由减号指示,所述 “加”部分用于增大与摇臂开关相关联的参数的值且由加号指示。在接触 定位于摇臂开关的任一部分上并且与焦点选择器相关联的接触的强度改变 时,任选地激活摇臂开关12624。在一些实施例中,取决于接触定位于其上 方的部分,对应值减小或增大。在接触定位于“减”部分上时,在激活摇 臂开关时,对应值减小。在接触定位于“加”部分上时,在激活摇臂开关 时,对应值增大。在图14H中,接触12630定位于摇臂开关12624-1的 “减”部分上。

在摇臂开关12624-1未激活时,摇臂开关12624-1显示在空档位置,如 图14H所示。在激活摇臂开关12624-1时,摇臂开关12624-1被显示为好像 “减”部分(如果在激活摇臂开关12624-1时接触12630定位于“减”部分 上,则因此激活摇臂开关12624-1以减小值)或“加”部分(如果在激活摇 臂开关12624-1时接触12630定位于“加”部分上,则因此激活摇臂开关 12624-1以增大值)被下压一样。例如,图14I示出了摇臂开关12624-1的 被下压的“减”部分。在一些实施例中,当摇臂开关12624-1被激活时,任 选地显示示出了摇臂开关12624-1从空档位置过渡至任一下压位置的动画; 并且当摇臂开关12624-1被去激活时,任选地显示示出了摇臂开关12624-1 从任一下压位置过渡至空档位置的动画。

图14H示出了在触敏显示器112上检测到的强度高于接触检测阈值 (例如,“IT0”)且低于用于激活摇臂开关12624-1的轻按压强度阈值 (例如,“ITL”)的接触12630。当在触敏显示器112上在摇臂开关 12624-1的“减”部分上继续检测到接触12630时,在一些情况下,接触 12630的强度增大到高于用于激活摇臂开关12624-1的轻按压强度阈值(例 如,“ITL”)的轻按压强度,并且强度的增大被检测到,如图14I所示。 响应于检测到强度的增大,激活摇臂开关12624-1并且值指示器12626-1中 的亮度水平减小。图像12622的亮度根据亮度水平的改变而改变。在一些 实施例中,亮度水平的改变速率为相对缓慢的速率(例如,1个亮度水平/ 时间阶跃)。在一些实施例中,对摇臂开关12624-1进行动画化以示出 “减”部分被下压。只要接触12630的强度不减小到低于轻按压强度阈值 (例如,“ITL”),则亮度水平继续减小。

在一些情况下,接触12630的强度进一步增大。当在触敏显示器112 上在摇臂开关12624-1的“减”部分上继续检测到接触12630时,设备检测 到接触12630的强度从轻按压强度(例如,ITL与ITD之间的强度)增大到 高于深按压强度阈值(例如,“ITD”)的第二更高强度。响应于强度的这 种增大,摇臂开关12624-1改变成其他激活状态,如图14J所示,其中摇臂 开关的在焦点选择器(例如,接触12630)下方的部分被推“入”显示器, 并且亮度水平以比轻按压强度下的改变速率更快的“中等”速率(例如,5 个亮度水平/时间阶跃)减小,并且图像12622的亮度根据亮度水平的改变 而改变,如图14J所示。

在一些情况下,接触12630的强度更进一步增大。当在触敏显示器 112上在摇臂开关12624-1的“减”部分上继续检测到接触12630时,接触 12630的强度从第一深按压强度(例如,图14J所示的高于ITD的强度)增 大到高于第一深按压强度的第二深按压强度(例如,图14K所示的高于 ITD的强度)。响应于强度的这种增大,摇臂开关12624-1改变成其他激活 状态,如图14K所示,其中摇臂开关的在接触12630下方的部分相比图14J 所示被更进一步推“入”显示器,并且亮度水平以比第一深按压强度下的 改变速率更快的“快速”速率(例如,10个亮度水平/时间阶跃)减小,并 且图像12622的亮度根据亮度水平的改变而改变,如图14K所示。

从第二深按压强度起,在一些情况下,接触12630的强度更进一步增 大。取决于具体实施,由于第二深按压强度下的改变速率任选地为预定义 下限(或对于值增大的改变速率而言,上限)改变速率,亮度水平改变的 速率任选地响应于检测到强度的增大而进一步改变或不进一步改变。

接触12630的强度任选地从第二深按压强度减小到第一深按压强度 (例如,高于ITD但低于第二深按压强度的强度)。当在触敏显示器112上 在摇臂开关12624-1的“减”部分上继续检测到接触12630时,设备检测到 接触12630的强度从第二深按压强度减小到第一深按压强度,如图14L所 示。响应于强度的这种减小,继续激活摇臂开关12624-1,并且亮度水平以 对应于第一深按压强度的速率(例如,每个时间单位5个亮度水平)减 小,并且图像12622的亮度根据亮度水平的改变而改变,如图14L所示。

接触12630的强度任选地进一步从第一深按压强度减小到轻按压强度 (例如,ITL与ITD之间的强度)。当在触敏显示器112上在摇臂开关 12624-1的“减”部分上继续检测到接触12630时,设备检测到接触12630 的强度从第一深按压强度减小到轻按压强度,如图14M所示。响应于强度 的这种减小,继续激活摇臂开关12624-1,并且亮度水平以对应于轻按压强 度的速率(例如,每个时间单位1个亮度水平)减小,并且图像12622的 亮度根据亮度水平的改变而改变,如图14M所示。

接触12630的强度任选地进一步从轻按压强度(例如,ITL与ITD之间 的强度)减小到低于轻按压强度阈值(例如,“ITL”)的强度。当在触敏 显示器112上在摇臂开关12624-1的“减”部分上继续检测到接触12630 时,设备检测到接触12630的强度从轻按压强度减小到低于轻按压强度阈 值(例如,“ITL”)的强度,如图14N所示。响应于检测到强度的这种减 小,摇臂开关12624-1被去激活,并且亮度水平停止减小,如图14N所 示。图像12622的亮度根据亮度水平停止减小而停止改变。

用户界面对象,诸如摇臂开关12624-1,任选地具有多个激活状态。例 如,摇臂开关12624-1的激活状态是亮度水平改变的不同速率。例如,在摇 臂开关12624-1处于“空档激活状态”下时,在接触具有低于轻按压强度阈 值(例如,低于ITL的强度)的强度时,亮度水平不改变,如图14H所 示;在摇臂开关12624-1处于“轻按压激活状态”下时,在接触具有轻按压 强度(例如,ITL与ITD之间的强度)时,亮度水平以缓慢速率改变,如图 14I所示;在摇臂开关12624-1处于“第一深按压激活状态”下时,在接触 具有第一深按压强度(例如,高于ITD的强度)时,亮度水平以中等速率改 变,如图14J所示;并且在摇臂开关12624-1处于“第二深按压激活状态” 下时,在接触具有第二深按压强度(例如,高于ITD即高于第一深按压强度 的强度)时,亮度水平以快速速率改变,如图14K所示。或者,摇臂开关 的激活状态对应于参数的值(例如,第一激活状态对应于0,第二激活状态 对应于1,第三激活状态对应于2,等等)。

在接触12630的强度改变时,摇臂开关12624-1任选地从起始强度下 的激活状态(例如,空档激活状态,如图14H所示)改变成目标强度下的 激活状态(例如,第二深按压激活状态,如图14K所示)。例如,在接触 12630的强度从低于轻按压强度阈值(例如,“ITL”)的强度改变成第二 深按压强度(例如,高于ITD即高于第一深按压强度的强度)时,摇臂开关 12624-1的激活状态从每个时间阶跃0个亮度水平的速率改变成每个时间阶 跃10个亮度水平的速率。又如,在接触12630的强度从第二深按压强度改 变成第一深按压强度(例如,如图14K-14L所示)时,摇臂开关12624-1 的激活状态从每个时间阶跃10个亮度水平的速率改变成每个时间阶跃5个 亮度水平的速率。因此,上文参考图14H-14N所描述的亮度水平的改变速 率的改变是摇臂开关12624-1的激活状态的改变。

在一些实施例中,摇臂开关12624-1在从起始强度下的激活状态改变 成目标强度下的激活状态的过程中任选地改变成零个或多个中间激活状 态。例如,在接触12630的强度从低于轻按压强度阈值(例如,“ITL”) 增大到第二深按压强度时,摇臂开关12624-1在从低于轻按压强度阈值(例 如,“ITL”)的强度下的激活状态改变成第二深按压强度下的激活状态 (例如,第二深按压激活状态)的过程中改变成轻按压强度下的激活状态 (例如,对应于轻按压激活状态),并且然后改变成第一深按压强度下的 激活状态(例如,对应于第一深按压激活状态)。第一强度和第二强度下 的激活状态(例如,轻按压激活状态和第一深按压激活状态)是低于轻按 压强度阈值(例如,“ITL”)的强度下的激活状态与第二深按压强度下的 激活状态之间的中间激活状态。

在一些实施例中,针对强度增大的介于起始激活状态与目标激活状态 之间的中间激活状态的数目不同于针对强度减小的介于起始激活状态与目 标激活状态之间的中间激活状态的数目。例如,重新参考上文描述的图 14H-14N,在图14K-14N中所示的接触12630的强度减小时,在从第二深 按压强度下的改变速率改变成空档激活状态下的速率的过程中,摇臂开关 12624-1任选地跳过轻按压强度下的速率(例如,对应于轻按压激活状态) 和第一深按压强度下的速率(例如,对应于第一深按压激活状态)中的任 一者或两者,而在图14H-14K中所示的强度增大中,不跳过这些速率。在 一些其他实施例中,不跳过中间激活状态,但在一些情况下,到这些状态 的过渡对于用户而言是不明显的,因为强度的增大或减小的速度引起激活 状态之间以如此快速的接续进行过渡,使得用户在一些情况下将整个激活 状态序列仅感知为从起始激活状态到目标激活状态的过渡。在一些实施例 中,设备被预配置为在强度增大或减小时跳过中间激活状态。在一些其他 实施例中,如果强度以超过阈值的速率(例如,强度在小于预定义的时间 量诸如0.05秒内从低于轻按压强度阈值改变成第二深按压强度)增大或减 小,则跳过中间激活状态。在后一种情况下,在用户控制强度增大或减小 的速度时,用户对是否跳过中间激活状态具有一定控制。

响应于接触12630的强度增大,任选地在触敏显示器112上生成一个 或多个不同的触觉输出。例如,在强度从低于轻按压强度阈值(例如, “ITL”)增大到第二深按压强度时,如上文参考图14H-14K所述,任选地 在触敏显示器112上生成一个或多个不同的触觉输出。为方便起见,在下 文中将响应于检测到强度的增大而生成的触觉输出的数目称为变量 “M”。

响应于接触12630的强度减小,任选地在触敏显示器112上生成一个 或多个不同的触觉输出。例如,在强度从第二深按压强度减小到低于轻按 压强度阈值(例如,“ITL”)时,如上文参考图14K-14N所述,任选地在 触敏显示器112上生成一个或多个不同的触觉输出。为方便起见,在下文 中将响应于检测到强度减小而生成的不同的触觉输出的数目称为变量 “N”。在一些情况下,M和N相同,而在一些情况下,M和N不同—例 如,响应于检测到强度减小而生成的触觉输出的数目与响应于检测到强度 增大而生成的触觉输出的数目任选地相同或不同。

例如,在亮度水平响应于检测到接触12630的强度增大而改变时,所 述M个触觉输出任选地为在亮度水平的增量或亮度水平的改变的增量下生 成的触觉输出。例如,触觉输出任选地每隔10个亮度水平生成或者在从起 始水平起的每第10个水平生成。类似地,在亮度水平响应于检测到接触 12630的强度减小而改变时,所述N个触觉输出任选地为在亮度水平的增 量或亮度水平的改变的增量下生成的触觉输出。在该示例中,不必响应于 激活状态的过渡而生成触觉输出。

在一些实施例中,针对激活状态的改变或过渡而生成所述M个或N个 触觉输出;触觉输出标记激活状态的改变或过渡。例如,在接触12630的 强度增大时,触觉输出任选地在亮度水平的改变速率的每次改变下生成 (例如,所述M个触觉输出中的每一者对应于激活状态的相应改变),并 且在接触12630的强度减小时,触觉输出任选地在亮度水平的改变速率的 每次改变下生成(例如,所述N个触觉输出中的每一者对应于激活状态的 相应改变)。在一些实施例中,在激活状态的改变或过渡被跳过或对于用 户而言不明显(例如,因为接触12630的强度的增大或减小速率发生得比 改变速率阈值更快)时,任选地放弃一个或多个对应触感的生成(例如, 即使发生激活状态的改变,设备仍不生成与激活状态的对应改变相关联的 一个或多个对应触感)。

在一些实施例中,触觉输出根据是否响应于接触12630的强度的增大 或减小生成触觉输出而发生改变。响应于检测到接触12630的强度的增大 而生成的触觉输出任选地不同于响应于检测到接触12630的强度的减小而 生成的触觉输出。触觉输出任选地在移动轮廓、振幅或这两者上不同。在 一些实施例中,响应于检测到接触12630的强度的增大而生成的触觉输出 对应于模拟物理按钮(例如,鼠标按钮)的向下点击(例如,按压并保 持)的触感,并且响应于检测到接触12630的强度的减小而生成的触觉输 出对应于模拟物理按钮的松开点击(例如,自按压并保持中释放)的触 感。

图15A-15C是根据一些实施例的示出了针对改变用户界面对象的激活 状态来提供反馈的方法12700的流程图。在具有显示器和触敏表面的电子 设备(例如,图3的设备300或图1A的便携式多功能设备100)上执行方 法12700。在一些实施例中,显示器是触摸屏显示器,并且触敏表面在显示 器上。在一些实施例中,显示器与触敏表面是分开的。方法12700中的一 些操作任选地被组合,和/或一些操作的顺序被任选地改变。

如下所述,方法12700提供了针对改变用户界面对象的激活状态来提 供反馈的直观方法。该方法减少了用户在改变用户界面对象的激活状态时 的认知负担,从而创建了一种更有效的人机接口。对于电池驱动的电子设 备,使用户能够更快且更有效地改变用户界面对象的激活状态,这将节省 功率并且增加电池充电之间的时间。

设备在显示器上显示用户界面对象,其中用户界面对象具有第一激活 状态和第二激活状态(12702)。例如,图14A示出了在图像编辑器用户界面 12600中显示的用于调整图像的参数的摇臂开关12604。相应摇臂开关 12604具有至少两个激活状态(例如,空档激活状态、轻按压激活状态、第 一深按压激活状态和/或第二深按压激活状态),所述至少两个激活状态任 选地包括参数值的各种改变速率。又如,图14H示出了在图像编辑器用户 界面12628中显示的摇臂开关12624。相应摇臂开关12624具有至少两个激 活状态,所述至少两个激活状态任选地包括参数值的各种改变速率。相应 摇臂开关12624具有至少两个激活状态(例如,空档激活状态、轻按压激 活状态、第一深按压激活状态和/或第二深按压激活状态)。

设备检测触敏表面上的接触(例如,手指接触)(12704)。例如,如图 14A所示,在触敏表面451上检测到接触12610。另外,如图14H所示,在 触敏显示器112上检测到接触12630。

设备检测到触敏表面上的接触的强度从第一强度增大到第二强度 (12706)。图14A-14D示出了接触12610的强度从低于用于激活摇臂开关 12604-1的轻按压强度阈值(例如,“ITL”)的强度增大到高于深按压强 度阈值(例如,“ITD”)且比同样高于该阈值的附加强度(例如,ITL与 ITD之间的轻按压强度)更高的强度。图14H-14K示出了接触12630的强度 从低于用于激活摇臂开关12624-1的轻按压强度阈值(例如,“ITL”)的 强度增大到高于深按压强度阈值(例如,“ITD”)且比同样高于该阈值的 附加强度(例如,ITL与ITD之间的轻按压强度)更高的强度。

响应于检测到强度的增大(12708),设备将用户界面的激活状态从第一 激活状态改变成第二激活状态(12710),并且在触敏表面上生成M个不同的 触觉输出,其中M为正整数(12712)。例如,在图14A-14D或图14H-14K 中,响应于检测到强度从低于轻按压强度阈值(例如,“ITL”)的强度增 大到高于深按压强度阈值(例如,“ITD”)的强度,亮度水平的改变速率 从零改变成“快速”速率(例如,10个亮度水平/时间阶跃)。摇臂开关 12604-1或12624-1的激活状态从对应于零速率的激活状态(例如,空档激 活状态),通过零个或多个中间激活状态(例如,轻按压激活状态和/或第 一深按压激活状态),改变成对应于“快速”速率的激活状态(例如,第 二深按压激活状态)。响应于检测到强度的增大,任选地生成M个触觉输 出。在图像(例如,12602或12622)的亮度根据与摇臂开关12604-1或 12624-1的当前激活状态对应的亮度水平的改变速率而改变时,任选地在亮 度水平的预定义增量(例如,每当亮度水平的个位数字为0时)或者在亮 度水平的改变的预定义增量(例如,从起始亮度水平起的每10个增量)下 生成M个触觉输出。

在一些实施例中,M个不同的触觉输出对应于用户界面对象的激活状 态的改变(12714)。每当摇臂开关12604-1或12624-1的激活状态(例如,亮 度水平的改变速率)改变时,任选地生成M个触感。

在一些实施例中,在检测到接触的强度增大时,设备确定接触的强度 正增大的速率(12716)。根据确定接触的强度正增大的速率保持为低于预定 义阈值(例如,与在小于0.5、0.25、0.1、0.05秒内或一些其他合理时间量 内在第一强度与第二强度之间过渡对应的速率),针对响应于检测到接触 的强度增大而发生的激活状态之间的每次过渡,设备生成不同的触觉输出 (12718)。根据确定接触的强度正增大的速率超过预定义阈值(例如,与在 小于0.5、0.25、0.1、0.05秒内或一些其他合理时间量内在第一强度与第二 强度之间过渡对应的速率),针对响应于检测到接触的强度增大而发生的 激活状态之间的相应过渡,设备放弃生成至少一个不同的触觉输出 (12720)。例如,在接触12610的强度从低于轻按压强度阈值(例如, “ITL”)增大到高于深按压强度阈值(例如,“ITD”)的强度时,如图 14A-14D所示,任选地确定强度增大的速度。又如,在接触12630的强度 从低于轻按压强度阈值(例如,“ITL”)增大到高于深按压强度阈值(例 如,“ITD”)的强度时,如图14H-14K所示,任选地确定强度增大的速 度。如果强度增大的速度低于预定义阈值,则针对该过程中激活状态之间 的每次过渡而生成触觉输出。如果强度增大的速度高于预定义阈值,则任 选地放弃生成所述触觉输出中的一个或多个,例如,与中间激活状态之间 的过渡(例如,轻按压激活状态与第一深按压激活状态之间的过渡)对应 的触觉输出。

设备检测到接触的强度从第二强度减小到第一强度(12722)。例如,如 图14D-14G所示,检测到接触12610的强度从高于深按压强度阈值(例 如,“ITD”)的强度减小到低于轻按压强度阈值(例如,“ITL”)的强 度。例如,如图14K-14N所示,检测到接触12630的强度从高于深按压强 度阈值(例如,“ITD”)的强度减小到低于轻按压强度阈值(例如, “ITL”)的强度。

响应于检测到强度的减小(12724),设备将用户界面的激活状态从第二 激活状态(例如,第二深按压激活状态)改变成第一激活状态(例如,空 档激活状态)(12726),并且在触敏表面上生成N个不同的触觉输出,其中 N为正整数并且N不同于M(12732)。例如,在图14D-14G或图14K-14N 中,响应于检测到强度从高于深按压强度阈值(例如,“ITD”)的强度减 小到低于轻按压强度阈值(例如,“ITL”)的强度,亮度水平的改变速率 从“快速”速率(例如,10/时间阶跃)改变成零。摇臂开关12604-1或 12624-1的激活状态从对应于“快速”速率的激活状态,通过零个或多个中 间激活状态(例如,第一深按压激活状态和/或轻按压激活状态),改变成 对应于零速率的激活状态。响应于检测到强度的减小,任选地生成N个触 觉输出。在亮度水平根据与摇臂开关12604-1或12624-1的当前激活状态对 应的改变速率而改变时,任选地在亮度水平的预定义增量下(例如,每当 亮度水平的个位数字为0时),在亮度水平的改变的预定义增量下(例 如,从起始水平起的每10个增量),或者在亮度起始水平开始改变和停止 改变时,生成N个触觉输出。在一些情况下,N不同于M(例如,在强度 减小时亮度水平已任选地变得更小,或者触觉输出任选地被预定义为在与 水平的增量或水平的改变的增量不同的点下生成)。例如,在接触的强度 的增大低于预定义阈值并且接触的强度的减小高于预定义阈值(例如,与 在小于0.5、0.25、0.1、0.05秒内或一些其他合理时间量内在第一强度与第 二强度之间过渡对应的速率)时,设备生成与在接触的强度正增大时在空 档激活状态、轻按压激活状态、第一深按压激活状态和第二深按压激活状 态之间的每次过渡对应的触觉输出,但设备仅针对这些过渡的子集(例 如,仅第二深按压激活状态与空档激活状态之间的过渡)生成触觉输出。

在一些实施例中,将用户界面对象的激活状态从第一激活状态改变成 第二激活状态包括过渡通过介于第一激活状态和第二激活状态之间的第一 数目的中间激活状态;并且将用户界面对象的激活状态从第二激活状态改 变成第一激活状态包括过渡通过介于第二激活状态和第一激活状态之间的 第二数目的中间激活状态(12728)。例如,在图14A-14D或图14H-14K中, 从空档激活状态到第二深按压激活状态的过渡包括到轻按压激活状态和第 一深按压激活状态的中间过渡。在图14D-14G或图14K-14N中,从第二深 按压激活状态到空档激活状态的过渡包括到第一深按压激活状态和轻按压 激活状态的中间过渡。

在一些实施例中,第一激活状态和第二激活状态之间的第一数目的中 间激活状态不同于第二激活状态和第一激活状态之间的第二数目的中间激 活状态(12730)。例如,在一些情况下,接触12610或12630的强度的增大 是在低于预定义阈值的速度下,并且在一些情况下,接触12610或12630 的强度的减小高于预定义阈值,并且因此,强度减小时的中间激活状态被 跳过(例如,处理图14C-14D所示的第一深按压激活状态与第二深按压激 活状态之间的过渡,并且跳过图14D-14E所示的第二深按压激活阈值到第 一深按压激活之间的过渡)。

在一些实施例中,N个不同的触觉输出对应于用户界面对象的激活状 态的改变(12734)。每当摇臂开关12604-1或12624-1的激活状态(例如,亮 度水平的改变速率)改变时,任选地生成N个触感。

在一些实施例中,在检测到接触的强度减小时,设备确定接触的强度 正减小的速率(12736)。根据确定接触的强度正减小的速率保持低于预定义 阈值(例如,与在小于0.5、0.25、0.1、0.05秒内或一些其他合理时间量内 在第一强度与第二强度之间过渡对应的速率),针对响应于检测到接触的 强度减小而发生的激活状态之间的每次过渡,设备生成不同的触觉输出 (12738)。根据确定接触的强度正减小的速率超过预定义阈值,针对响应于 检测到接触的强度减小而发生的激活状态之间的相应过渡,设备放弃生成 至少一个不同的触觉输出(12740)。例如,在接触12610或12630的强度从 高于深按压强度阈值(例如,“ITD”)的强度减小到低于轻按压强度阈值 (例如,“ITL”)的强度时,分别如图14D-14G或图14K-14N所示,任选 地确定强度减小的速度。在一些实施例中,如果强度减小的速度低于预定 义阈值,则针对该过程中激活状态之间的每次过渡而生成触觉输出。如果 强度减小的速度高于预定义阈值,则任选地放弃生成所述触觉输出中的一 个或多个,例如,与中间激活状态(诸如图14B-14C所示的轻按压激活状 态和第一深按压激活状态)之间的过渡对应的触觉输出。

在一些实施例中,响应于检测到接触(例如,12610或12630)的强度 增大而生成的至少一个触觉输出对应于模拟物理致动器机构的向下点击的 触感(例如,在用户激活物理按钮时模拟由物理按钮的机械按钮装置所生 成的物理“向下点击感觉”的触感),并且响应于检测到接触(例如, 12610或12630)的强度减小而生成的至少一个触觉输出对应于模拟物理致 动器机构的松开点击的触感(例如,在用户激活物理按钮时模拟由物理按 钮的机械按钮装置所生成的物理“松开点击感觉”的触感)。

如本文所用,不同的触觉输出是为了提供对应于用户界面事件(例 如,用户界面对象的激活状态的改变,诸如按钮或其他控件的激活)的反 馈而生成的触觉输出。在一些实施例中,由致动器根据每个用户界面事件 的独立波形来移动触敏表面。不同用户界面事件的波形任选地重叠,但为 了针对特定用户界面事件(例如,按钮的激活或控件诸如摇臂开关的激活 状态的改变)提供触觉反馈而生成的波形将仍生成不同的触觉输出。如本 文所用,用户界面对象的激活状态对应于电子设备上的应用程序的操作状 态,并且改变用户界面对象的激活状态就会改变应用程序的操作状态。如 果用户界面对象是可调控制界面,诸如多状态按钮、摇臂开关或滑块,则 通常通过改变可调控制界面的视觉外观(例如,作为按钮的阴影的改变、 摇臂开关的旋转的改变或者滑块的位置的改变)来显示按钮/开关/滑块的激 活状态。此外,在按钮/开关/滑块的激活状态改变时,与按钮/开关/滑块相 关联的应用程序的操作也相应地改变。例如,如果摇臂开关控制图像的亮 度,则摇臂开关的激活状态对应于图像的不同亮度水平,并且在摇臂开关 从第一激活状态改变成第二激活状态时,图像的亮度从与摇臂开关的第一 激活状态对应的第一亮度水平改变成与摇臂开关的第二激活状态对应的第 二亮度水平。在一些实施例中,激活状态对应于图像属性水平(例如,色 调、饱和度、曝光度、亮度、对比度)、内容导航状态(例如,信道选 择、前向导航、后向导航、逐帧导航)、系统属性调节(例如,音量控 制、屏幕亮度、日期/时间设置)、改变速率以及其他可调属性。

虽然本文已将M和N作为正整数来讨论,但在一些情况下,M为零 (例如,响应于检测到接触的强度增大而生成触觉输出)和/或N为零(例 如,响应于检测到接触的强度减小而未生成触觉输出)。此外,虽然M已 被描述为不同于N,但在一些情况下,M等于N(例如,响应于检测到接 触的强度增大而生成的触觉输出的数目与响应于检测到接触的强度减小而 生成的触觉输出的数目相同)。

应当理解,对图15A-15C中已经进行描述的操作的特定顺序仅仅是示 例性的,并非意图表明所述顺序是可以执行这些操作的唯一顺序。本领域 的普通技术人员会想到各种方式来对本文所述的操作进行重新排序。此 外,应当注意,本文中相对于本文描述的其他方法(例如,在段落[0051]中 列出的那些方法)所描述的其他过程的细节也以类似的方式适用于上文相 对于图15A-15C所描述的方法12700。例如,上文参考方法12700所描述 的接触、用户界面对象、触觉输出、强度阈值、焦点选择器、动画任选地 具有本文参考本文所述的其他方法(例如,在段落[0051]中列出的那些)所 描述的接触、用户界面对象、触觉输出、强度阈值、焦点选择器、动画的 特征中的一者或多者。为简明起见,这里不重复这些细节。

根据一些实施例,图16示出了根据各种所述实施例的原理进行配置的 电子设备12800的功能框图。该设备的功能块任选地由进行各种所描述的 实施例的原理的硬件、软件、或硬件和软件的组合来实现。本领域的技术 人员应当理解,图16中所述的功能块任选地被组合或被分离为子块以实现 各种所描述的实施例的原理。因此,本文的描述任选地支持本文所述功能 块的任何可能的组合或分离或进一步限定。

如图16所示,电子设备12800包括被配置为显示用户界面对象的显示 单元12802,其中用户界面对象具有第一激活状态和第二激活状态;被配置 为接收接触的触敏表面单元12804;被配置为检测与触敏表面单元12804的 接触的强度的一个或多个传感器单元12805;以及耦接至显示单元12802、 触敏表面单元12804以及传感器单元12805的处理单元12806。在一些实施 例中,处理单元12806包括检测单元12808、改变单元12810、生成单元 12812以及确定单元12814。

处理单元12806被配置为:(例如,用检测单元12808)检测触敏表 面单元12804上的接触;(例如,用检测单元12808)检测到触敏表面单元 12804上的接触的强度从第一强度增大到第二强度;响应于检测到强度增 大:(例如,用改变单元12810)将用户界面对象的激活状态从第一激活状 态改变成第二激活状态;并且(例如,用生成单元12812)在触敏表面单元 12804上生成M个不同的触觉输出,其中M为正整数;(例如,用检测单 元12808)检测到接触的强度从第二强度减小到第一强度;并且响应于检测 到强度减小:(例如,用改变单元12810)将用户界面对象的激活状态从第 二激活状态改变成第一激活状态;并且(例如,用生成单元12812)在触敏 表面单元12804上生成N个不同的触觉输出,其中N为正整数且N不同于 M。

在一些实施例中,将用户界面对象的激活状态从第一激活状态改变成 第二激活状态包括过渡通过介于第一激活状态和第二激活状态之间的第一 数目的中间激活状态;并且将用户界面对象的激活状态从第二激活状态改 变成第一激活状态包括过渡通过介于第二激活状态和第一激活状态之间的 第二数目的中间激活状态。

在一些实施例中,第一激活状态和第二激活状态之间的第一数目的中 间激活状态不同于第二激活状态和第一激活状态之间的第二数目的中间激 活状态。

在一些实施例中,处理单元12806被配置为:在检测到接触的强度增 大时,确定接触的强度正增大的速率(例如,用确定单元12814);根据确 定接触的强度正增大的速率保持低于预定义阈值,针对响应于检测到接触 的强度增大而发生的激活状态之间的每次过渡来生成不同的触觉输出(例 如,用生成单元12812);以及根据确定接触的强度正增大的速率超过预定 义阈值,针对响应于检测到接触的强度增大而发生的激活状态之间的相应 过渡来放弃生成至少一个不同的触觉输出(例如,用生成单元12812)。

在一些实施例中,处理单元12806被配置为:在检测到接触的强度减 小时,确定接触的强度正减小的速率(例如,用确定单元12814);根据确 定接触的强度正减小的速率保持低于预定义阈值,针对响应于检测到接触 的强度减小而发生的激活状态之间的每次过渡来生成不同的触觉输出(例 如,用生成单元12812);以及根据确定接触的强度正减小的速率超过预定 义阈值,针对响应于检测到接触的强度减小而发生的激活状态之间的相应 过渡来放弃生成至少一个不同的触觉输出(例如,用生成单元12812)。

在一些实施例中,M个不同的触觉输出对应于用户界面对象的激活状 态的改变。

在一些实施例中,N个不同的触觉输出对应于用户界面对象的激活状 态的改变。

在一些实施例中,响应于检测到强度增大而生成的至少一个触觉输出 对应于模拟物理致动器机构的向下点击的触感;并且响应于检测到强度减 小而生成的至少一个触觉输出对应于模拟物理致动器机构的松开点击的触 感。

上述信息处理方法中的操作任选地通过运行信息处理装置中的一个或 多个功能模块来实现,该信息处理装置诸如为通用处理器(例如,如以上 相对于图1A和图3所描述)或特定于应用的芯片。

以上参考图15A-图15C所述的操作任选地由图1A-图1B或图16中所 描绘的部件来实现。例如,检测操作12704、12706和12722、改变操作 12710和12726以及生成操作12712和12732任选地由事件分类器170、事 件识别器180和事件处理程序190实施。事件分类器170中的事件监视器 171检测在触敏显示器112上的接触,并且事件分配器模块174将事件信息 递送到应用程序136-1。应用程序136-1的相应的事件识别器180将事件信 息与相应的事件定义186进行对比,并且确定触敏表面上的第一位置处的 第一接触是否对应于预定义事件或子事件,诸如选择用户界面上的对象。 当检测到相应的预定义事件或子事件时,事件识别器180激活与检测到该 事件或子事件相关联的事件处理程序190。事件处理程序190任选地使用或 调用数据更新器176或对象更新器177来更新应用程序内部状态192。在一 些实施例中,事件处理程序190访问相应GUI更新器178来更新应用程序 显示的内容。类似地,本领域技术人员会清楚地知道基于在图1A-1B中所 示的部件可如何实现其他过程。

应当理解,其中上文已描述的操作的特定顺序仅仅是示例性的,并非 意图表明所述顺序是可以执行这些操作的唯一顺序。本领域的普通技术人 员会想到各种方式来对本文所述的操作进行重新排序。另外,应当指出的 是,本文独立描述的各种过程(例如,段落[0051]中列出的那些过程)可以 不同的布置方式彼此组合。例如,上文参考本文独立所述的各种过程(例 如,段落[0051]中列出的那些过程)中的任一者所描述的接触、用户界面对 象、触感、强度阈值、和/或焦点选择器任选地具有本文参考本文所述的其 他方法(例如,段落[0051]中列出的那些方法)中的一种或多种方法所描述 的接触、手势、用户界面对象、触感、强度阈值、和焦点选择器的特性中 的一个或多个特性。为简明起见,这里不具体枚举所有各种可能的组合, 但应当理解,上文所述的权利要求可以互相排斥的权利要求特征所不排除 的任何方式来组合。

为了解释的目的,前面的描述是通过参考具体实施例来进行描述的。 然而,上述示例性的讨论并非旨在是穷尽的或将各种所描述的实施例局限 于本发明所公开的精确形式。根据以上教导内容,很多修改和变型都是可 能的。选择和描述实施例是为了最佳示出各种所描述的实施例的原理及其 实际应用,从而使本领域的其他技术人员能够最佳地使用具有适合于所构 想的特定用途的各种修改的各种所描述的实施例。

去获取专利,查看全文>

相似文献

  • 专利
  • 中文文献
  • 外文文献
获取专利

客服邮箱:kefu@zhangqiaokeyan.com

京公网安备:11010802029741号 ICP备案号:京ICP备15016152号-6 六维联合信息科技 (北京) 有限公司©版权所有
  • 客服微信

  • 服务号