用于被凝视物品的信息显示的凝视交互

摘要

一种交互方法和系统，包括至少一个检测器(210)，其被配置成检测看着物品(230,232,234)的至少一个观看者(250)的凝视。处理器(130)被配置成计算凝视持续时间，诸如按所述物品中每个物品的累计的凝视持续时间，根据累计的凝视持续时间来识别看得最多的物品，以及提供与看得最多的物品有关的信息。显示设备(240)显示所述信息、所述看得最多的物品的列表、所述看得最多的物品的表示和/或与所述看得最多的物品中至少一个物品有关的音频/视觉显示。至少一个物品(290)和/或物品表示可以比起其它看得最多的物品和/或物品表示更突出地被显示。

说明书

本申请是申请日为2007年7月10日、申请号为200780028455.2、发明名称为“用于被凝视物品的信息显示的凝视交互”的发明专利申请的分案申请。

技术领域

本发明涉及一种交互解决方案，用于作为检测到正看着视场内（诸如象在交互式商店橱窗内）产品的用户的凝视（gaze）的结果，基于分析该凝视并显示例如关于看得最多的（most looked at）产品的信息，而提供系统反馈和产品信息。

背景技术

为了引起顾客兴趣和为了提供有关产品的额外信息，零售商已经部署了从大的液晶显示器(LCD)或等离子体显示器到透明投影屏幕的各种各样的显示技术。经常发现这些显示器被安装在商店橱窗中，在这里这些显示器被使用来显示带有关于该商店或其产品的通告或信息的视频剪辑、幻灯片显示。大多数当前使用的商店橱窗显示器是纯粹提供信息的非交互的屏幕。更先进的商店橱窗显示器提供了在基本层面上的与显示设备的某些交互性，这里用户可以按压在显示设备上或在其附近的按钮以便激活某功能性，诸如进到下一页或回到前一页。

更有吸引力的商店橱窗可以通过使商店橱窗后陈列的实际产品与将显示关于用户感兴趣的产品的信息的商店橱窗显示器相结合来实现。这样的商店橱窗显示系统可以通过使用凝视跟踪或指点手势检测而推断出用户的兴趣，如在2005年8月4日提交的、标题为“Apparatus for Monitoring a Person Having an Interest to an Object, and Method Thereof ”的欧洲专利申请序列号05107205.6(代理人案号No.002232)中描述的，该专利申请整体地在此引入以供参考。在这样的交互式商店橱窗中，用户可以观看或指点实际产品。观看/凝视和/或指点可被商店橱窗检测到，响应于此，商店橱窗在显示器上显示有关该产品的信息。这样的商店橱窗是有利的，因为它使得观看者能够实际地看见真实的实际产品并同时得到附加的(例如，数字)信息，包括在显示设备上提供的/建议的各种交互服务。

除了检测单个观看者的凝视以外，还可以检测多个凝视和面孔。使用一个凝视跟踪器同时进行多个用户的凝视跟踪可以是基于通过使用启发式规则把检测到的瞳孔候选者分组成‘面孔对’，正如在C.Morimoto、D.Koons、A.Amir和M.Flickner的标题为 “Real-Time Detection of Eyes and Faces”的文章（ in Proc. Wkshp. Percept. User Interfaces, pages 117-120, 1998）中描述的，该文章整体地在此引入以供参考。在授权给Edwards的、标题为“Techniques for Facilitating Use of Eye Tracking Data”的美国专利No.7,029,121中，描述了另外的眼睛跟踪系统，其例如由网页设计者或广告者使用来聚合多个用户的眼睛跟踪数据以确定趋势，该专利被整体地在此引入以供参考。在这样的系统中，聚合可以通过求和或平均数据、以及使用划分和统计分析而完成。

发明内容

本发明人认识到，例如对于建立一种在其中利用凝视进行产品选择的商店橱窗，存在某些没有很好地解决的状况。具体地，希望提供一种交互系统和方法，它更好地对来自观看者的凝视跟踪输入进行反应和更好地对以下状况进行反应，即：一个以上的用户或观看者与商店橱窗进行交互、或与在一个或多个观看者的视场内的物体——诸如在博物馆内的艺术品等等——的任何其它显示进行交互。用于商店橱窗情景或类似情景的其中一个直截了当的方法例如是在显示设备上展示最后被看着的产品，所述显示设备包括在其上显示或投影图像的商店橱窗显示器。然而，这个解决方案不是理想的，因为凝视不是用来明确地选择东西的适当的模态（modality）。

为了举例说明，想象用户是在商店橱窗(或诸如博物馆中艺术品等等之类的实际产品的任何其它安排)前面，并只是扫视不同的产品，以得到所显示的东西的总貌。作为响应，交互系统对观看者的凝视作出反应，并在商店橱窗显示器或任何其它显示设备上展示最后被看着的产品。当用户/观看者了解在他的凝视与系统反应之间的联系时，该用户他将需要盯视他感兴趣的产品，以便在显示设备上得到关于该产品的附加信息。这样的选择方式——即为了得到附加信息而连续地盯着看——是不自然的。

而且，这样的系统在多个观看者观看/凝视或指点产品的情形下没有很好地反应。也就是，在多个用户的情形下，系统应当对哪个用户的凝视作出反应或系统对多个用户凝视应当如何反应？在使用指点手势进行选择的情形下，当多个人同时地指点几个不同的产品时出现类似的问题。

因此，需要一种更好的交互系统，用于根据单个或多个观看者凝视或指点一个或多个产品而提供更好的产品选择和信息。

本系统和方法的一个目的是克服传统的交互系统的缺点。

这个和其它目的是通过如下的系统和方法而达到的，该系统和方法把凝视持续时间作为用户的兴趣的指示来对待，然后它被使用来识别和突显与那个用户最相关的产品，包括在显示设备上显示产品表示，诸如图标和/或缩略图，连同与所识别的产品有关的信息，诸如幻灯片显示、视频剪辑和用来访问附加信息的链接，附加信息是诸如象产品说明书和相关的产品。

按照一个说明性的实施例，一种交互方法和系统包括：检测器，被配置成检测看着物品的至少一个观看者的凝视；以及处理器，被配置成计算凝视持续时间，诸如所述物品中按每个物品的累计的凝视持续时间，根据累计的凝视持续时间来识别被看得最多的物品，以及提供与该看得最多的物品有关的信息。显示设备可被提供来显示以下的至少一项：所述信息、看得最多的物品的列表、看得最多的物品的表示和与该看得最多的物品中的至少一个物品有关的音频和视觉显示中的至少一个。至少一个物品和/或物品表示可以比其它的看得最多的物品和/或物品表示更突出地被显示。

按照另一说明性的实施例，一种交互系统，包括：检测器，被配置成检测看着物品的至少一个观看者的凝视；以及处理器，被配置成计算所述物品的按每个物品的累计的凝视持续时间，根据所述累计的凝视持续时间来识别看得最多的物品，以及显示器，适合于在显示设备上显示该看得最多的物品，和启动与所述看得最多的物品中的至少一个物品有关的音频和视觉显示中的至少一个。

按照又一说明性的实施例，一种交互方法，包括以下动作：检测对于在至少一个用户的视场内的产品的、在预定义的时间段内的凝视时间；识别看得最多的产品；以及在显示设备上显示该看得最多的产品；以及启动与所述看得最多的产品中的至少一个产品有关的音频和视觉显示中的至少一个。

按照再一说明性的实施例，一种交互方法，包括以下步骤：跟踪观看多个产品的至少一个观看者的凝视的凝视持续时间；按照所述凝视持续时间排列所述多个产品；按照所述排列动作确定所述至少一个观看者的感兴趣的产品；以及按照相应于所述感兴趣的产品的所述凝视持续时间，显示以下至少一项：所述感兴趣产品、所述感兴趣产品的表示和所述感兴趣产品的列表，该列表包括预定数目的看得最多的产品；以及按照所述排列动作突显所述感兴趣的产品中的至少一个产品。

该系统和方法更好地适合于使用对于单个和多个用户都起作用的凝视交互。按每个用户/观看者来检测对于所有产品的在预定义时间帧内的凝视持续时间或凝视时间，然后识别对于所有用户和/或对于每个单独用户的被看得最多的物品。按每个用户来检测和分析与每个产品有关的凝视时间，其中计算出与每个或任何数目的产品和/或用户相关联的平均和/或累计的凝视时间，并进行排列。产品按照凝视时间进行排列，并识别出在排列的产品中的最相关的一个或多个产品。

使用看得最多的产品作为交互式凝视系统的观看者或用户的最感兴趣的指示，对于系统反应使用了不同的策略。一个策略包括识别看得最多的产品，然后在显示设备上——诸如在商店橱窗显示器上——展示它们，放大它们的相应的缩略图和/或图标，和/或启动与这些看得最多的产品中一个或多个产品有关的幻灯片显示。与看得最多的产品之外的一个或多个产品有关的幻灯片显示和/或视频剪辑可以同时地以平铺的缩略图来展示，当相关的幻灯片显示和/或视频剪辑不是正被展示时，这些缩略图展示产品图像的减小尺寸的版本。

另一个策略包括显示按照相应于每个用户的产品平均凝视时间进行分类的产品缩略图，其可以与被突出地且/或在显示设备的期望区域——诸如在显示设备的中心——显示的看得最多的产品相组合。

从下文提供的详细说明中，本系统和方法的另外的可应用范围将变得明显。应当理解，虽然详细的说明和具体的例子表明本系统和方法的示例性实施例，但它们打算仅仅用于说明的目的而不打算用来限制本发明的范围。

附图说明

从以下的说明、所附权利要求和附图中，将更好地了解本发明的设备、系统和方法的这些和其它特征、方面和优点，其中：

图1显示按照本发明的一个说明性实施例的交互系统的框图；

图2显示按照本发明的另一个说明性实施例的商店交互系统；以及

图3显示按照本发明的再一个说明性实施例的交互方法。

具体实施方式

对某些示例性实施例的以下说明实质上仅仅是示例性的，以及决不打算用来限制本发明、它的应用或使用。在本系统和方法的实施例的以下详细说明中，参考于形成本发明的一部分的附图，以及在附图中为了举例说明而显示了特定的实施例，在这些特定实施例中可以实行所描述的系统和方法。这些实施例以足够的细节被描述，以使得本领域技术人员能够实行现在所公开的系统，应当理解，可以利用其它的实施例，以及可能作出结构上和逻辑上的改变，而不背离本发明的精神和范围。

所以，以下的详细说明不是在限制意义上作出的，本系统的范围仅仅由所附权利要求来定义。图上的参考标号的前导数字在这里典型地对应于图号，例外的情况是：在多个图上出现的相同的部件用相同的参考标号来标识。而且，为了清晰起见，熟知的设备、电路和方法的详细说明被省略，以免遮蔽对本系统的说明。

凝视是指示用户的兴趣的一种自然模态。然而，诸如对于凝视目标的选择，希望不依赖于凝视作为明显输入的方式，因为人们发现很难为了选择目标而盯视目标。

图1显示一种更好的交互系统100，它基于使用凝视检测器（诸如至少一个照相机110）来检测凝视，从该凝视来推断或确定用户的注意力的焦点，以及基于在系统用户或产品观看者的视场内的各种产品的预定的图，诸如经由处理器或控制器130而确定被看着的产品。预定的图可被存储在能够存储该图和其它数据的任何存储设备或存储器120中。

处理器130还被配置成诸如在根据被存储在存储器120中的程序执行指令后，执行想要的动作，该存储器例如还存储用于系统运行的其它数据，诸如操作系统等等。

根据被一个或多个观看者所看着的产品的推断或确定和各自的凝视持续时间——包括按每个产品按每个用户的累计的和/或平均的凝视持续时间，可以在处理器130的控制下执行各种动作，包括：监视和收集数据，包括按每个产品和/或按每个用户的凝视持续时间；分析数据，包括计算按每个产品和/或按每个用户的平均的和/或累计的凝视持续时间；以及根据分析的和/或计算出的数据，提供想要的输出，诸如在显示设备140上显示信息，包括到其它信息的链接，和/或经由高亮器（highlighter）150突显被识别的并被排列为对于每个用户或用户组而言最感兴趣的产品的实际产品。显示设备140例如可以是商店橱窗显示器240，如在图2的商店交互系统200中显示的。

图2还显示了商店橱窗205，它包括各种产品230、232、234和至少一个照相机，其中示出了两个照相机210、212，它们形成图1所示的凝视检测器110的一部分。商店橱窗显示器240例如可被嵌入在透明的商店橱窗205中，或者可以是在商店橱窗205之内或在其上、或在商店橱窗205的外表面或内表面上的分开的显示器。例如，可以使用投影在透明的屏幕——诸如透明的商店橱窗205——上的背投显示器或正面投影显示器，诸如从丹麦的DNP，Dai Nippon Print Co. Ltd.的世界范围屏幕生产中心可得到的Holo Screen^TM。从Displax^TM可得到具有显示能力的其它的透明材料——交互窗口，其中内容被投影在透明的材料——诸如玻璃上、并且通过触摸在其上用户的手指被跟踪的玻璃而被控制。当然，可以使用能够显示信息的任何类型的显示设备，诸如阴极射线管(CRT)、等离子体、液晶显示器(LCD)或投影显示器。图2还显示了交互系统200的观看者或用户250，他正看着各种产品230、232、234和/或在商店橱窗显示器240上显示的信息。

在商店橱窗显示器240上所显示的信息可以涉及到最相关的产品，它(们)是从凝视——诸如从朝每个产品凝视的持续时间而被确定的。与特定的产品相关联的各种凝视间隔或持续时间，包括在不同的不连续的时间间隔内的凝视，可被相加以形成对于每个特定的产品的累计的凝视持续时间。累计的凝视持续时间可以在任何想要的间隔期间被确定或被累加，其中所述想要的间隔可以是预定的、可变的和/或可编程的。

图3显示按照一个实施例的交互方法300，其中，如方块310所示，检测一个或多个观看者的凝视。为了清晰起见，将描述使用单个观看者的例子，但本领域技术人员将会明白，多个用户的凝视可被跟踪，以确定对于不同观看者的感兴趣的产品。

凝视持续时间，诸如在想要的间隔期间凝视的累计的持续时间，被使用来指示或确定观看者(和/或多个观看者)对于被凝视的各种产品的感兴趣的程度，如方块320所示，其中用户的兴趣是从由图1的处理器130提供的或可访问的数据推断的。

在视场内且被观看者凝视的产品可以按照相应产品的、它们的相应凝视持续时间被排列。例如，产品可以被从具有最大累计凝视持续时间的最相关的产品到具有最小累计凝视持续时间的最不相关的产品排列。当然，可以使用任何其它的排列，包括提供不同的权重给一个或多个产品，诸如根据在不同的产品之间的关系，其中相关的产品可以编组在一起，并与一个组权重相关联，其中组本身被排列和被加权，并且被进一步划分成子组，子组也可以被排列和被加权，以确定用于信息显示和/或突显的各种不同的排序的产品组。

例如，表1显示各种产品的凝视持续时间，包括与它们的相关联加权的持续时间有关的产品组和产品子组。  

表1。

如表1所示，照相机1在预定的时间期间（诸如象2分钟）具有累加的最高累计凝视持续时间——44个时间单位，诸如秒或任何其它单位。当然，预定的时间可以是任何想要的时间，例如可编程的时间，诸如代替2分钟是10分钟，1小时等等。

在表1所示的例子中，在可选择的或可编程的预定时间段（诸如象2分钟）期间，观看者凝视组1中的产品达46秒，而凝视组2中的产品达23秒，这约为凝视组1的时间量的一半，因此导致组1的为2的权重和组2的为1的权重。在表1上的加权产品持续时间列，显示照相机1的为29的凝视持续时间被乘以组1的为2的权重，导致为58的加权的照相机1凝视持续时间。

在表1所示的说明性排列方案中，与组有关的信息可以例如根据它们的累计凝视持续时间被排列和/或被显示在显示设备140上。因此，具有46秒的组累计凝视持续时间的组1首先被显示，然后显示或列出具有23秒的组累计凝视持续时间的组2。在每个组内，产品可以以它们的凝视持续时间的次序被排列和/或被显示。因此，照相机2被第二个显示，尽管它具有4秒的累计凝视持续时间，这个时间小于其它产品的累计凝视持续时间，诸如具有5秒的存储器1和具有7秒的衬衫1。

子组也可以被排列，其中子组“照相机”在组1内(相比于存储器子组的7秒和电池子组的4秒)具有35秒的最大子组累计凝视持续时间。因此，子组“照相机”被更高地排列，且具有4秒的累计凝视持续时间的照相机2在存储器1之前被显示，尽管存储器1具有更大的5秒的累计凝视持续时间。

任何其它方案可被使用来根据用户凝视产品的持续时间(可以是累计的或非累计的)而进行排列、列表和确定用户最相关的产品，包括根据在表1的最后一列中显示的加权的子组持续时间进行排列，其中子组“照相机”的35秒被乘以2(组1权重)，以得到70秒的加权的子组“照相机”值。本领域技术人员鉴于本公开内容可以确定各种排列方案，包括指配各种不同的权重给各种产品或产品组。例如，如果与组2(具有比组1低的组权重)中的产品1相关联的累计凝视持续时间大得多，例如，长于或大于预定阈值(预定阈值可以是绝对的或相对于其它产品的其它累计凝视持续时间的)，则组2中的产品1可以被更高地排列，并被确定为用户最相关或更相关的，而不管它具有比例如组1中的其它加权产品凝视持续时间更低的加权产品凝视持续时间(因为组2具有比组1低的组权重)。

同样地，如果与产品X相关联的单个非累计的凝视持续时间大于绝对的或相对的预定阈值，则这个产品X可以被更高地排列，并被确定为用户最相关的，而不管由于与这个产品X相关联的组的较低权重而导致根据加权的凝视持续时间产品X被低于其它产品地排列。

可显示被确定为观看者相关的各种信息，诸如涉及到被凝视的产品和它们的基于平均的和/或累计的凝视持续时间的排列。例如，在观看会话期间，观看者可以凝视包括产品1在内的不同的产品，然后在凝视其它产品之后回过来凝视产品1。在有预定的持续时间(诸如象2分钟)的整个观看会话期间，在各个不连续的时间段看着产品1的凝视持续时间被求和，以得到对于产品1的累计的凝视持续时间。这个累计的凝视持续时间可以在预定的时间段上被规格化或被平均，诸如象通过把累计的凝视持续时间除以预定的时间段。

一旦观看者最感兴趣的或最相关的产品根据凝视持续时间——诸如加权的、平均的和/或累计的凝视持续时间——而被确定和被排列，就显示产品有关的信息。关于任何数目的最相关的产品的信息可被提供，或这样的产品——例如排列在头五个的产品——被突显。

对于显示关于用户最相关的产品或产品组的信息，可以使用不同的策略，如在图2的方块330显示的。具体地，以下任何一个或多个策略可被使用来在显示设备140上显示各种信息：

1. 启动和显示与一个或多个看得最多的产品有关的幻灯片显示或视频剪辑；例如，具有最大的单个和/或累计的凝视持续时间的产品。  

2. 在例如感兴趣的头五个产品的显示中，放大看得最多的产品(具有最大的单个或累计的凝视持续时间)；和/或

3. 在图2所示的例如感兴趣的头五个产品的列表或表示260(诸如图标或缩略图)的显示中，放大看得最多的表示，其中缩略图包括产品的缩小版本和图片、或比图标更具体的产品类型，诸如象Philips^TM DVD播放器/记录器或它们的图片。

当然，代替于在显示设备上显示相关的产品或其表示，可以由图1所示的高亮器150来突显相关的产品，诸如象通过用不同的灯光来照亮相关的产品。在2006年5月31日提交的、标题为“Mirror Feedback on Physical Object Selection”的欧洲专利申请序列号06114760.9中描述了这样的突显系统，其中在商店橱窗中的实际产品例如通过灯光照明而被突显，而所述的灯光照明使用可控制的光源——诸如发光二极管(LED)、聚光灯和位于每个产品后面的可开关的反射镜——来提供具有想要的属性的光，所述属性诸如是强度、颜色、色饱和度、色温、波束宽度、光点尺寸和/或方向，该专利申请整体地在此引入以供参考。

也可以通过使用在其上放置产品的发光垫子、或通过使用位于产品周围（诸如在产品的底部和/或产品的外围）的带状物来提供突显，其中所述的垫子和/或带状物例如通过接通被嵌入在其中的光源而发光，如在2006年6月7日提交的、标题为“Light Feedback on Physical Object Selection”的欧洲专利申请序列号06115086.8中所描述的，该专利申请整体地在此引入以供参考。当实际产品被突显时，发光的强度可以涉及到相关联的(累计的和/或平均的)凝视时间。因此，凝视时间越大，被凝视的产品的突显就越亮，这是通过增加那些提供产品突显的光源——诸如照亮产品的聚光灯和/或照亮产品周围或附近的垫子和/或带状物的光源——的强度而达到的。

在图2所示的商店橱窗系统200的说明性例子的上下文中，凝视检测器110(图1)被配置成并行地检测多个用户的凝视，并可以在变化的灯光条件下运行，诸如图2的具有一个或多个照相机210、212的系统，典型地，可以使用两个或三个照相机用于头部、眼睑和凝视跟踪，或其它凝视跟踪系统，诸如从基地在瑞典的Smart Eye AB可得到的一种系统，其中单个照相机系统具有例如用于检测驾驶员的睡意的抗睡眠应用，其中也可以使用多个照相机。

照相机连同IR闪光照明器和滤光器一起工作，它们被调谐到具有最小的室外光干扰的频率，用于在各种照明条件下鲁棒地运行。这样的凝视系统跟踪面部特征，并把它们匹配于三维(3D)头部模型，以便估计头部的3D位置和取向。观看者250的虹膜和瞳孔以及眼睑然后被检测和定位，以确定观看者的凝视方向。

还可以使用其它凝视检测系统，诸如象被称为faceLAB^TM的那些系统，它们是从Seeing Machines of Australia可得到的。在授予Durnell的、标题为“Eye Tracking Systems”的美国专利申请公布号No.2004/0196433中描述了确定用户的凝视视线的另外的眼睛跟踪系统，该专利申请整体地在此引入以供参考。在再一个系统中，使用眼睛跟踪来提供控制信号，诸如用于控制图像和其它设备，以及可以通过导引信号而被使用，如在授权给Maguire, Jr.的、标题为“Method and Apparatus for Eye Tracking”的美国专利No.6,359,601中描述的，该专利整体地在此引入以供参考。

凝视检测系统100检测对于与陈列的产品相关联的每个区域的凝视出现的平均次数，诸如平均凝视时间。为了平滑快速凝视改变，可以使用滑窗平均。通过使用这样的处理，得到对于每个陈列的产品的在规定的时间帧内（诸如象刚刚过去的2分钟）的平均凝视时间。

为了推断注意力的焦点，识别出被一个或多个用户看得最多的产品。最大平均凝视时间对应于最受欢迎的产品。也可以使用其它分类方法，例如，具有k=2的k-均值聚类（k-mean clustering），以便把对于所有产品的平均凝视时间分类成两个聚类，“最受欢迎的”和“最不受欢迎的”。而且，可以根据一个或多个观看者的凝视持续时间，给予各种产品以各种不同的权重。例如，为了把更高的权重指配给被一个以上的用户看着的产品，渐进的权重>1.0可被指配给凝视时间平均值。

一旦凝视平均值被检测和被分析，图1的交互系统100，诸如图2的商店橱窗系统200，可以部署一个或多个策略，用于例如在商店橱窗显示器240或任何其它显示设备上显示相关的信息，所述其它显示设备诸如是象蜂窝电话和/或个人数字助理(PDA)那样的移动设备的显示器。

正如所描述的，一个策略可以是放大被识别为“最受欢迎的”产品的缩略图260，并使得对应于“最不受欢迎的”产品的缩略图成为相对较小的。结果，该系统可以适配产品项的视觉表示，诸如幻灯片显示、流播的视频显示或视频剪辑，以使得用户250更容易找到和选择，诸如通过使用例如目标选择和获取系统来点击被用户最多地看着的并且在商店橱窗系统200上显示的产品图像，所述目标选择和获取系统是如在McGuffin, M.和Balakrishnan, R.的标题为 “Acquisition of Expanding Targets”的文章中（Proc CHI 2002, ACM, 57-64）描述的，该文章整体地在此引入以供参考。替换地，图像亮度、不透明度和/或色彩可被改变，以使得产品缩略图在显示设备上更明显，该缩略图可以附加地或替换地在显示设备上被突显。

另一个信息输送策略包括自动启动被识别为 “最受欢迎的”产品的幻灯片显示或流播的视频剪辑。用户然后可被提供以控制——诸如是连同该显示一起的、在显示设备240上显示的软件按钮或按键270(图2)——以便控制该显示，诸如暂停幻灯片显示、访问和查阅感兴趣的产品页。指点设备也可以被使用来控制所显示的物品，这是熟知的，诸如在例如可被提供在商店橱窗205上的触摸屏上或具有电容性触摸检测器的屏幕上使用指针或手指，所述触摸屏诸如是在2002年7月17日公布的、授予Porter等人的、标题为“Touch Sensitive Display Screen”的英国专利申请号GB 2 367 991中所描述的触摸屏，该专利申请整体地在此引入以供参考。也可以使用图1所示的其它输入/输出设备160，诸如鼠标、跟踪球、键盘，其可以包括在触摸屏上显示的软键等等。

再一个策略包括根据特定用户看着各种产品或物品的凝视持续时间，提供按用户排序或排列的物品“受欢迎性”的总貌。当然，在这个策略中，处理器130保持每个用户的凝视及其持续时间的记录。如果新的用户到达，则系统将根据本领域熟知的面部识别相似性测度把他们分类为新的用户。

如果由于某个用户走到照相机视场以外而引起对于该用户的凝视跟踪被中断，且稍后同一个用户返回到照相机的视场，则对该同一个用户的跟踪重新开始，其中该系统根据相似性测度而将该用户识别并分类为“老的”用户，相似性测度是通过比较该返回的用户的特征与新近用户的数据库而被确定的。

在一个策略中，该系统在商店橱窗显示器200上显示被每个用户250看着的所有物品的排序列表252(图2)。按照用户的凝视记录，把物品根据它们的“受欢迎性”进行排序。用户然后可以点击在商店橱窗显示器240或任何其它显示设备上显示的物品的缩略图260，以便打开或访问关于所选择的/被点击的物品的信息。当然，代替于仅仅提供附加信息的列表252或链接254，可以响应于根据凝视持续时间检测到或确定了用户感兴趣的产品，而自动地把比如象由系统管理者预先确定的信息呈现给用户。该系统还可以被配置成在显示设备的任何地方，诸如在商店橱窗显示器的中心处，默认地显示关于与一个或多个用户相关联的最“受欢迎的”物品260的信息。

为了使产品的呈现更有吸引力并造成有机地改变商店橱窗显示的印象，可以使用专门的效果，诸如用于产品图像改变的淡入和/或淡出效果。在凝视检测与响应于该凝视检测而适配或改变在商店橱窗显示器上的信息之间可以引入延迟，因为自然地用户最可能首先看着产品并仅仅过一会儿看一下显示器。另一个实施例包括一检测到对商店橱窗的凝视，或甚至预见到凝视，诸如检测到用户沿商店橱窗的方向移动他或她的凝视，就触发在商店橱窗显示器上的信息改变或适配。快速信息显示将使得系统的响应性对于用户是更明显的，以及用作为注意力抓取器（grabber），从而劝诱用户看着或保持看着商店橱窗，以及与商店橱窗交互系统进行交互。

除了凝视作为输入模态以外，也有可能使用自发的指点手势，和/或触摸可以具有电容性触摸检测器的商店橱窗，以便得出用户的兴趣集中点，如在上面讨论的、在2005年8月4日提交的、标题为“Apparatus for Monitoring a Person Having an Interest to an Object, and Method Thereof ”的欧洲专利申请序列号05107205.6中描述的。

替换地或附加地，可以使用姿态取向来确定用户现在留意商店橱窗的哪个部分。姿态取向可以通过能够检测脚取向的传感垫子295而被检测，其中传感垫子295被整合到在商店橱窗前面的路面中。这样的垫子可包括传感器，它检测踩在其上的脚或鞋的取向并提供取向信息给处理器130。而且，可以用计算机视觉技术检测头部取向，以便检测凝视的方向，以及突显产品或显示与在凝视方向上的产品有关的信息。再一个实施例可以使用用户沿商店橱窗的分布来检测哪些产品组当前正被看着。例如，如果经由照相机210、212例如在商店橱窗的右侧检测到比起其它部分更多的用户，则在右侧的产品被确定为感兴趣的、并且如描述的那样被处理，诸如突显这样的产品或显示相关的信息。

应当明白，所述交互系统和方法可以在许多情形下应用，诸如博物馆、展览会，以及总地来说用于如下的应用，即其中使用实际产品与电子显示器的组合。

因此，除了在商店橱窗后的产品以外，所述交互系统和方法同样可应用于大型产品，其中产品的特定部分可以通过凝视被“选择”。例如，在商店橱窗中展示的自行车可以包含电机、齿轮、锁、坐椅等等。通过使用所描述的方法，用户看得最多的自行车的特定部件可被识别出来，并随后显示例如关于在商店橱窗上被显示的那些部件的信息。

当然，正如通信领域技术人员鉴于本说明书将会清楚的，在用于通信的系统部件中可包括各种单元，诸如发射机、接收机或收发信机、天线、调制器、解调器、变换器、双工器、滤波器、复用器等等。在各种系统部件之间的通信或链路可以是通过任何手段，诸如象有线的或无线的。所述系统单元可以是分开的，或诸如与处理器集成在一起。

正如熟知的，处理器130执行例如被存储在存储器120中的指令，该存储器也可以存储其它数据，诸如与系统交互有关的预定的或可编程的设置值、阈值、预定的会话间隔、用于显示产品信息和用于被使用于突显产品的灯光属性的设置值等等。

在显示设备上显示的信息可包括与看得最多的产品有关的产品，或任何其它信息——诸如广告、促销材料以及产品，正如由第三方或不同的源(诸如商店店主、系统管理者、广告者等等)确定的。可以使用任何信息源，不管是本地存储的还是远端存储的，和/或通过网络(诸如互联网)例如经由产品制造商的网址等可访问的、推送的和/或拉取的。

应当明白，所述交互系统的各种部件可以操作地通过任何类型的链路(例如包括有线或无线链路)互相耦合。也可以提供各种修改，正如本领域技术人员鉴于这里的描述而意识到的。存储器可以是任何类型的、用于存储应用数据以及其它数据的设备。应用数据和其它数据由控制器或处理器接收，以配置它来执行按照本系统和方法的操作动作。

本方法的操作动作特别适合于由计算机软件程序来实行，这样的计算机软件程序优选地包含相应于本方法的各个步骤或动作的模块。这样的软件当然可以包含在计算机可读的介质——诸如集成芯片中，包含在外围设备或存储器——诸如所述的存储器或被耦合到控制器或光模块的处理器的其它存储器中。

计算机可读的介质和/或存储器可以是任何可记录的介质(例如，RAM、ROM、可拆卸式存储器、CD-ROM、硬驱动、DVD、软盘或存储卡)，或者可以是传输介质(例如，包括光纤的网络、万维网、电缆和/或使用例如时分多址、码分多址、或其它无线通信系统的无线信道)。任何已知的或被开发的、可以存储适合于计算机系统使用的信息的介质可被用作为所述计算机可读的介质和/或存储器120。

也可以使用附加的存储器。计算机可读的介质、存储器120和/或任何其它存储器可以是长期的、短期的或长期和短期存储器的组合。这些存储器配置处理器/控制器130，以实施这里公开的方法、操作动作和功能。存储器可以是分布式的或是本地的，以及在可以提供附加处理器的场合下，处理器可以是分布式的或是单数的。存储器可被实施为电的、磁的或光的存储器，或者这些或其它类型的存储设备的任何组合。而且，术语“存储器”应当被足够广义地解释为包括能够从处理器访问的可寻址空间中的地址被读出或被写入到该地址的任何信息。通过这个定义，举例来说，在网络上的信息仍然在存储器内，因为处理器可以从网络检索该信息。

处理器130和存储器120可以是任何类型的处理器/控制器和存储器，诸如在U.S. 2003/0057887中描述的那些，该专利申请整体地在此引入以供参考。该处理器可能能够响应于检测到用户的凝视而执行操作，且执行被存储在存储器中的指令。该处理器可以是专用或通用集成电路。而且，该处理器可以是用于按照本系统执行的专用处理器，或可以是通用处理器，其中许多功能中的仅仅一个功能运行，以便按照本系统执行。该处理器可以通过利用程序部分、多个程序分段而运行，或者可以是利用专用或多用集成电路的硬件设备。以上的被利用来识别用户的存在和身份的每个系统可以结合另外的系统一起被利用。

当然，应当意识到，以上的任何一个实施例或处理过程可以与一个或多个其它实施例或处理过程相组合，以便在发现和匹配用户与特定的个性化、以及提供相关的推荐方面提供更进一步的改进。

最后，以上的讨论仅仅打算用来举例说明本系统，而不应当被解释为把所附权利要求限制于任何特定的实施例或实施例组。因此，虽然本系统是参照其特定的示例性实施例以特定的细节描述的，但还应当意识到，本领域普通技术人员可以设计出许多修改和替换的实施例，而不背离在后面的权利要求中阐述的、本系统的较广义的和预定的实质和范围。本说明书和附图因此要以一种说明性方式来看待，而不打算限制所附权利要求的范围。

在解译所附的权利要求时，应当明白：

a) 单词“包括”不排除与在给定的权利要求中列出的那些不同的其它单元或动作的存在；

b) 在单元前面的单词“一”或“一个”不排除多个这样的单元的存在；

c) 在权利要求中的任何参考标号不限制它们的范围；

d) 几个“装置”可以由相同的或不同的项或硬件或软件所实施的结构或功能来代表；

e)所公开的任何单元可以由硬件部分(例如，包括分立的和集成的电子电路)、软件部分(例如，计算机编程)和它们的任何组合组成；

f) 硬件部分可以由模拟与数字部分之一或二者组成；

g) 所公开的任何设备或其部分可被组合在一起或被分开成另外的部分，除非另外明确地阐述；以及

h) 不打算需要动作或步骤的特定的顺序，除非明确地指出。