用于在移动设备和屏幕之间进行交互的方法和装置

摘要

本发明涉及用于在移动设备和屏幕之间进行交互的方法和装置。一种用于在移动设备和屏幕之间进行交互的方法，所述方法包括：通过用户的移动电话选择一个NFC标签；将所述选择传送到所述服务器，所述应用服务在所述服务器上运行；响应于所述选择、控制所述屏幕上的所述显示以致在所述屏幕上显示一个图形用户界面提供给用户来选择一个输入；从所述移动设备的姿势检测模块接收数据，响应用户移动他的移动设备产生该数据并由所述姿势检测模块感测该数据，接着将该数据作为所述图形用户界面的输入进行处理，从而允许由所述用户对所述输入进行选择。

说明书

技术领域

本发明涉及一种用于在移动设备和屏幕之间进行交互的方法和设备。

特别地，其涉及提供一个用户界面，用于结合使用基于NFC标签的静态和动态海报，允许在移动通信终端之间进行交互。

背景技术

多标签(MULTITAG)是兰卡斯特大学和NTT DOCOMO公司的联合开发项目。它包含一个具有NFC(近场通信(near-field communication))标签阵列的屏幕，NFC标签能与具有NFC读取器的移动电话交互。在图1A中示意性地说明这样的一个屏幕，其中人们能看到屏幕100具有nXm的NFC标签110的网格，其接着能与具有NFC读取器的移动电话交互。

在一个应用中，接着在屏幕上显示图像，并且，通过将移动电话向相应的定位在选择的选项所显示的位置上的标签移近，能够接着通过NFC交互来选择与输入的选择相对应的图像部分。例如，可以显示一个城市的地图，在有餐馆的位置，可以在地图上显示一些指示器。对关于某一位置的餐馆的更多信息感兴趣的用户可以将他的移动电话向指示该餐馆位置的指示器移近。经过移动电话和位于指示器后面的NFC标签之间的交互，可以触发该应用改变屏幕上的显示，从而显示关于选择的餐馆的附加信息。

换句话说，多标签系统通过移动电话和用NFC网格标记的屏幕之间进行的NFC交互来实现选择。因此，屏幕能够是动态的，这意味着显示在屏幕上的图像依赖于交互可以改变，结果是在应用的上下文中的某一标签中的信息含义也可以改变。一个标签开始可以表示选择某个餐馆，同时，同一标签在接下来的步骤(显示已经改变之后)可以表示选择其它的信息，比如先前的步骤所选择的餐馆的“营业时间”或“菜单”。

因此，使用多标签技术与带有静态或动态显示的移动电话进行交互可能经常涉及在几个选项之间进行选择，比如，在地图上选择一个希望得到其更多信息的餐馆。这样的选择可能是存在问题的，特别是在几个选项(例如多个餐馆)显示在一个标记上面，因而单独用多标签标记不能进行选择的情况下，因为选项的粒度(granularity)高于NFC网格的粒度。在图1B中说明了这种情况。左手边能看见一个屏幕，左半部分示意性地示出一幅地图(这里是慕尼黑城市的地图)被显示在NFC元素网格上面，NFC元素网格可以在没有显示地图的屏幕的右半部分更清楚的看见。实际过程中，地图将显示在整个屏幕上，地图没有显示在右手边仅仅是为了解释NFC网格。现在可能经常发生几个标记(在例子中，这些标记指示兴趣点，如餐馆)显示在同一物理NFC标签上。如图1B所示，右手边说明了左手边屏幕的一个放大部分，有两个标记落在一个NFC标签的区域。这使得不可能依靠NFC交互用电话选择一个特定的标记。

为了解决这个问题，可以想象以下可能的方案。

1、在电话上显示一选项列表，通过在电话上从头到尾滚动这个列表进行选择

2、改变主显示，为每个选项关联一个数字，让用户通过按压电话上相应的键来挑选一个选项

3、或者在主显示上或者在电话上一次显示或加亮一个选项，使用电话上的一个键从头到尾循环选项。

4、改变显示，展现一选项列表，使用多标签技术用电话在主显示上选择一个选项。

所有这些可能的解决方案需要用户使用电话的键盘来执行选择。在用户已经和一个(大)屏幕进行了交互的应用中，键盘交互是不利的，因为这需要用户将他的注意力从大屏幕转移到移动电话的微小屏幕。上面的方案2和3遮蔽了一部分显示，也需要用户在电话显示和主显示之间分散注意力。

而且，与通过NFC进行交.互相比较，键盘交互很不直观。

上面的方案4遮蔽了部分显示，可能让用户迷惑，因为主显示上的同一物理区域用于不同的目的。由于大的标签尺寸，还需要使用大部分主显示。

因此，希望为用户提供一个界面，不必注意移动电话的微小键盘就能容易进行选择。而且，希望界面能够提供一个比使用手机键盘更加直观和容易的方式与应用进行交互以进行选择。

发明内容

根据一个实施例，提供一种用于在移动设备和屏幕之间进行交互的方法，屏幕具有多个包含数据的NFC标签，通过使用所述移动设备的NFC读取器模块读取标签，标签中的数据能够被所述移动设备读取，其中，作为应用服务的一部分的图像显示在所述屏幕上，以致屏幕的一个或多个标签对应于对相应的输入或选择的指示，用户在使用所述应用服务时可以通过移动电话选定这些输入或选择，其中，显示在所述屏幕上的所述图像由服务器控制，所述应用服务在服务器上运行，通过网络链接将所述服务器连接到所述用户的所述移动电话，所述方法包括：

通过用户的移动电话选择一个NFC标签；

将所述选择传送到所述服务器，所述应用服务在所述服务器上运行；

响应于所述选择，控制所述屏幕上的所述显示从而在所述屏幕上显示图形用户界面，该图形用户界面允许用户选择输入；

从所述移动设备的姿势检测模块接收数据，该数据响应于用户移动他的移动设备而产生，并由所述姿势检测模块感测，接着作为所述图形用户界面的输入而被处理，从而允许由所述用户对所述输入进行选择。

这样，能够提供给用户一个简单、直观的界面用于进行选择，避免了像用两个不同的屏幕交互或将用户的关注点转移到移动电话的微小屏幕的缺点。

姿势检测模块可以是任何传感器模块，其感测由用户产生的姿势，从而给用户界面输入数据。传感器模块可以是例如感测加速度的加速度器模块，或者检测运动的运动传感器。它还可以(或者附加地)包括取向传感器，例如陀螺仪或指南针。另外的选择可以是传感器模块包括照相机，基于照相机图像检测移动电话的运动或者取向。进一步的，姿势检测模块还可以包括如上面提到的各种传感器模块的组合。基于感测的数据，姿势检测模块检测用户的姿势，例如移动设备的取向、运动或加速度，并将这作为所述图形用户界面的输入进行处理，从而允许由所述用户对所述输入进行选择。

根据一个实施例，允许用户通过移动该移动设备来选择输入的所述图形用户界面是响应于对标签的选择而显示的，该选择会触发一组进一步可能的必须从中选择一个的选项。

这样，用户界面允许以一种简单、直观的方式对由应用服务提供的选项进行选择。

根据一个实施例，响应于对一个标签的选择而显示允许用户通过移动移动设备来选择输入的所述图形用户界面，对于该选择，在所述标签的区域中有多于一个待选择的选项，因此，对该标签的选择不能唯一地标识对一个选项的选择。

因此，能够解决多于一个可选选项显示在属于一个标签的区域中的问题。

根据一个实施例，所述图形用户界面包括：

图形选项指示器，其指示可以被用户选择的多个可能选项；

图形选择指示器，指示所述多个选项中的当前选择的选项，其中

当用户移动他的移动设备时，所述姿势检测模块感测所述移动并处理产生的数据，以致由所述用户产生的移动设备的移动会导致图形选择指示器移动到一个不同的选择的选项，该选项被所述图形选项指示器指示为被选择。

这允许用户观看当前选择的项目，然后可以随后确认该项目。

根据一个实施例，所述图形选项指示器包括以下的一个或多个：

弧，其不同部分属于不同的选择选项；

多个图标，位于所述屏幕的不同位置；和/感其中所述图形选择指示器包括以下的一个或多个：

箭头，指向所述图形选项指示器的选项中的当前选择的选项；

球、阴影部分、十字或任何标记，其指向或者标记由所述图形选项指示器所指示的所述多个选项中的当前选择的选项。

这样，可以实现几个不同的图形选项指示器。

根据一个实施例，该方法进一步包括：

允许用户通过使用所述移动设备作出的以下姿势之一来改变由所述图形选项指示器所指示的多个选项中的当前选择的选项：

倾斜所述移动设备；

旋转所述移动设备。

这样，可以实现几种改变(当前)选择的方式。

根据一个实施例，对当前选择的选项的最终选择是通过以下之一进行的：

倾斜、或旋转移动设备或产生任何可感测的姿势；

快速摇动移动设备；

按压移动设备上的一个键。

这些是确认当前选择的几种可能的实现。

根据一个实施例，如果所述NFC标签的粒度不足，以致于一个NFC标签对应于多于一个所述屏幕上的可选输入，那么显示所述图形用户界面，以允许用户在所述多于一个可选输入中进行选择。

这解决了NFC网格的粒度不足以对应可选选项的问题。

根据一个实施例，所述图形选项指示器是弧或圆，其被分割为对应不同选项的多个部分；或者

所述图形选项指示器是弧或圆，其具有对应不同选项的不同颜色。

这些是直观呈现可选选项的可能的实现。

根据一个实施例，所述图形选项指示器是弧或圆，其响应所述移动设备的移动而移动，以致指示当前选择选项的图形选择指示器随着所述弧或圆的移动而指向不同的选择选项。

这是直观呈现可选选项的一个进一步的可能的实现。

根据一个实施例，随着弧或圆旋转或移动，新的选项在所述弧或圆上显露，以致对应于移动的弧或圆的某个位置的选项发生变化，从而显露新的选项。

这样，能够显示无限数量的可选选项。

根据一个实施例，所述图形选项指示器是弧或圆，其中，提供多个弧或圆以增加可显示选项的数量，在显示的弧或圆中，用户可以选定当前活动的弧。

这是增加能够显示的可选选项的数量的进一步的实施例。

根据一个实施例，提供一种用于在移动设备和屏幕之间进行交互的装置，屏幕具有多个包含数据的NFC标签，通过使用所述移动设备的NFC读取器模块读取一个标签，标签中的数据能够被所述移动设备读取，其中，作为应用服务的一部分的图像显示在所述屏幕上，以致屏幕的一个或多个标签对应于对相应的输入或选择的指示，用户在使用所述应用服务时可以通过移动电话选定这些输入或选择，其中，显示在所述屏幕上的所述图像由服务器控制，所述应用服务在该服务器上运行，通过网络链接将所述服务器连接到所述用户的所述移动电话，所述装置包括：

用于通过用户的移动电话选择一个NFC标签的模块；

用于将所述选择传送到所述服务器的模块，所述应用服务在所述服务器上运行；

用于响应于所述选择，控制所述屏幕上的所述显示从而在所述屏幕上显示一个允许用户选择输入的图形用户界面的模块；

用于从所述移动设备的姿势检测模块接收数据的模块，该数据是响应用户移动他的移动设备而产生的并由所述姿势检测模块感测，接着作为所述图形用户界面的输入被处理，从而允许由所述用户对所述输入进行选择。

这样，可以实现根据本发明一实施例的装置或系统。

根据一个实施例，提供一种用于运行应用的计算机，在应用中，移动设备和屏幕之间进行交互，屏幕具有多个包含数据的NFC标签，通过使用所述移动设备的NFC读取器模块读取一个标签，标签中的数据能够被所述移动设备读取，其中，作为应用服务的一部分的图像显示在所述屏幕上，以致屏幕的一个或多个标签对应于对相应的输入或选择的指示，用户在使用所述应用服务时可以通过移动电话选定这些输入或选择，其中，显示在所述屏幕上的所述图像由所述计算机控制，所述应用服务在该计算机上运行，通过网络链接将所述计算机连接到所述用户的所述移动电话，所述计算机包括：

用于接收对一个NFC标签的选择的模块，该标签已被用户的移动电话选择；

用于响应于所述选择，控制所述屏幕上的所述显示以致在所述屏幕上显示允许用户选择输入的图形用户界面；

用于从所述移动设备的姿势检测模块接收数据的模块，该数据是响应用户移动他的移动设备而产生的，并由所述姿势检测模块感测，接着作为所述图形用户界面的输入被处理，从而允许由所述用户对所述输入进行选择。

这样，在计算机或主机上可以实现根据本发明一实施例的应用业务。

根据一个实施例，装置进一步包括一个或多个模块，来进行所描述的与本发明其它实施例有关的操作。

根据一个实施例，提供一计算机程序，包括计算机程序代码，当在计算机上执行时，该代码其能使所述计算机实现根据本发明实施例之一的方法。

附图说明

图1A图示说明了加标记的屏幕，用于本发明一实施例。

图1B图示说明了本发明一实施例所解决的问题的情况。

图2图示说明了根据本发明一实施例的用户界面。

图3-7图示说明了根据本发明进一步实施例的用户界面。

具体实施方式

描述本发明实施例之前，首先将解释下面描述中将会使用的一些术语。

NFC：近场通信

姿势检测模块：用于测量设备在空间中的(3D)取向的传感器(或者检测用其附属于的设备完成的姿势)。一个例子是加速度计，也可能是其它的例子。

主显示：相比较用户移动设备的显示，大部分信息显示在其上面(可能比较大并且公众可访问和可观看)的显示。

根据一个实施例，提供一种用于操作由主显示和移动设备组成的用户界面的方法，后者被用作控制元素。为了能让用户容易地在显示在主显示上的一组选项之间进行选择，移动设备使用内置或外部的姿势检测模块，如加速度计。为了这个目的，可以提供一组图形部件，其能够用来显示几个选项并向用户提供通过旋转和倾斜移动设备来选择一个选项的可能性。除了离散的选项，还能使用用于输入的连续范围，例如温度值的输入的连续范围。

图2中显示了这个总体思想的一个实施例。提供了一个附加的图形部件，允许用户通过把电话沿特定方向倾斜来选定一个选项。反馈直接提供给应用在其上运行的主机。

图2的例子中，有三个可能的选择(例如三个餐馆)，通过具有三种不同颜色的弧显示它们，每种颜色对应一个可能的选择。一个标记(图2中为箭头)指示当前选择，用户通过旋转移动电话可以使姿势检测模块(例如加速度计)感测该旋转，从而产生的数据被处理并转换为标记的移动。这样，用户可以通过旋转移动电话从而移动指示从多个选项当中的选择的标记来进行选择。然后，可以最终确认该选择，例如通过摇动移动设备来确认，这可通过姿势检测模块(例如加速度计)来检测，或者通过使用电话的一个键来确认选择。

所提出的方法确保用户的注意力能够保持在主显示上，在选择过程开始之前，仅有一小部分主显示用来显示附加信息，附加信息不会与操作模式混淆，并且，选择技术是快速和直观的。一个实施例中，选择部件独立于应用类型，它们用于特定的情况，因而有助标准化和用户熟悉。

下面将描述本发明进一步的实施例。

根据一个实施例，使用一个结合NFC标签读取器和加速度计(或者类似的设备，实现能够检测设备的取向和取向变化的姿势检测模块)的装置。这可以是内置的(如同Nokia N96、iPhone等那样)，或者可以是一个外部连接的传感器。

一个实施例中，提供了一组部件，从姿势检测模块(例如加速度计)读出的值结合这组部件能够被用来在一组选项中进行选定。当仅使用多标签标记不可能或不方便作出选择时(例如，因为一个标签区域中有多于一个选项，或者因为选择一个标签会触发一组其他可能的选项，必须从这些其他可能的选项中选择一个)，采用该选择技术。优点是不用在主显示和移动设备的显示之间分散和转移注意力和关注点。

现在将结合附图示出几个完成这样部件的实施例。

一个实施例中的部件以通用的方式设计，以致它们能应用到各种设置中(例如，具有要从中选择的各种不同数量的可能选项或者顺序的/间隔的/连续的数据)。

图3A说明了已经提及的用不同颜色呈现的选项。

图3B说明了用不同区域呈现的选项。

图3C说明了使用一个大一些的“默认”选择区域，由不同区域呈现的选项。

图3D说明了一个部件，根据预期的使用/概率选择对应于可选选项的区域的尺寸和位置。本领域技术人员会认识到，这需要有关过去选择的信息，然后基于有关过去选择的信息，得到关于下一个选择的概率，例如区域的尺寸是这样的，对应于具有最高概率的选择的区域是最大的，其它区域的其它尺寸对应于它们各自选择的可能性要小一些。

图4A到4D显示了部件进一步的实施例。

图4A说明了两个一般选项之间的选择。

图4B说明了三个一般选项之间的选择。

图4C说明了带有一个默认选项的三个一般选项之间的选择。

图4D说明了带有具体图标的三个特定选项之间的选择。

图5A到5D说明了以不同方式完成选择选项的呈现的实施例。如图所示，当前所选择的项目可以用箭头、球或阴影部分指示。另外的方式是旋转弧使选择的项目位于顶部。

图5A说明了箭头指向选择的选项的实施例。

图5B说明了弧是旋转的而选择符号(以灰色显示)是固定的实施例。

图5C说明了通过一个球移动经过带有或没有“对齐网格”的选项来指示选择的实施例。

图5D说明了通过加亮带有“对齐网格”的当前选择区域来指示选择的实施例。

根据前面描述的实施例，能够呈现给用户的选项数量仍然有限。图6和7说明了一个实施例，通过增加弧的数量(图6)或通过实际扩展弧以能够容纳更多项目(图7)来增加选项的数量。

如图6所示，提供了两个弧，每一个都提供选项。通过围绕第一个轴旋转移动电话，用户可以对一个弧内的选项进行选定，通过围绕第二个轴旋转移动电话，用户可以选定两个(或多个)弧中的一个。

图7说明了增加可显示选项数量的进一步实施例。这个弧能够容纳可能的无限数量的项目。如果箭头在一末端，弧旋转以显露更多的可选选项。通过使用速率控制(即向左倾斜顺时针旋转直到停止倾斜)能够显示无限数量的选项。随后，通过围绕另外的轴旋转移动电话，或通过快速摇动移动电话(这可由姿势检测模块例如加速度计来检测)，或通过按压键盘的一个键，可以再对当前选择进行确认(如同前面的实施例)。

本领域技术人员将认识到，通过使用与以上实施例有关的所描述的功能能够实现的方式，适当地编程现有的用NFC标记的屏幕、运行在主机上相应应用和与屏幕进行交互的移动设备，可以实现本发明的实施例。因此，本发明的实施例可以由硬件、适当编码的软件或两者的组合来实现。根据一个实施例，提供一个服务器，应用服务在其上运行，并且其实现根据本发明一个实施例的用户界面。根据进一步的实施例，提供一个移动电话，其进行与前面实施例有关的所描述的操作。根据进一步的实施例，提供一个系统，包括用NFC标记的屏幕、移动电话和应用服务在上面运行的服务器计算机。