首页> 中国专利> 通过识别书写手势控制移动终端功能执行的方法及装置

通过识别书写手势控制移动终端功能执行的方法及装置

摘要

提供了用于通过识别书写手势来执行移动终端的功能的方法和装置。检测被输入到移动终端的触摸屏上的书写手势。确定书写手势所应用到的至少一个目标项目。将至少一个目标项目的预设书写手势与所检测的书写手势进行比较,以确定预设书写手势是否至少与所检测的书写手势相类似。当确定所检测的书写手势至少与预设书写手势相类似时,对应于预设书写手势的执行命令被提取。通过执行命令来执行所述至少一个目标项目的功能。

著录项

  • 公开/公告号CN103631510A

    专利类型发明专利

  • 公开/公告日2014-03-12

    原文格式PDF

  • 申请/专利权人 三星电子株式会社;

    申请/专利号CN201310363134.5

  • 发明设计人 权茂植;

    申请日2013-08-20

  • 分类号G06F3/0488(20130101);

  • 代理机构11105 北京市柳沈律师事务所;

  • 代理人邵亚丽

  • 地址 韩国京畿道

  • 入库时间 2024-02-19 23:02:09

法律信息

  • 法律状态公告日

    法律状态信息

    法律状态

  • 2022-07-29

    未缴年费专利权终止 IPC(主分类):G06F 3/0488 专利号:ZL2013103631345 申请日:20130820 授权公告日:20181019

    专利权的终止

  • 2018-10-19

    授权

    授权

  • 2015-06-24

    实质审查的生效 IPC(主分类):G06F3/0488 申请日:20130820

    实质审查的生效

  • 2014-03-12

    公开

    公开

说明书

技术领域

本发明大体上涉及控制在移动终端中的功能的执行的方法,以及用于执 行该方法的装置,并且更具体地,涉及通过检测由用户通过触摸屏而输入的 书写手势来控制在移动终端中的功能的执行的方法,以及用于执行该方法的 装置。

背景技术

通过诸如个人数字助理(PDA)、电子笔记本、智能手机、和个人平板 电脑(PC)的移动通信终端来执行通信方法和个人信息处理。

这些移动终端具有各种应用,诸如,例如语音呼叫功能、消息发送功能 (例如,短消息服务/多媒体消息服务(SMS)/(MMS))、视频呼叫功能、 电子记事本功能、拍摄功能、电子邮件发送和接收功能、广播重放功能、动 态影像播放功能、上网功能、电子交易功能、音乐播放功能、日程表功能、 社交网络服务(SNS)功能、信使功能、字典功能、游戏功能等。

移动终端还包括能够在不使用键盘的情况下直接从显示器接收执行命 令的触摸屏。具体地,当用户的手指或诸如触笔的物体触摸在屏幕上显示的 特定字符或者在屏幕上的特定位置时,执行在移动终端中存储的软件通过其 识别特定字符或者特定位置的特定处理。

触摸屏用作将用户与电子设备连接的用户界面(UI)。

但是,用户通常需要检查用于提供输入的在触摸屏上显示的触摸菜单, 并且输入多个命令以执行单个应用。

难以在狭窄的触摸屏上显示各种触摸菜单,并且对于用户而言不便于在 多个步骤的每个步骤处输入需要的命令。

发明内容

做出本发明以解决至少上述问题和/或缺点,并且提供至少以下描述的优 点。因此,本发明的一个方面提供了一种在移动终端中执行功能的简单的用 户可达成的方法和用于执行该方法的装置。

本发明还提供了一种用户接口,其允许方便和直观地在移动终端中执行 功能,以及对其进行控制。

本发明还提供了一种使用通过触摸屏输入的书写手势而方便和快捷地 在移动终端中执行功能的方法。

本发明还提供了一种通过检测多个项目之间的输入的书写手势而方便 和快捷地控制多个功能的执行的方法,以及用于执行该方法的装置。

根据本发明的一个方面,提供了一种方法,用于通过识别书写手势来执 行移动终端的功能。检测被输入到移动终端的触摸屏上的书写手势。确定书 写手势所应用到的至少一个目标项目。将至少一个目标项目的预设书写手势 与所检测的书写手势进行比较,以确定预设书写手势是否至少与所检测的书 写手势相类似。当确定所检测的书写手势至少与预设书写手势相类似时,对 应于预设书写手势的执行命令被提取。通过执行命令来执行所述至少一个目 标项目的功能。

根据本发明的方面,提供了一种装置,用于通过识别书写手势来执行移 动终端的功能。所述装置包括:书写手势检测器,用于检测被输入到移动终 端的触摸屏上的书写手势。所述装置还包括目标项目确定单元,用于确定由 书写手势检测器所检测的书写手势应用到的至少一个目标项目。所述装置还 包括书写手势比较器,用于比较至少一个目标项目的预设书写手势与所检测 的书写手势,以确定预设书写手势是否至少与所检测的书写手势相类似。所 述装置还包括:执行命令提取器,用于当确定所检测的书写手势至少与预设 书写手势相类似时,提取与预设书写手势相对应的执行命令。所述装置还包 括目标项目功能执行控制器,用于在由执行命令提取器所提取的执行命令之 下执行至少一个目标项目的功能。

附图说明

结合附图,从下面的详细描述中,本发明的上述和其它方面、特征、和 优点将变得更加明显,在附图中:

图1是根据本发明实施例的,示出移动终端的配置的方框图;

图2A至图2C是示出根据本发明实施例的,通过识别在移动终端中的 书写手势来控制目标项目的功能执行的方法的流程图;

图3是示出根据本发明实施例的,控制调整移动终端的亮度的功能的执 行的操作屏幕的视图;

图4是示出根据本发明实施例的,控制在移动终端中的WiFi通信的执 行的操作屏幕的视图;

图5是示出根据本发明实施例的,控制移动终端的音乐播放器的执行的 操作屏幕的视图;

图6是示出根据本发明实施例的,选择和/或删除在移动终端上显示的 列表的操作屏幕的视图;

图7是示出根据本发明实施例的,直接改变在移动终端中的图库图标的 书写手势的视图;

图8是示出根据本发明实施例的,将利用移动终端的相机应用拍摄的最 新照片直接更新到在线社交网络上的操作屏幕的视图;

图9示出根据本发明实施例的,将通过消息应用接收的最新消息的相应 电话号码应用到呼叫应用上以执行呼叫的操作屏幕的视图;

图10是示出根据本发明实施例的,将通过呼叫应用接收的最近呼叫的 相应电话号码应用到消息应用的操作屏幕的视图;

图11是示出根据本发明实施例的,将由计划器(planner)应用生成的 每月的日程表信息直接存储到备忘录应用中的操作屏幕的视图;

图12是示出根据本发明实施例的,将通过地图应用搜索用户的当前位 置所输出的地图数据直接存储到备忘录应用中的操作屏幕的视图;

图13是示出根据本发明实施例的,将通过相机应用拍摄的最新照片直 接存储到备忘录应用中的操作屏幕的视图;

图14是示出根据本发明实施例的,将在图库应用中存储的最新照片直 接存储到备忘录应用中的操作屏幕的视图;

图15是示出根据本发明实施例的,利用网络浏览器应用来直接搜索与 在备忘录应用中存储的文本相关的数据的操作屏幕的视图;以及

图16是示出根据本发明实施例的,移动终端所采用的笔的视图。

具体实施方式

将参照附图来详细描述本发明的实施例。尽管其在不同的附图中示出, 但是相同或相似的部件由相同或类似的符号来指定。为了避免模糊本发明的 主题,可以省略本领域中已知的构造或过程的详细描述。

参考附图来详细描述根据本发明实施例的移动终端的操作控制方法和 配置。然而,移动终端的操作控制方法和配置既不通过下面的描述来限制也 不受其制约,并且其可以被应用到本发明的各种实施例中。本发明的实施例 被描述为硬件。然而,本发明的实施例包括利用硬件和软件的技术,并且因 此,其不排除基于软件的途径。

本发明实施例的移动终端可以是信息通信设备,诸如,例如,平板PC、 移动通信终端、移动电话、PDA、智能电话、国际移动通信-2000(IMT 2000) 终端、码分多址(CDMA)终端、宽带码分多址(WCDMA)终端、全球移 动通信系统(GSM)终端、通用分组无线业务(GPRS)终端、增强型数据 GSM环境(EDGE)终端、通用移动通信服务(UMTS)终端、数字广播终 端、自动取款机(ATM)、多媒体设备、及其用途。

本发明的实施例包括将移动终端的操作模式切换到书写手势输入模式 的特征,其允许用户通过触摸屏来输入书写手势以直接执行移动终端的功 能,并且控制执行移动终端的功能执行。

图1是示出根据本发明实施例的,移动终端的配置的框图。

参照图1,移动终端包括:无线通信单元110、音频处理器130、触摸屏 140、存储装置150、以及控制器160。

移动终端可以使用与书写手势相对应的用户界面(UI),以允许用户通 过触摸屏140来触摸在其中UI、项目、以及图像彼此相关联的内容。

项目是指包括由移动终端提供的应用的菜单以及用于执行功能的对象 集。例如,对象允许执行在移动终端的屏幕上的特定的功能或者映射到其上 的子菜单,并且其可以以各种图形用户界面(GUI)的形式来提供,诸如, 例如,以文本、图标、图标列表、窗口小部件、以及其组合来提供。

无线通信单元110进行移动终端的通信。具体而言,无线通信单元110 在控制器160的控制下形成与可支持的网络(站)的预设通信信道,并且执 行与数据通信相关的数据传输和接收,诸如,例如,无线通信(语音通信和 视频通信)、SMS、MMS、和互联网通信。无线通信单元110将语音/声音数 据和控制数据转换成用于传输的无线电信号,并且接收无线电信号以将其转 换成语音/声音数据和控制数据。无线通信单元110可以包括收发信机,其执 行频率的上变频和对发送信号的放大,以及低噪声放大和对接收信号的频率 下变频。在本发明的实施例中,无线通信单元110是单个的,但是其也可以 是多个,以对应于移动终端所支持的多路通信。

音频处理器130包括:扬声器SPK,其再现由移动终端在无线通信过程 中所接收的音频数据;以及麦克风MIC,其收集用户的语音或其它音频信号。 音频处理器130被连接到麦克风MIC和扬声器SPK,并且将从麦克风MIC 接收到的数据转换为数据以将其输出到控制器160。从控制器160输入到音 频处理器130的信号通过扬声器SPK被转换成可听见的声音。具体地,音 频处理器130将通过麦克风MIC输入的模拟信号转换成数字语音信号,或 者将从控制器160输入的数字语音信号转换为模拟信号,以通过扬声器SPK 来输出。此外,音频处理器130可以再现各种音频组件,诸如,例如,根据 用户选择而在移动终端中生成的、与MP3文件的再现相关的音频信号。

特别地,当输入书写手势时,或当通过输入书写手势来执行应用时,音 频处理器130可以输出音频信号。向用户通知书写手势的输入以及由输入的 书写手势所引起的应用的执行的音频信号的输出可以通过用户的设置或者 通过设计而被省略掉,或者可以替代提供为预设的振动模式。

触摸屏140包括:触摸面板142,向其输入书写手势;以及显示面板144, 其输出根据目标项目的功能的执行而激活的屏幕,以及由目标项目产生的数 据。显示面板144可以输出,例如,引导屏幕、待机屏幕、菜单屏幕、呼叫 屏幕。

特别地,触摸屏140输出用户的书写手势在触摸屏140上的迹线,使得 用户可以明显地检查他/她的书写手势。书写手势被输出在项目上或其附近, 并且当目标项目被执行或者被切换时,其可以保持显示。

可以通过只读存储器(ROM)和随机存取存储器(RAM)来实现存储 装置150。存储装置150存储通过移动终端产生和在移动终端中利用的各种 类型的数据。数据包括当移动终端的功能被执行时所生成的数据,诸如,例 如,由书写手势所输入的信息、关于由书写手势所生成的用于初始设置的信 息、关于与每个书写手势相匹配的执行命令的信息、由移动终端生成或者由 其接收的每种可存储数据、以及用于移动终端的预设相应功能/支持功能的菜 单的直接执行的菜单项目。存储装置150可以存储用于由无线通信单元110 执行的通信的数据,以及移动终端的使用的各种设置信息。

此外,存储装置150可以包括至少一个缓冲器,其暂时存储在移动终端 的功能执行过程中产生的数据。例如,存储装置150可以执行缓冲预设尺寸 大小的、由无线通信单元110发送和接收的信号的功能。此外,当通过识别 书写手势来执行应用时,存储装置150可以执行缓冲以预设尺寸产生的数据 的功能。

存储装置150可以被提供在移动终端中,在移动终端之外,例如,可以 被提供为智能卡,或者可以包括内部/外部存储媒体这两者。可以通过诸如 ROM、闪存、RAM、单个的集成存储器、或者诸如多芯片封装(MCP)的 两个存储器之类的独立存储器来实现存储装置150。

存储装置150的书写手势数据库152存储关于相对于每个项目而预设的 书写手势的信息。可以相对于单个项目来预设多个书写手势,并且可以将其 存储。

存储装置150的执行命令数据库154存储映射到预设书写手势的执行命 令。在执行命令数据库152中存储的执行命令可以与对应于项目的应用的执 行和其控制相关。优选地,一个书写手势被映射到一个执行命令。

控制器160执行移动终端的总体控制,并且控制在移动终端中的各元件 之间的信号流。

特别地,控制器160包括输入模式选择器161、书写手势检测器162、 目标项目确定单元163、书写手势比较器164、执行命令提取器165、代表数 据提取器166、和目标项目功能执行控制器167。

控制器160的输入模式选择器161从用户接收选择移动终端的常规触摸 输入模式和书写手势输入模式的信号。

书写手势输入模式可以通过在移动终端的触摸屏140上显示的输入模式 选择菜单来选择。

如图16所示的书写手势输入模式可以通过与移动终端相关联的专用笔 190来选择。具体地,通过在专用笔190中提供的按钮,移动终端的模式可 以被切换到书写手势输入模式。

例如,书写手势输入模式可以是如下的模式,在其中,被实施为字符、 数字、符号、图形、线段及其组合的至少一个的书写手势被通过专用笔190 而输入到触摸屏。

当移动终端被切换到书写手势输入模式时,输入到触摸屏140的书写手 势被检测到,并且所检测的书写手势可以如其输入地被输出在触摸屏140上。

在本发明的这个实施例中,移动终端被设置为书写手势输入模式。

书写手势检测器162检测输入到触摸屏140的书写手势。具体而言,书 写手势检测器162检测由专用笔190生成的在触摸屏140上的书写手势,并 且将检测的书写手势转换成信号,以传输到目标项目确定单元163和书写手 势比较器164。

书写手势检测器162可以使用用于检测输入手段的电阻(压敏)方法、 电容方法、红外线方法、超声波法、或它们的组合,但本发明并不限定于此。

目标项目确定单元163确定由书写手势检测器162检测到的书写手势的 目标项目。具体而言,目标项目确定单元163将与输入的书写手势接触、与 其重叠、或者与其相邻的项目确定为目标项目。可能检测到至少一个目标项 目。

书写手势比较器164将检测的书写手势与目标项目的预设书写手势进行 比较。

目标项目的预设书写手势可以用于目标项目的执行和控制。由于存在诸 如,例如,执行、终止、和控制的目标项目的各种功能,所以可以预设和存 储与各个功能相匹配的不同的书写手势。因此,多个预设书写手势可以为每 一个项目而预设。目标项目的预设书写手势可以被存储在书写手势数据库 152中。

执行命令提取器165从执行命令数据库154中提取与预设书写手势对应 的、与所检测到的书写手势相关联的执行命令。

存储在执行命令数据库154中的执行命令可以与例如,项目的功能的执 行相关。

代表数据提取器166提取通过目标项目的功能的执行所产生的代表数 据。

代表数据可以通过目标项目的功能的执行而产生的最新数据来定义,或 者可以通过标识目标项目的内容的信息来定义。

目标项目功能执行控制器167在从命令执行命令提取器165提取的执行 命令下控制目标项目的功能的执行。

根据数字的书写手势、图形大小、图形的形状、线段的长度、方向、形 状、厚度、及其组合中的至少一个,可以控制目标项目的功能的执行。

目标项目功能执行控制器167应用通过代表数据提取器166提取的代表 数据,以在执行命令下控制目标项目的功能的执行。

移动终端可以包括其它元件,诸如,例如,相机模块、近场通信模块、 互联网通信模块、以及数字广播模块。

在下文中,将描述根据本发明实施例的移动终端的操作。应该理解的是, 移动终端的操作不限于以下的说明中,而是基于以下的实施例本发明的各种 实施例是可用的。

图2A至图2C是示出根据本发明实施例的,通过识别在移动终端中的 书写手势来控制目标项目的功能的执行的方法的流程图。

图2A是示出当目标为单个项目的书写手势被输入时,控制目标项目的 功能的执行的方法的流程图。

在步骤210中,确定输入模式选择器161是否从用户接收到用于选择书 写手势输入模式和常规触摸输入模式中的任何一个的信号。

特别地,在本发明的这个实施例中所采用的、支持书写手势识别环境的 移动终端支持被划分为常规触摸输入模式和书写手势输入模式的操作模式。 移动终端可以使用在常规触摸输入模式中管理的触摸输入,或者在书写手势 输入模式中管理的书写手势输入,以支持内部输出和外部输出。

可以通过移动终端的触摸屏140上显示的输入模式选择菜单来选择书写 手势输入模式。

如图16中所示,书写手势输入模式可以通过与移动终端相关联的专用 笔190来选择。具体而言,使用在专用笔190中提供的按钮912,移动终端 的操作模式可以被切换到书写手势输入模式。

书写手势输入模式可以是如下的模式,在其中,被实施为例如,字符、 数字、符号、图形、线段、及其组合的至少一个的书写手势被通过专用笔190 而输入到触摸屏。

当移动终端被切换到书写手势输入模式时,输入到触摸屏的书写手势可 以被检测到,并且在触摸屏上如其输入地输出。

在步骤210中,当常规触摸输入模式被选择时,在步骤215中,执行移 动终端的常规触摸输入模式。

当在步骤210中选择书写手势输入模式时,在步骤220中,书写手势检 测器162检测输入到触摸屏140的书写手势。

在步骤225中,目标项目确定单元163确定书写姿势的目标项目。可以 将与输入的书写手势接触、与其重叠、或者与其相邻的项目确定为目标项目。 至少有一个目标项目可以通过检测书写手势来确定。例如,目标项目可以是 呼叫图标、文本消息图标、音乐播放器图标、图库图标、网络浏览器图标等。

在步骤230中,书写手势比较器164将目标项目的预设书写手势与检测 的书写手势进行比较,以确定检测的书写手势是否与预设书写手势相似,或 者相同。

用于单个目标项目的多个书写手势可以相对于目标项目的功能执行来 定义,并且可以被存储在书写手势数据库152中。因此,书写手势检测器164 可以确定一个检测的书写手势是否与在书写手势数据库152中存储的多个预 设书写手势中的一个相同,或者相似。

例如,音乐播放器图标可以具有至少五个书写手势,诸如,例如,用于 播放音乐的书写手势、用于暂停音乐的书写手势、用于播放之前的音乐文件 的书写手势、以及用于播放下一个音乐文件的书写手势。

如果输入的书写手势与存储的预设书写手势在形状上相似或者相同,则 书写手势比较器164可以提取与输入的书写手势相对应的预设书写手势。

相反,如果确定在书写手势数据库152中存储的任何书写手势与输入的 书写手势不相同或者不类似,则移动终端可以请求用户再次输入该书写手 势,或输入另一个书写手势,并且返回到步骤220。

如果在步骤230中确定在书写手势数据库152中存在类似的书写手势, 则在步骤240中,执行命令提取器165提取映射到与所检测的书写手势相对 应的预设书写手势的执行命令。

可以事先在执行命令数据库154中存储映射到书写手势的执行命令。优 选地,一个执行命令被排他地映射到每个书写手势上。

执行命令也可以是用于控制目标项目的功能的执行的命令,例如,WiFi 通信执行命令、WiFi通信停止命令、音乐播放命令、暂停命令、和播放下一 个和前一个音乐文件的命令、最新的图像获取命令、从列表中删除选定的项 目的命令、用于照亮移动终端的屏幕的命令、用于对未接来电的呼叫方直接 进行呼叫的命令、对于文本消息的发送方直接进行呼叫的命令、用于将最新 产生的每月的日程数据直接存储到备忘录应用中的命令等等。

当在步骤240中提取映射到预设书写手势的执行命令时,在步骤250中, 目标项目功能执行控制器167控制目标项目的功能的执行。

例如,参考图5,假设事先将用于暂停与音乐播放器图标20相关的音乐 播放器应用的播放功能的执行命令映射到作为“‖”形状的书写手势。“‖”形 状的书写手势被存储在书写手势数据库152中,同时用于暂停由音乐播放器 播放的音乐的执行命令被存储在执行命令数据库154中。

当用户通过在触摸屏140在音乐播放器图标上输入“‖”形状的书写手 势24时,书写手势检测器162检测到“‖”形状的书写手势24。目标项目确 定单元163将由“‖”形状的书写手势24覆盖的音乐播放器图标20确定作 为目标项目。书写手势比较器164从书写手势数据库152中提取与“‖”形 状的书写手势24相同形状的书写手势。执行命令提取器165提取命令来暂 停被映射到所提取的“‖”形状的书写手势的音乐播放器应用的播放功能。 目标项目功能执行控制器167在该命令下暂停音乐播放器应用的播放功能, 以暂停与音乐播放器图标20相关的音乐播放器应用的播放功能。

根据本发明实施例的,通过识别书写手势来控制移动终端的功能的执行 的方法可以被应用到提取目标项目的代表数据上,并且可以应用代表数据来 控制移动终端的功能的执行。

图2B示出了上述的实施例,其进一步包括:在步骤250中控制目标项 目的功能的执行之前,在步骤245中,提取目标项目的代表数据。在下文中, 在操作中,通过与图2A中的参考标号相同的参考标号来指示的步骤是相同 的。

代表数据可以由用户定义为通过目标项目的功能的执行而产生的最新 数据,或者定义为由用户事先指定的数据。

例如,图库应用的代表数据可以被定义为最新存储的图像数据。文本消 息应用的代表数据可以被定义为最新接收的文本消息的电话号码。呼叫应用 的代表数据可以被定义为最新接收的呼叫的电话号码。音乐播放器应用的代 表数据可以被定义为最新播放的音乐文件。

当在步骤240中提取映射到预设书写手势的执行命令时,在步骤245中, 代表数据提取器166提取如上所述,通过目标项目的功能的执行而产生的代 表数据。

当在步骤245中提取代表数据时,在步骤250中,目标项目功能执行控 制器167应用代表数据,以控制目标项目的功能的执行。

以下将参考图1、图2B和图7来描述图库应用的代表数据和用于将图 库图标变化为代表数据的功能的执行。

假设图库应用的代表数据被设置为最新存储的图像,并且用于将代表图 库图标并且显示在触摸屏140上的图像切换为最新存储的图像的执行命令被 事先映射到特定的书写手势。

在上述假设下,当输入特定的书写手势时,代表数据提取器166可以将 存储在图库应用中的最新图像提取来作为代表数据,同时,目标项目功能执 行控制器167可以将被显示作为图库应用的代表数据的之前的图像30替换 为最新存储的图像32,以作为代表图像(图7中的S131和S132)。

然而,在通过识别书写手势来控制移动终端的功能的执行的方法中,书 写手势可以以至少一个项目作为目标被输入。

图2C示出了上述实施例,其与图2B中示出的实施例的不同之处在于, 书写手势被输入,以第一项目和第二项目为目标。在步骤220中,检测书写 手势之后,在步骤225中,第一目标项目和第二目标项目被确定;在步骤245 中,第一目标项目的代表数据被提取;并且在步骤255中,代表数据被应用, 以控制第二目标项目的功能的执行。

参照图2C,可以与第一项目和第二项目相关联地输入书写手势。第一 项目和第二项目可以用于执行显示在触摸屏上的不同的功能。

参照图2C和图8,假定第一项目是相机图标310,并且第二项目是社交 网络图标320。

由与相机图标310相关的相机应用拍摄的最新照片数据可以被设置为代 表数据。用于在社交网络上上载由与相机图标310相关的相机应用产生的代 表数据的执行命令可以事先被映射到从相机图标310到社交网络图标320的 箭头状的书写手势。执行命令可以被存储在执行命令数据库154中,并且箭 头状的书写手势可以被存储在书写手势数据库152中。

当用户在上述假设下,在从相机图标310到社交网络图标320的方向上 输入箭头状的书写手势330时,在步骤220中,书写手势检测器162检测箭 头状的虚拟手稿(virtual manuscript)92。

在步骤225中,目标项目确定单元163将与箭头状的虚拟手稿330接触 的相机图标310和社交网络图标320分别确定作为第一目标项目和第二目标 项目。

目标项目确定单元163将与箭头状的虚拟手稿的箭头的开始部分接触的 项目确定作为第一目标项目,并且将与箭头状的虚拟手稿的箭头的尾端接触 的项目确定为第二目标项目。

在步骤230中,书写手势比较器164从书写手势数据库152中提取与箭 头状的书写手势330相同的书写手势。

在步骤240中,执行命令提取器165提取映射到所提取的箭头状的书写 手势的执行命令。

执行命令可以为第一目标项目和第二目标项目事先预置,以进行存储。

从相机图标310移动到社交网络图标320的箭头状的书写手势330可以 被预设为用于通过执行与社交网络图标320相关的社交网络应用来在线上载 与相机图标310相关的相机应用的代表数据的命令。

在步骤245中,代表数据提取器166将最新拍摄的图像数据提取作为与 相机图标310相关的相机应用的代表数据。

在步骤255中,目标项目功能执行控制器167将最新拍摄的图像数据上 载到与社交网络图标320相关的社交网络应用的在线社交网络上。

因此,根据本发明的实施例,用户输入与相机图标310和社交网络图标 320相关的书写手势,使得仅由书写手势330的一个输入,而不用通过移动 终端的用于将照片上载到在线社交网络上的随后的若干过程,由相机应用拍 摄的最新的照片可以被上载到在线社交网络。

在下文中,将参考图3至图15来描述根据本发明实施例的,在其中通 过检测书写手势来进行项目的功能执行的移动终端的操作屏幕。

图3是示出了根据本发明实施例的,通过设置项目来控制调整移动终端 的亮度的功能的执行的操作屏幕的视图。

移动终端的触摸屏140提供了包括用户可以选择的图标的屏幕。例如, 触摸屏140可以提供包括预设数目的菜单图标的空闲屏幕。

将参考图1、图2A和图3来描述当检测到输入书写手势的目标为设置 图标10时,控制屏幕亮度的操作。

不同方向或者不同长度的多个箭头图案的书写手势12和14被事先映射 到设置图标10,以控制触摸屏的亮度。箭头图案的书写手势12和14被存储 在书写手势数据库152中。

目标为设置图标10的箭头图案的书写手势12通过用户的手指或专用笔 而被输入在触摸屏上。书写手势的轨迹以视觉效果的形式而被输出,例如, 以在触摸屏140上的图像的形式而被输出,使得用户可以视觉地识别书写手 势。

具有相对不同的垂直位置或者不同长度的箭头图案可以被输入来作为 书写手势。例如,长的书写手势或具有向上的箭头的书写手势可以被设置为 用于增亮屏幕的书写手势,而短的书写手势或具有向下方向的箭头的书写手 势可被设置为将屏幕变暗的书写手势。

在步骤220中,当具有向上方向的箭头图案12的书写手势被输入到触 摸屏140时,书写手势检测器162检测输入书写手势。

目标项目确定单元163检测与箭头图案12中的书写手势相接触的图标, 并且在步骤225中,将设置图标10确定作为目标项目。

在步骤230中,当目标项目被确定时,书写手势比较器164比较输入书 写手势与存储在书写手势数据库152中的预设书写手势,以确定输入书写手 势是否与存储的预设书写手势相同或者相似。

在步骤240中,如果书写手势数据库152具有与输入书写手势相同或相 类似的书写手势,则执行命令提取器166提取映射到相应的书写手势的执行 命令。

执行命令是用于控制移动终端的屏幕的亮度的命令。在步骤250中,根 据由执行命令提取器166所提取的执行命令,目标项目功能执行控制器167 执行与设置图标10的亮度控制相关的应用,以提高移动终端的屏幕的亮度。

因此,根据本发明的实施例,用户可以输入与设置图标10接触的书写 手势,从而可以直接控制屏幕的亮度,而不需要通过设置图标10的用于屏 幕的亮度控制的随后的若干个过程。

图4是示出根据本发明实施例的,控制在移动终端中的WiFi通信的执 行的操作屏幕的视图。

参照图1、图2A、和图4来描述通过检测目标为设置图标10的输入书 写手势来控制WiFi通信的执行的操作。

被广泛用于指示WiFi通信的WiFi符号22事先被映射到设置图标10来 作为用于控制WiFi通信的执行的书写手势。WiFi符号22被映射到设置图标 10,并且被存储在书写手势数据库152中。此外,“X”形的图案24被事先 映射到设置图标10来作为用于释放WiFi通信的执行的书写手势,并且被存 储在书写手势数据库152中。

如在图4的屏幕S111中所指示地,利用用户的手指或者专用笔,可以 在设置图标10的附近输入WiFi符号22的书写手势。

当WiFi符号22的书写手势被输入时,在步骤220中,书写手势检测器 162检测虚拟手稿。

在步骤225中,目标项目确定单元163将与书写手势最靠近的设置图标 10确定为目标项目。

当目标项目被确定时,在步骤230中,书写手势比较器164比较输入书 写手势与存储在书写手势数据库152中的预设书写手势,以确定其是否彼此 相同或者相类似。

作为该比较的结果,如果书写手势数据库152具有与输入书写手势相同 或相类似的书写手势,则在步骤240中,执行命令提取器166提取映射到相 应的书写手势的执行命令。

执行命令可以是用于执行移动终端的WiFi通信的命令。根据该执行命 令,在步骤250中,目标项目功能执行控制器167直接执行与设置图标10 的WiFi通信相关联的应用,以执行移动终端的WiFi通信。

相反,当如在屏幕S112中所指示地在设置图标10上输入停止符号书写 手势24时,移动终端的WiFi通信被终止。

因此,根据本发明的实施例,当用户在设置图标10附近输入书写手势, 例如,WiFi符号或结束图案时,书写手势可以控制WiFi通信的执行,而不 需要用于WiFi通信的控制的后续的若干个过程。

图5是示出根据本发明实施例的,控制移动终端的音乐播放器的执行的 操作屏幕的视图。

参照图1、图2A、和图5来描述当检测到目标为音乐播放器图标20的 输入书写手势时,用于控制音乐播放器的执行的操作。

如屏幕S121所示,停止符号32被定义用于停止由音乐播放器播放的音 乐的书写手势。如在屏幕S122中所示,暂停符号34被定义为用于暂停由音 乐播放器播放的音乐的书写手势。如在屏幕S123中所示,前进符号36被定 义为用于通过音乐播放器播放下一个音乐文件的书写手势。如在屏幕S124 中所示,后退符号38被定义为用于通过音乐播放器播放上一个音乐文件的 书写手势。书写手势被映射到音乐播放器图标20上,并且被事先存储到书 写手势数据库152中。映射到停止符号32的书写手势的停止命令、映射到 暂停符号34的书写手势的暂停命令、映射到前进符号36的书写手势的下一 个音乐播放命令、以及映射到后退符号38的书写手势的上一个音乐播放命 令被存储在执行命令数据库154。利用用户的手指或专用笔,停止符号的书 写手势32、暂停符号的书写手势34、前进符号的书写手势36、以及后退符 号的书写手势38中的至少一个被输入到音乐播放器图标20上。

当书写手势被输入时,相对于图3和图4的如上所述的,相应的命令被 执行。

因此,根据本发明的实施例,用户输入用于在音乐播放器图标20上进 行播放、暂停、前进、和后退的书写手势的至少一个,使得仅仅书写手势的 一个输入可以使音乐播放器20播放所需的音乐,而不需要用于播放所需音 乐的后续的若干个过程。

图6是示出根据本发明实施例的,选择和/或删除在移动终端上显示的列 表的操作屏幕的视图。

楔形符号46被定义为用于选择在列表中的项目的书写手势,并且删除 符号42被定义为用于删除的书写手势。书写手势被映射到列表中,并且被 事先存储在书写手势数据库152中。可以在执行命令数据库154中存储被映 射到删除符号书写手势42的列表中项目删除命令,以及被映射到楔形符号 书写手势46的列表中项目选择命令。

如在屏幕S141中所示,利用用户的手指或专用笔,删除符号书写手势 42被输入在列表中的至少一个项目40上。如在屏幕S142中所示,同时选 择符号44和删除符号42可以被输入来作为书写手势。或者,如在屏幕S143 中所示,用于选择在照片列表中的至少一个照片45的楔形符号46和用于删 除楔形符号46被输入到的照片的删除符号48可以同时被输入来作为书写手 势。

如在屏幕S141中所示,可以直接删除在其上输入删除符号书写符号42 的列表中的单个项目40。如在屏幕S142中所示,可以删除在其上输入同时 选择符号44和删除符号42的列表中的项目40和41。或者,如在屏幕S143 中所示,可以直接删除在其上输入楔形符号46和删除符号42的书写手势的 多个照片。

因此,根据本发明的实施例,用户在列表的项目上输入书写手势,使得 他/她可以在不需要用于选择在列表中的项目、同时在列表中选择若干个项目 的后续的处理的情况下通过输入单个书写手势来选择在列表中的多个项目, 或者如现有的若干个过程那样来删除所选择的项目。

图7是示出根据本发明实施例的,直接改变在移动终端中的图库图标的 书写手势的视图。

删除符号54被定义为删除图库图标50的代表图片52。下一图片选择 符号56被定义为将代表图片52替换为在图库应用中直接在当前显示的代表 图片的下一个处存储的图片。上一个图片选择符号38被定义为将代表图片 替换为直接在当前的代表图片之前存储的图片。符号被映射到用于图库图标 30的书写手势,并且被事先存储在书写手势数据库152中。

如由S133、S134、和S135所指示地,在图库图标50上可以输入删除 符号54、下一个图片选择符号56、上一个图片选择符号58来作为书写手势。

如由S133所指示,图库图标50的当前显示的代表图片52可以被删除。 如由S134所指示,图库图标50的当前显示的代表图片52可以利用直接在 当前显示的代表图片的下一个处存储的图片来替代。如由S135所示,图库 图标50的当前显示的代表图片52可以由直接在当前显示的代表图片之前存 储的图片来代替。

已经根据特定的项目来描述了通过识别书写手势而执行移动终端的应 用的方法,但是基于用户或制造商的设置,其可以应用到其他的图标和其组 合上。

如上参考图2C所示,书写手势可以与两个项目相关联地输入。以下将 详细说明根据本发明实施例的,与两个不同的项目相关联的书写手势。

图8至图14是示出了在其中输入目标为两个项目的书写手势的实施例。

图8是示出根据本发明实施例的,将利用移动终端的相机图标应用拍摄 的最新照片直接在线地上载到社交网络上的操作屏幕的视图。

参照图1、图2C、和图8,与移动终端的屏幕从相机图标310到社交网 络图标320接触的箭头状的书写手势330被映射到相机图标310和社交网络 图标320,以作为用于将利用相机图标拍摄的照片直接上载到在线的社交网 络上的书写手势。书写手势被存储在书写手势数据库152中。

如图8的屏幕S301所指示地,箭头状的书写手势330可以通过专用笔 来输入。

因此,根据本发明的实施例,用户输入与相机图标310和社交网络图标 320相关联的书写手势,使得他/她可以通过输入单个书写手势,而将最新拍 摄的照片上载到社交网络。

图9示出根据本发明实施例的,通过消息图标,将通过消息应用接收的 最新消息的相应电话号码应用到呼叫应用上以执行呼叫的操作屏幕的视图。

参照图1和图9,如在屏幕S402中所示,从消息图标410到呼叫图标 420的箭头状的书写手势407可以被映射到消息图标410和呼叫图标420, 以作为用于应用与通过消息应用生成的消息信息相关的代表数据,并且书写 手势407可以被存储在书写手势数据库152中。从消息图标410到呼叫图标 420的箭头状的书写手势407可以被映射到呼叫执行命令,该命令可以事先 被存储在执行命令数据库154中。

代表数据可以被预设为最新发送或接收的文本消息的电话号码信息。执 行命令可以将与通过与消息图标410相关的消息应用产生的消息信息相关的 数据应用到与呼叫图标420相关的呼叫应用的呼叫功能执行上。例如,执行 命令可以将最新通过与消息图标410相关的消息应用接收的消息的电话号码 数据应用到与呼叫图标420相关的呼叫应用上,以尝试进行呼叫服务。

如由屏幕S403所指示地,目标项目功能执行控制器167将电话号码, 即,通过与消息图标410相关的消息应用产生的代表数据应用到与呼叫图标 420相关的呼叫应用上,以根据通过执行命令提取器166所提取的执行命令 来控制呼叫功能。

如S401所指示地,当接收到消息时,在消息图标410上显示接收的消 息的数量405。或者,在本发明的实施例中,诸如姓名407和/或消息发送者 的电话号码的识别信息可以显示在消息图标410上,或者接收到的消息的数 量405、姓名407和发送方的电话号码可以被顺序地显示。通过这样做,用 户可以更迅速地计算出与接收的消息有关的信息。

在本发明的实施例中,与消息图标410有关的、由消息应用最后生成的 电话号码数据可以被设置为与消息图标410相关的消息应用的代表数据。代 表数据可以被转换为图像,并且显示在消息图标410上。代表数据可以是消 息应用的标识内容(identify content)。

根据本发明的上述实施例,用户输入与消息图标410和呼叫图标420相 关联的书写手势,使得他/她可以直接通过单个书写手势来进行到通过消息应 用最后接收的文本消息的发送方电话号码的呼叫。

图10是示出根据本发明实施例的,将通过呼叫图标应用最后接收的呼 叫的相应电话号码应用到消息应用以书写消息的操作屏幕的视图。

图10是示出了其中由与呼叫图标420相关的呼叫应用产生的电话号码 数据被定义为代表数据,并且被直接应用到与消息图标410相关的消息应用 上的操作屏幕的视图。与图9中所示的书写手势相反,箭头状的书写手势从 呼叫图标420指向消息图标410。

参照图1、图2C、和图10,与消息图标410和呼叫图标420相关联的 箭头状的书写手势可以被映射到消息图标410和呼叫图标420,作为应用与 由呼叫应用所产生的消息信息相关的代表数据的书写手势,并且被存储在书 写手势数据库152中。与消息图标410和呼叫图标420相关联的箭头状的书 写手势可以被映射到消息发送命令,该命令可以被事先存储在执行命令数据 库154中。

代表数据可以被预设作为最后接收的呼叫的电话号码信息。通过消息应 用,执行命令可以将作为由呼叫应用产生的代表数据的、与电话号码信息相 关的数据直接应用到消息的传输中。

接着,如S502和S503中所指示地,目标项目功能执行控制器167可以 将电话号码,即,由呼叫应用所产生的代表数据应用到消息应用,以根据所 由执行命令提取器166所提取的执行命令来控制消息发送功能。

如由S501所指示地,当存在未接呼叫或最新接收的呼叫时,诸如主叫 方姓名和/或电话号码的信息可以被转换为用于显示的图像,并且未接呼叫的 次数以及主叫方的姓名和电话号码可以顺序地显示。通过这样做,用户可以 更迅速地确定关于未接呼叫和接收的呼叫的信息。

具体地,在本发明的实施例中,通过与呼叫图标510相关的呼叫应用最 后产生的电话号码数据可以被设置为代表数据,并且代表数据可以被转换成 图像507,以显示在呼叫图标510上。代表数据可以是呼叫应用的标识内容。

根据本发明的上述实施例,用户输入与消息图标410和呼叫图标420相 关联的书写手势,使得他/她可以通过仅仅输入上述的书写手势而进行呼叫。

图11是示出根据本发明实施例的,将由计划器应用生成的每月的日程 表信息直接存储到备忘录应用中的操作屏幕的视图。

可以输入从计划器图标610指向备忘录图标620的箭头状的书写手势。 在书写手势的输入之后,执行图2C的步骤320-350。

因此,当如屏幕S601中所示,与计划器图标610和备忘录图标620相 关联的书写手势被输入时,由与计划器图标610相关的计划器应用所产生的 每月的日程数据615被直接存储到与备忘录图标620相关的备忘录应用中, 如屏幕S602中所指示地。计划器图标610的代表数据可以被预设为最新输 入的每月日程615。

图12是示出根据本发明实施例的,将通过地图应用搜索用户的当前位 置所输出的地图数据直接存储到备忘录应用中的操作屏幕的视图。

参照图12,如由屏幕S701所指示地,从地图图标710指向备忘录图标 720的箭头状的书写手势可以被输入,以将通过与地图图标710相关的地图 应用所产生的当前位置地图数据直接存储到与备忘录图标720相关的备忘录 应用中。

当输入书写手势时,执行图2C的步骤320-350。

如在屏幕S702中所示地,通过与地图图标710相关的地图应用所产生 的当前位置地图数据715可以被直接存储到与备忘录图标720有关的备忘录 应用中。地图图标710的代表数据可以事先被预设为最新搜索的地图。

图13是示出根据本发明实施例的,将通过相机应用拍摄的最新照片直 接存储到备忘录应用中的操作屏幕的视图。

参照图13,如由屏幕S801所指示地,可以输入从相机图标指向备忘录 图标820的箭头状的书写手势,以将通过与相机图标91相关的相机应用所 产生的照片数据815直接存储到备忘录应用820中。

当输入书写手势时,执行图2C的步骤320-350。

如在屏幕S802中所示,由与相机图标相关的相机应用所产生的最新的 照片数据815可以被直接存储在与备忘录图标820相关的备忘录图标应用 中。相机应用的代表数据可以被预设为最新的照片。

图14是示出根据本发明实施例的,将与图库图标910相关的图库应用 中存储的最新照片直接存储到备忘录应用中的操作屏幕的视图。

参照图14,从图库图标910指向备忘录图标920的箭头状的书写手势被 输入,以将通过与图库图标910相关的图库应用所存储的照片数据950直接 存储到与备忘录图标920相关的备忘录应用中,如在屏幕S901中所示。

当输入书写手势时,执行图2C的步骤320-350。

如在屏幕S802中所指示地,通过与图库图标910相关的图库应用最后 存储的照片数据915可以被直接存储到与备忘录图标920相关的备忘录应用 中。图库图标910的代表数据被预置为最后存储的照片。

图15是示出根据本发明实施例的,利用网络浏览器应用来直接搜索与 在备忘录应用中存储的主体文本相关的一些数据的操作屏幕的视图。

特别地,图15中所示的实施例示出了具有相对较宽触摸屏的移动终端 中所实施的操作屏幕。

参照图15,如在屏幕S151中所示,从屏幕S152中的备忘录图标50指 向屏幕S153中的网络浏览器图标57的箭头状的书写手势可以被输入,其 将由与备忘录图标50相关的备忘录应用所显示的主体文本的一些数据55选 择到网络浏览器57。

当书写手势被输入时,执行图2C的步骤320-350。

如在屏幕S154中所示,通过与网络浏览器图标57相关的网络浏览器应 用,利用用作关键字的数据55来寻找网页。与备忘录图标50相关的备忘录 图标应用的代表数据被设置为由用户通过书写手势而选择的主体文本信息 数据。

具体地,如屏幕S154中所示,可以使用书写手势,利用从主体文本信 息数据中选择的“Garden of Gods(天帝花园)”的词语来通过网络浏览器应 用执行搜索,并且可以显示搜索结果。

如上所述,根据由本发明提出的,通过识别用户的书写手势来控制移动 终端的功能的执行的方法以及用于执行该方法的装置,用户可以容易地达成 对移动终端的功能的执行,以及实现对其的控制。此外,用于移动终端的功 能的执行的输入过程及其控制被简化,使得用户可以方便地和容易地执行移 动终端的功能执行,以及对其的控制。

对于利用与项目相关联的输入书写手势来执行在多个项目之间的特定 功能,可以简化用于功能执行的输入过程以及对其的控制。

在支持本发明的书写手势输入模式的移动终端中输出内容的方法可以 通过程序命令来实施,其可以通过各种的计算设备来执行并且可以存储在计 算机可读记录介质中。计算机可读记录介质可以包括程序命令、数据文件、 数据结构、或它们的组合。存储在记录介质中的程序命令可以为本发明而设 计和配置,或者可以对于公共使用而言是本领域技术人员所公知的。

计算机可读介质的示例包括诸如硬盘、软盘、和磁带的磁介质;例如压 缩盘ROM(CD-ROM)、以及数字视频盘(DVD)的光学介质;诸如可光读 磁盘的磁光介质;以及专门配置为存储和执行程序命令的,诸如ROM、RAM、 闪存等的硬件设备。程序命令的示例包括诸如由编译器产生的机器代码,以 及包含可能由计算机使用解释器来执行的高级代码的文件这两者。所述硬件 装置可以被配置为充当一个或多个软件模块,以便执行本发明的上述实施例 的操作,或反之亦然。

虽然已参照本发明的某些实施例来示出和描述了本发明,但是本领域技 术人员应当理解,可以在不脱离由所附权利要求限定的本发明的精神和范围 的情况下,对本发明在形式和细节上进行各种改变。

去获取专利,查看全文>

相似文献

  • 专利
  • 中文文献
  • 外文文献
获取专利

客服邮箱:kefu@zhangqiaokeyan.com

京公网安备:11010802029741号 ICP备案号:京ICP备15016152号-6 六维联合信息科技 (北京) 有限公司©版权所有
  • 客服微信

  • 服务号