商品读取装置及商品读取方法

摘要

本发明公开一种商品读取装置及商品读取方法，能够在附有条形码的商品和未附有条形码的商品中不较大变换操作次序地读取商品信息，该商品读取装置具有从通过摄像部摄像的图像中识别该图像所包含的商品的功能和从该图像中识别附在该图像所包含的商品上的数据代码的功能，并能够通过切换部进行切换。该商品读取装置将通过商品识别处理识别出的商品的信息或通过数据代码识别处理识别出的数据代码的信息，输出给POS终端。

说明书

本申请主张申请日为2012年1月30日、申请号为 JP2012-016328以及2012年3月5日、申请号为JP2012-047827的 日本申请为优先权，并引用上述申请的内容。

技术领域

本发明涉及一种采用摄像部的商品读取装置及商品读取方法。

背景技术

在数据代码的一种中有条形码。在超市等中销售的商品中大都 附有表示该商品固有的商品代码的条形码。通过用扫描器扫描附在 商品上的条形码来读取所述商品的商品代码的商品读取装置已广泛 普及。此外，也开发有一种商品读取装置，通过从通过CCD摄像头 等的摄像部摄影的商品的图像中识别附在该商品上的条形码，从而 读取所述商品的商品代码。通过这些商品读取装置读取的商品代码 被输出给POS（Point Of Sales：销售点）终端，并用于所述商品的 销售数据处理。

不过，在所有的商品中不一定都附有条形码。例如，散装卖的 蔬菜、水果、家常菜等中大多未附有条形码。因而，为了也适应这 样的无条形码的商品，现有的商品读取装置通常采用触摸面板来做 显示设备。而且，在该触摸面板的画面上显示无条形码的商品的图 像等，当通过操作员的触摸输入选择商品时，则从商品读取装置向 POS终端输出已被选择的商品的商品代码。

操作现有的该种商品读取装置的操作员（店员或顾客）对附有 条形码的商品向读取窗照亮商品的条形码部分。不过，对未附有条 形码的商品，从触摸面板的画面中选择希望的商品。这样，在附有 条形码的商品和未附有条形码的商品中操作次序较大不同。

发明内容

鉴于上述技术问题，本发明的目的在于提供一种商品读取装置 及商品读取方法，其能够迅速、准确地处理附有条形码的商品和未 附有条形码的商品读取商品信息的读取。

本发明涉及的商品读取装置，包括：商品识别部、数据代码识 别部、切换部、以及输出部。商品识别部，从摄像部摄像的图像中 识别该图像所包含的商品。数据代码识别部，从摄像部摄像的图像 中识别附在该图像所包含的商品上的数据代码。切换部，切换使在 商品识别部的商品识别处理和数据代码识别部的数据代码识别处理 中的任意一个处理有效。以及输出部，输出通过商品识别部识别出 的商品的信息或通过数据代码识别部识别出的数据代码的信息。

本发明所涉及的商品读取方法，包括：商品识别步骤，从摄像 部摄像的图像中识别该图像所包含的商品；数据代码识别步骤，从 所述图像中识别附在该图像所包含的商品上的数据代码；切换步骤， 切换使在由所述商品识别步骤的商品识别处理和由所述数据代码识 别功能的数据代码识别处理中的任一处理有效；以及输出步骤，输 出通过所述商品识别步骤识别出的商品的信息或通过所述数据代码 识别步骤识别出的数据代码的信息。

附图说明

图1是第一实施例所涉及的店铺结账系统的外观图。

图2是表示列入该系统的商品读取装置和POS终端的硬件构成 的框图。

图3是表示该系统所用的商品数据文件的数据结构的示意图。

图4是表示在该系统的商品读取装置中CPU实现的功能构成的 示意图。

图5是表示在该系统的商品读取装置中CPU按照商品读取程序 执行的信息处理的要部次序的流程图。

图6是表示在该系统的商品读取装置中CPU按照商品读取程序 执行的信息处理的要部次序的流程图。

图7是表示在该系统的商品读取装置中显示在触摸面板上的登 记画面的一例俯视图。

图8是表示在该系统的商品读取装置中显示在触摸面板上的图 像识别画面的一例俯视图。

图9是表示在该系统的商品读取装置中显示在触摸面板上的商 品确定画面的一例俯视图。

图10是表示在该系统的商品读取装置中显示在触摸面板上的 数量输入画面的一例俯视图。

图11是表示在第二实施例所涉及的商品读取装置中CPU按照 商品读取程序执行的信息处理的要部次序的流程图。

图12是表示在第二实施例所涉及的商品读取装置中CPU按照 商品读取程序执行的信息处理的要部次序的流程图。

图13是表示在第二实施例所涉及的商品读取装置中显示在触 摸面板上的图像识别画面的一例俯视图。

图14是表示在第三实施例所涉及的商品读取装置中CPU按照 商品读取程序执行的信息处理的要部次序的流程图。

图15是表示在第四实施例所涉及的商品读取装置中CPU按照 商品读取程序执行的信息处理的要部次序的流程图。

图16是第五实施例所涉及的商品读取装置的外观立体图。

具体实施方式

下面，参照附图对商品读取装置的实施例进行说明。该实施例 是应用于竖直设置在超市等店铺所设置的结账台上的立式商品读取 装置的例子。

第一实施例

图1是一实施例所涉及的店铺结账系统的外观图。该系统包括 作为登记部的商品读取装置1、以及作为结算部的POS（Point Of  Sales：销售点）终端2。商品读取装置1安装在结账台3上。POS 终端2通过拉出装置5设置在收银台4上。商品读取装置1和POS 终端2通过未图示的通信电缆电气连接。

商品读取装置1具有键盘11、触摸面板12及顾客用显示器13， 作为商品登记所需的设备。这些显示/操作设备（键盘11、触摸面板 12及顾客用显示器13）安装在构成商品读取装置1的本体的薄的矩 形形状的壳体1A上。

壳体1A内置有摄像部14。此外，矩形状的读取窗1B形成在 壳体1A的正面上。摄像部14具有作为区域图像传感器的CCD （Charge Coupled Device：电荷耦合器件）摄像元件及其驱动电路、 以及用于使摄像区域的图像在CCD摄像元件上成像的摄像镜头。摄 像区域就是指从读取窗1B通过摄像镜头在CCD摄像元件的区域上 成像的帧图像的区域。摄像部14输出通过摄像镜头在CCD摄像元 件上成像的摄像区域的图像。

POS终端2具有键盘21、操作员用显示器22、顾客用显示器 23及票据打印机24，作为结算所需的设备。

结账台3沿其深侧的顾客通道呈细长的形状。收银台4在相对 于沿结账台3进行移动的顾客的移动方向位于下游侧的结账台3的 端部跟前侧，与结账台3大致垂直地设置。而且，该结账台3的跟 前侧和收银台4的跟前侧成为负责结账的店员即所谓的收银员的空 间。

在结账台3的大致中央将商品读取装置1的壳体1A以键盘11、 触摸面板12及读取窗1B分别朝向跟前侧的收银员侧的方式竖直设 置。商品读取装置1的顾客用显示器13朝向顾客通路侧安装在壳体 1A上。

结账台3的隔着商品读取装置1位于顾客移动方向上游侧的负 荷接受面成为用于放置装有购物顾客所购入的未登记的商品M的 购物筐6的空间。此外，下游侧的负荷接受面成为用于放置购物筐 7的空间，该购物筐7用于装入通过商品读取装置1登记的商品M。

图2是表示商品读取装置1和POS终端2的硬件构成的框图。 商品读取装置1装载有作为控制部主体的CPU（Central Processing  Unit：中央处理器）101。而且，该CPU101通过地址总线、数据总 线等的总线102连接有ROM103和RAM104。ROM103存储有通过 CPU101执行的程序。

除此之外，总线102通过输入输出电路（未图示）连接有所述 摄像部14。此外，通过连接接口105及连接接口106，将作为显示/ 操作设备的键盘11、触摸面板12及顾客用显示器13与总线102连 接。触摸面板12诸如包括采用液晶显示器的面板显示器121、以及 重叠配置在该显示部的画面上的触摸面板传感器122。

POS终端2也装载作为控制部主体的CPU201。而且，ROM203、 RAM204、HDD（Hard Disk Drive：硬盘驱动器）装置205、通信接 口206及连接接口207通过总线202与该CPU201连接。此外，所 述键盘21、操作员用显示器22、顾客用显示器23、打印机24及拉 出装置5的各部也分别通过输入输出电路（未图示）与总线202连 接。

通信接口206通过LAN（Local Area Network：局域网）等的网 络，与承担店铺的中枢的工作的存储计算机SC连接。通过该连接， POS终端2可与存储计算机SC进行接收发送数据。例如，POS终 端2从存储计算机SC接收商品数据文件8。接收到的商品数据文件 8被保存到HDD装置205中。

连接接口207通过通信电缆与商品读取装置1的两连接接口 105、106连接。通过该连接，POS终端2可与商品读取装置1进行 发送接收数据。例如，POS终端2接收通过商品读取装置1读取的 商品信息。此外，POS终端2将所述商品数据文件8的数据发送给 商品读取装置1。

图3是表示商品数据文件8的数据结构的示意图。如图3所示， 商品数据文件8与识别各商品的商品代码对应存储有该商品的属性 （商品分类）、名称（商品名）、单价、外观特征参数等。外观特征 参数是对应每个商品将象商品的形状、表面的色彩、图案、凹凸状 况等那样的商品的标准的外观特征量进行数值化的参数。

在包括所涉及的构成的商品读取装置1和POS终端2的店铺结 账系统中，如图4所示，商品读取装置1的CPU101具有作为从作 为摄像单元的摄像部14摄像的图像中识别该图像所包含的商品的 商品识别部31、从摄像部14摄像的图像中识别附在该图像所包含 的商品上的数据代码的数据代码识别部32、切换使商品识别部31 的商品识别处理和数据代码识别部32的数据代码识别处理中的任 一处理有效的切换部33、以及输出通过商品识别部31识别出的商 品信息或通过数据代码识别部32识别出的数据代码的信息的输出 部34的功能。这些功能按照ROM103所存储的商品读取程序来实 现。

参照图5及图6的流程图，对上述CPU101的各功能进行说明。 该流程图是CPU101按照所述商品读取程序执行的信息处理的要部 次序的流程图。

该处理诸如是当从POS终端2通过连接接口105输入有指令商 品登记的开始的命令时开始的。首先，CPU101在触摸面板12的面 板显示部121上显示登记画面40（ST1）。

图7示出登记画面40的一例。如图7所示，登记画面40具有 当前区域41和明细区域42。当前区域41是用于显示最新的登记商 品的商品名、单价、数量、金额等的区域。明细区域42是用于显示 一交易所登记的各商品的商品名、单价、数量、金额等的区域。此 外，登记画面40也显示有“自动识别”按钮43的图像。关于“自 动识别”按钮43的功能进行后述。

接着，CPU101向摄像部14输出摄像导通信号（ST2）。根据该 摄像导通信号，摄像部14开始摄像摄像区域。通过摄像部14摄像 的帧图像被依次保存到RAM104中。因而，CPU101采集RAM104 所保存的帧图像（ST3）。

每采集帧图像，CPU101解析该图像并识别作为数据代码的一 种的条形码（ST4）。图像解析的条形码的识别技术诸如已在日本特 开2008－033640号公报中被记载。

CPU101判定是否能从帧图像中识别出条形码（ST5）。当不能 识别条形码时（ST5的否），CPU101判断“自动识别”按钮43的 图像是否已被触摸操作（ST6）。当未被触摸操作时（ST6的否）， CPU101从RAM104中采集接着的帧图像（ST3）。

当能够从帧图像中识别出条形码时（ST5的是），CPU101从该 条形码中读取二值的码信息（ST7）。而且，CPU101将已读取的码 信息通过连接接口105输出给POS终端2（ST8）。

POS终端2的CPU201当从商品读取装置1中接收码信息时， 则用该码信息检索商品数据文件8。而且，当检测出与所述码信息 一致的商品代码时，则读出与该商品代码对应的商品名、单价等。 而且，将包括该商品代码、商品名、单价以及销售个数、销售金额 等的商品销售数据在RAM204中进行登记处理。此外，将商品代码、 商品名、单价、销售个数、销售金额等的登记商品信息通过连接接 口207输出给商品读取装置1。输出给商品读取装置1的登记商品 信息通过连接接口106分配给触摸面板12，并显示在面板显示部121 所显示的登记画面40的当前区域41上。

在由步骤ST8将码信息输出给POS终端2后，CPU101判断是 否已输入有指令结束商品登记的命令（ST9）。当未输入有结束指令 命令时（ST9的否），CPU101从RAM104中采集接着的帧图像（ST3）。

当通过连接接口105输入有结束指令命令时（ST9的是）， CPU101向摄像部14输出摄像截止信号（ST10）。根据该摄像截止 信号，摄像部14结束摄像区域的摄像。

所述结束指令命令诸如根据键盘11所配置的“合计”键被输入 操作了的情况，从POS终端2输出给商品读取装置1。也就是说， POS终端2的CPU201当从商品读取装置1中输入有“合计”键的 键信号时，则将结束指令命令输出给商品读取装置1。此外，基于 登记在RAM204中的商品销售数据，执行一交易的登记合计处理。

当由步骤ST6检测出“自动识别”按钮43的图像被触摸操作 了时（ST6的是），CPU101在面板显示部121上显示图像识别画面 50。而且，在图像识别画面50上显示通过摄像部14摄像的帧图像 （ST11）。

图8示出图像识别画面50的一例。如图8所示，图像识别画面 50具有帧图像的显示区域51，并重叠地弹出显示在登记画面40上。 这时，“自动识别”按钮43的图像从登记画面40中被消去。

CPU101由从RAM104采集到的帧图像、即图像识别画面50 的显示区域51所显示的帧图像，识别该图像所包含的商品M （ST12）。具体地说，首先，CPU101从帧图像检测出有无皮肤区域。 当检测出皮肤区域时、即检测出有操作员的手的映入时，CPU101 从将帧图像二值化的图像中抽取轮廓线等。通过这样，CPU101对 假想操作员的手正把持的商品M的轮廓抽取进行尝试。当抽取商品 M的轮廓时，则CPU101从该轮廓内的图像中读取商品的形状、表 面的色彩、图案、凹凸状况等的特征量。如果能够读取这些商品特 征量，则视为CPU101能够识别出商品M。CPU101直到能够识别 商品M之前，反复显示区域51所显示的帧图像的商品识别处理。

识别这样的图像中所包含的物体被称为一般物体识别（generic  object recognition：一般物体识别）。关于该一般物体识别的技术在 下述的文献中各种识别技术被说明。

柳井啓司，“一般物体認識の現状と今後”，情報処理学会論 文誌，VoI．48，No．SIG16[平成22年8月10日 検索]，ィソタ一ネット<URL： http;//mm.cs.uec.ac.jp/IPSJ-TCVIM-Yanai.pdf>（柳井启司，“一 般物体识别的现状与未来”，信息处理学会论文志，Vol.48，No.SIG16 “2010年8月10日检索”，互联网＜URL：http：

//mm.cs.uec.acjp/IPSJ-TCVIM-Yanai.pdf＞）

此外，通过对应每个目的物对图像进行区域分割，进行一般物 体识别的技术在下述的文献中被说明。

Jamie Shottonち，“Semantic Texton Forests for  Image Categorization and Segmentation”，[平成22年8月1 O日検索]，ィソタ一ネット<URL: http://citeseerx.ist.psu.edu/viewdoc/download?doi=10.1.1.1 45.3036&rep=rep1&type=pdf>（Jamie Shottonら（杰米肖顿等人）， “Semantic Texton Forests for Image Categorization and  Segmentation：”，“2010年8月10日检索”，互联网＜URL：http： //citeseerx.ist.psu.edu/viewdoc/download？doi＝10.1.1.145.3036&rep ＝rep1&type＝pdf＞）

如果能够从帧图像中识别出商品M，则CPU101将识别出的商 品M的特征量数据输出给POS终端2（ST13）。

POS终端2的CPU201当从商品读取装置1输入商品M的特征 量数据时，则将该特征量数据与商品数据文件8所存储的各商品的 商品不同外观特征参数进行核对。而且，将具有与商品M的特征量 最相似的外观特征参数的商品确定作为商品M。

当商品M被确定时，CPU201从商品数据文件8中读出该商品 M的商品代码、商品名、单价等。此外，将销售个数作为“1”并 计算出销售金额。而且，将商品代码、商品名、单价、销售个数、 销售金额等的确定商品信息通过连接接口207输出给商品读取装置 1。输出给商品读取装置1的确定商品信息通过连接接口106分配给 触摸面板12，并显示在面板显示部121所显示的登记画面40的当 前区域41上。

图9示出在该时间中的登记画面40的显示例。如图9所示，登 记画面40的当前区域41显示有从帧图像中识别出的商品M的名 称、单价、个数、金额等。此外，也显示有“OK”按钮44、“数量” 按钮45以及“取消”按钮46的图像。

由步骤ST13将商品M的特征量数据输出给POS终端2的 CPU101待机确定商品信息（ST14）。而且，如果通过连接接口105 从POS终端2接收到了确定商品信息（ST14的是），则CPU101将 该确定商品信息存储到RAM104中（ST15）。接着，CPU101待机 触摸面板12的“OK”按钮44、“数量”按钮45或“取消”按钮46 中的任一个按钮图像被触摸操作（ST16、ST17、ST18）。

在这里，当根据通过连接接口105输入的触摸面板传感器122 的信号，检测为“取消”按钮46的图像被触摸操作了时（ST18的 是），则CPU101从RAM104采集接着的帧图像（ST3）。这时，登 记画面40再次显示有“自动识别”按钮43的图像代替“OK”按钮 44、“数量”按钮45及“取消”按钮46。

此外，当根据通过连接接口105输入的触摸面板传感器122的 信号，检测为“数量”按钮45的图像被触摸操作了时（ST17的是）， CPU101在面板显示部121上显示数量输入画面60（ST19）。

图10示出数量输入画面60的一显示例。如图10所示，数量输 入画面60包含“0”至“9”的置数键和“Enter（回车）”键，并重 叠地弹出显示在登记画面40上。

CPU101待机从数量输入画面60输入有数量（ST20）。当根据 触摸面板传感器122的信号，检测在由置数键的置数后“Enter”键 被输入了时（ST20的是），CPU101将置数数据识别为数量。而且， 将RAM104所存储的销售个数的数据变更为已被置数的数量。此外， 销售金额的数据也变更为用已被置数的数量乘以单价的金额 （ST21）。这时，如图10所示，当前区域41所显示的销售个数及 销售金额也同样地变更。之后，CPU101再次待机“OK”按钮44、 “数量”按钮45或“取消”按钮46中的任一个按钮图像被触摸操 作（ST16、ST17、ST18）。

另一方面，当根据触摸面板传感器122的信号，检测出为“OK” 按钮44的图像被触摸操作了时（ST16的是），CPU101将RAM104 所存储的商品代码、商品名、单价、销售个数、销售金额等确定商 品信息输出给POS终端2（ST22）。

通过连接接口207从商品读取装置1接收到了确定商品信息的 POS终端2的CPU201将该确定商品信息作为商品销售数据在 RAM204中进行登记处理。

在由步骤ST22将确定商品信息输出给POS终端2后，CPU101 判断指令商品登记的结束的命令是否已被输入（ST23）。当未输入 有结束指令命令时（ST23的否），CPU101从RAM104采集接着的 帧图像（ST3）。这时，登记画面40再次显示有“自动识别”按钮 43的图像代替“OK”按钮44、“数量”按钮45及“取消”按钮46。

当输入有结束指令命令时（ST23的是），CPU101向摄像部14 输出摄像截止信号（ST24）。根据该摄像截止信号，摄像部14结束 摄像。

这样，商品读取装置1通过CPU101按照商品读取程序执行的 信息处理次序的步骤ST4的处理构成数据代码识别部33，通过步骤 ST12的处理构成商品识别部31，通过步骤ST6的处理构成切换部 33，通过步骤ST8或ST13的处理构成输出部34。

此外，数据代码识别部32的数据代码（条形码）的识别处理虽 然只要是在输入有指令商品登记的开始的命令后就可执行，但是商 品识别部31的商品识别处理却当“自动识别”按钮43的图像不被 触摸操作时则不被执行。并且，当在商品识别处理中识别出的一商 品的信息被输出给POS终端2时，则返回到步骤ST3的处理。也就 是说，数据代码识别部32的数据代码的识别处理变为有效。

这样，商品读取装置1将数据代码识别部32的数据代码的识别 处理作为默认处理。而且，当通过自动识别按钮43的操作输入宣告 切换时，则使不是默认的处理、即商品识别部31的商品识别处理有 效。而且，该不是默认的商品识别处理当识别一个商品时就结束， 从而再使作为默认处理的数据代码的识别处理变得有效。

此外，商品读取装置1当在步骤ST6中“自动识别”按钮43 被触摸操作时，则在步骤ST11中使图像识别画面50显示在面板显 示部121上。当显示有图像识别画面50时，则商品读取装置1的操 作员可以识别为不是默认的处理、即商品识别部31的商品识别处理 有效。也就是说，商品读取装置1通过步骤ST11的处理，构成告 知不是默认的处理有效的告知部。

引进有本实施例的店铺结账系统的店铺的收银员每从购物筐6 取出未登记的商品M，都判断在该商品上是否附有条形码。而且， 当附有条形码时，向读取窗1B照亮该商品的附有条形码的面。通 过这样做，按顺序执行图5所示的信息处理次序的步骤ST3、ST4、 ST7、ST8的处理，在触摸面板12所显示的登记画面40的当前区域 41中显示有所述商品M的商品名、销售个数、单价及销售金额。 此外，所述商品M的销售数据在POS终端2中被登记处理。

另一方面，当是未附有条形码的商品时，在触摸触摸面板12 所显示的“自动识别”按钮43的图像后，向读取窗1B照亮该商品。 通过这样做，按顺序执行该信息处理次序的步骤ST11、ST12、ST13、 ST14、ST15的处理，在登记画面40的当前区域41中显示有所述商 品M的商品名、销售个数、单价及销售金额。

这时，销售个数为“1”。当商品M有多个时，收银员触摸“数 量”按钮45的图像。通过这样做，由于显示有数量输入画面60， 所以收银员输入商品M的数量。通过这样做，当前区域41的销售 个数和销售金额被变更。之后，当收银员触摸“OK”按钮47的图 像时，则在POS终端2中对应输入数量的商品M的销售数据被登 记处理。

这样，只要是本实施例的商品读取装置1，则与附有条形码的 商品同样，对未附有条形码的商品也只用向读取窗1B照亮商品就 能够读取商品信息。因此，在附有条形码的商品和未附有条形码的 商品之间，操作次序没有较大更换。

并且，商品读取装置1将数据代码识别部32的数据代码识别处 理作为默认处理，只要“自动识别”按钮43的图像不被操作，商品 识别部31的商品识别处理就变得无效。当前，在超市中销售的商品 中大部分附有作为数据代码的一种的条形码，未附有条形码的商品 很少。因此，操作员对登记商品中的大部分商品仅是向读取窗1B 照亮该商品的条形码，对未附有条形码的一部分的商品只要触摸“自 动识别”按钮43的图像之后，向读取窗1B照亮该商品就可以，所 以能够提供工作效率卓越的商品读取装置1。

此外，当通过商品识别部31的商品识别处理识别有一商品时， 则自动地返回到数据代码识别部32的数据代码识别处理。因此，操 作员只在登记未附有条形码的商品时，触摸“自动识别”按钮43 的图像就可以。因此，在附有条形码的商品比未附有条形码的商品 多的店铺中，由于触摸“自动识别”按钮43的次数很少，所以操作 简便从而效率高。

而且，当操作员触摸“自动识别”按钮43的图像时，则在面板 显示部121上显示有图像识别画面50。因此，操作员因显示有图像 识别画面50所以能够容易地识别商品识别部31的商品识别处理有 效。也就是说，能够让操作员容易识别不是默认的处理为有效。

第二实施例

接着，对第二实施例进行说明。在第一实施例中，不是默认的 处理、即商品识别部31的商品识别处理当识别一个商品时就结束。 而且，默认的处理、即数据代码识别部32的数据代码识别处理再变 得有效。因此，每当登记未附有条形码的商品都需要触摸“自动识 别”按钮43的图像。第二实施例是当连续登记未附有条形码的商品 时，不触摸“自动识别”按钮43的图像就能够处理的实施例。

该第二实施例与第一实施例不同点是CPU201按照商品读取程 序执行的信息处理的一部分的这点，并在图11及图12的流程图中 示出第二实施例中的信息处理的要部次序。另外，对与图5及图6 所示的第一实施例的信息处理次序相同部分附加相同符号，并省略 详细的说明。

如图11所示，在第二实施例中，当在步骤ST6中检测“自动 识别”按钮43的图像被触摸操作了时（ST5的是），则CPU101使 图像识别画面50显示在面板显示部121上。而且，使通过摄像部 14摄像的帧图像显示在图像识别画面50上（ST11）。

图13示出第二实施例中的图像识别画面50的一例。如图13 所示，图像识别画面50具有帧图像的显示区域51，并重叠弹出显 示在登记画面40上。这时，从登记画面40中消去“自动识别”按 钮43的图像，同时显示有“识别结束”按钮47和“取消”按钮48 的图像。

之后，CPU101从图像识别画面50的显示区域51所显示的帧 图像中，识别该图像所包含的商品M（ST12）。此外，CPU101也监 视“识别结束”按钮47或“取消”按钮48的图像是否已被触摸操 作（ST31、ST32）。而且，当“取消”按钮48的图像已被触摸操作 时（ST32的是），CPU101从RAM104中采集接着的帧图像（ST33）。 而且，返回到步骤ST12的处理，CPU101从采集到的帧图像中识别 该图像所包含的商品M（ST12）。

针对于此，当“识别结束”按钮47的图像已被触摸操作时（ST31 的是），CPU101返回到步骤ST3的处理。而且，CPU101从RAM104 中采集接着的帧图像（ST3），分析该图像并识别作为数据代码的一 种的条形码（ST4）。

如果“识别结束”按钮47或“取消”按钮48的图像不被触摸 操作，能够从帧图像中识别商品M（ST31的否，ST32的否），则 CPU101将识别出的商品M的特征量数据输出给POS终端2（ST13）。 之后，CPU101执行在第一实施例中已说明的步骤ST14～步骤ST24 的处理。

不过，在第一实施例中，虽然当在步骤ST23的处理中未输入 有结束指令命令时（ST23的否），CPU101返回到步骤ST12的处理， 但是在第二实施例中经过所述步骤ST33的处理返回到步骤ST12的 处理。也就是说，在第一实施例中，当未输入有结束指令命令时， CPU101从RAM104中采集接着的帧图像并执行条形码的识别处 理，但在第二实施例中CPU101对接着的帧图像执行商品识别处理。

这样，在第二实施例的商品读取装置1中，当“自动识别”按 钮43的图像被触摸操作并进入到不是默认的商品识别处理时，则直 到“识别结束”按钮47被触摸操作之前，不返回到作为默认的处理 的数据代码识别处理。换言之，当不是默认的处理变得有效时，则 直到通过“识别结束”按钮47的触摸输入宣告结束之前维持有效状 态，当宣告结束时则使默认的处理有效。在这里，“识别结束”按钮 47具有作为宣告不是默认的处理的结束的宣告部的功能。

只要是第二实施例的商品读取装置1，则每当连续登记未附有 条形码的商品时，都不会有必须触摸“自动识别”按钮43的图像的 麻烦。

第三及第四实施例

在所述第一实施例或第二实施例中，当在默认处理、即数据代 码识别部32的数据代码识别处理处于有效的状态中，“自动识别” 按钮43的图像被触摸操作时（ST6的是），则不是默认的处理、即 商品识别部31的商品识别处理变为有效（ST12）。因此，当将数据 代码识别部32的条形码的识别精度和商品识别部31的商品的识别 精度进行比较时，则数据代码识别部32的识别精度高。因此，诸如 当即便商品识别部31的商品识别处理变为有效也能够从图像中识 别条形码时，还是执行由数据代码识别部32的数据代码识别处理最 好。

因而，接着，对商品读取装置1还具有在通过切换部33执行变 为有效的识别处理之前，执行未变为有效的识别处理的中断部，并 在虽通过该中断部执行了未变为有效的识别处理却不能识别时，执 行已变为有效的识别处理的第三及第四实施例，进行说明。另外， 第三实施例是在第一实施例所涉及的商品读取装置1中设置了确认 部的实施例，第四实施例是在第二实施例所涉及的商品读取装置1 中设置了确认部的实施例。

图14示出在第三实施例所涉及的商品读取装置1中，CPU101 按照商品读取程序执行的信息处理的要部次序。另外，对与第一实 施例的作为该处理次序的图5共同的处理步骤附加相同符号，并省 略详细的说明。

从对比图5和图14可知，第三实施例与第一实施例不同点是在 步骤ST11的图像识别画面显示处理后追加ST41的判断处理的这 点。也就是说，CPU101再次判定是否能从帧图像中识别出条形码 （ST41）。而且，当能识别出条形码时（ST41的是），CPU101从该 条形码中读取二值的码信息（ST7）。当不能识别出条形码时（ST41 的否），CPU101从帧图像中识别该图像所包含的商品M（ST12）。

这样，在第三实施例中，商品读取装置1通过CPU101执行的 信息处理次序的步骤ST41的处理，构成中断部。

接着，图15示出在第四实施例所涉及的商品读取装置中， CPU101按照商品读取程序执行的信息处理的要部次序。另外，对 与第二实施例的作为该处理次序的图11共同的处理步骤附加相同 的符号，并省略详细的说明。

从对比图11和图15可知，第四实施例与第二实施例的不同点 是在步骤ST11的图像识别画面显示处理后追加了ST51的判断处理 的这点。也就是说，CPU101再次判定是否能从帧图像中识别出条 形码（ST51）。而且，当能识别出条形码时（ST51的是），CPU101 从该条形码中读取二值的码信息（ST7）。当不能识别出条形码时 （ST51的否），CPU101从帧图像中识别该图像所包含的商品M （ST12）。

这样，在第四实施例中，商品读取装置1通过CPU101执行的 信息处理次序的步骤ST51的处理，构成中断部。

根据第三实施例或第四实施例，操作员在触摸了“自动识别” 按钮43的图像后，商品读取装置1也再次执行作为默认处理的数据 代码识别处理，并判定是否能从帧图像中识别出条形码。而且，当 不能识别出条形码时，商品读取装置1执行作为不是默认的处理的 商品识别处理并从帧图像中识别商品。

针对于此，当能识别出条形码时，商品读取装置1读取该条形 码信息，并输出给POS终端2。也就是说，即使在操作员触摸了“自 动识别”按钮43的图像后，商品读取装置1也与商品识别处理相比 优先执行数据代码识别处理。因此，即使商品识别部31的商品识别 处理变为有效，当能够从图像中识别条形码时，也执行由数据代码 识别部32的数据代码识别处理。因此，即使当因误操作按下了自动 识别按钮43时，也能够进行条形码读取。

第五实施例

在所述第一至第四实施例中，在登记画面40上显示“自动识别” 按钮43的图像，作为使切换部33动作的开关。因此，在图1所示 的店铺结账系统中，在登记未附有条形码的商品时，操作员能够按 照以下次序进行工作。

首先，操作员用右手从购物筐6中取出未登记的商品M。而且， 确认在该商品M上是否附有条形码。当未附有条形码时，操作员用 左手触摸“自动识别”按钮43的图像。或者，换左手拿商品M之 后，用右手触摸“自动识别”按钮43的图像。之后，操作员向读取 窗1B照亮商品。通过这样，如果准确地识别出商品，则操作员将 商品放入到购物筐7中。

读取窗1B形成在壳体1A的中央部。另一方面，登记画面40 显示在设置在壳体1A的上方的触摸面板12上。因此，操作员能够 在用未拿商品的手触摸触摸面板12的“自动识别”按钮43后或者 抬起拿商品的手触摸“自动识别”按钮43后，放下手向读取窗1B 举起照亮。这样，当将“自动识别”按钮43设置在触摸面板12上 时，则操作员的工作效率变低。

因而，在第五实施例中，如图16所示，在商品读取装置1中的 读取窗1B的周围部附近配置接触型按钮70，作为使切换部33动作 的开关。在图16的例子中，将按钮70的配置位置设置在接近读取 窗1B的右侧、即顾客移动方向上游侧的侧面。按钮70是静电容量 型触摸开关。

在第五实施例中，操作员按以下的顺序进行商品登记工作。首 先，操作员用右手从购物筐6中取出未登记的商品M。而且，确认 在该商品M上是否附有条形码。当未附有条形码时，操作员用拿商 品的右手的手指触摸按钮70。接着，操作员向读取窗1B照亮商品。 通过这样，如果商品准确地被识别，则操作员将商品放入到购物筐 7中。

这样，根据第五实施例，操作员可在将从顾客移动方向上游侧 的购物筐6中取出的商品隔着商品读取装置1移动并装入到下游侧 的购物6中的一连串工作中，对附有条形码的商品，向读取窗1B 照亮该条形码部分，对未附有条形码的商品，触摸按钮70使切换部 33动作之后向读取窗1B照亮商品M。因此，即使在附有条形码的 商品和未附有条形码的商品处于混在一起的情况下，也由于能够顺 利地登记许多商品，所以能够减轻操作员的工作负荷。

此外，在第五实施例中，按钮70是接触型开关。因此，只要操 作员不触摸按钮70，则商品识别部31的商品识别处理就无效。假 设当应用了非接触型开关时，在操作员向读取窗1B照亮商品时使 商品识别部31的商品识别处理变成有效，尽管附有条形码，却执行 了识别精度低的商品识别处理，不过，在第五实施例中不会发生这 样的问题。

另外，本发明并不限定于上述实施例。

例如，上述各实施例虽然应用于对应有收银员的结账台的商品 读取装置1，但是应用事例并不限定于此。诸如也可以应用于顾客 本身亲自进行结账的自助结账系统的商品读取装置。此外，也可以 将商品读取装置1安装到POS终端2上从而构成为一体。总之，可 以应用于由商品读取装置1和POS终端2构成的结账系统。

此外，在上述第一至第四实施例中，虽然在登记画面40上显示 “自动识别”按钮43的图像作为使切换部33动作的指令，但是切 换部33并不限定于此。诸如也可以将配置在键盘11上的一个键作 为具有与“自动识别”按钮43同样的功能的键。对“OK”按钮44、 “数量”按钮45、“识别结束”按钮47、“取消”按钮46、48也同 样。或者，也可以通过在收银员（或者顾客）的脚下所设置的脚踏 开关构成切换部33。可以通过用脚操作这样的脚踏开关来谋求用户 的操作性提高。

此外，在上述第五实施例中，虽然将作为使切换部33动作的指 令的按钮70的配置位置设置在接近读取窗1B的右侧，但是配置位 置并不限定于此。诸如也可以是在读取窗1B的周围部的上侧或下 侧。此外，不仅在接近读取窗1B的右侧而且在左侧也可以设置按 钮70。通过在读取窗1B的周围部左右设置按钮70，顾客移动方向 无论是从朝向读取窗的右侧向左侧的通道，还是与其相反方向的通 道都具有能够适应的优点。

此外，对在第二及第四实施例中所需要的“识别结束”按钮47， 也可以在读取窗1B的周围部设置接触型按钮来代替它。

此外，在上述实施例中，虽然将图像识别画面50、数量输入画 面60重叠地弹出显示在登记画面40上，但是也可以不是弹出显示， 而是使其显示在面板显示部121上代替登记画面40。

此外，在上述实施例中，虽然将显示图像识别画面50作为告知 部，但是告知部并不限定于此，也可以通过其他显示、声音等的告 知部来告知不是默认的处理为有效。

此外，在上述实施例中，虽然将数据代码识别部32的数据代码 识别处理作为默认处理，但是也可以将商品识别部31的商品识别处 理作为默认的处理。这样的形态如果相对于附有条形码等的数据代 码的商品，未附有条形码的商品的比例较大则确实有效。另外，通 过数据代码识别部32识别的数据代码并不限定于条形码，诸如也可 以是二维代码。

此外，在上述实施例中，虽然在商品数据文件8中存储了不同 商品的外观特征参数，但是即使存储具有标准的外观的商品的图像 信息代替参数，也可以通过商品识别部31识别商品。

此外，上述实施例是在装置内部的作为程序存储部的ROM103 中预先存储有实现发明的功能的商品读取程序的实施例。不过，并 不限定于此，也可以将同样的程序从网络下载到装置中。或者也可 以将存储到存储介质中的同样程序安装到装置中。存储介质只要是 象CD－ROM、存储卡等那样能存储程序且装置可读取的，则其形 态不限。此外，通过安装或下载程序获得的功能也可以与装置内部 的OS（操作系统）等协作来实现其功能。

除此之外，虽然对本发明的几个实施例进行了说明，但是这些 实施例是作为例子提出的，并不意图限定发明的范围。这些新颖的 实施例可以用其他各种形式来实施，只要在不脱离发明的要旨的范 围内可以进行各种省略、替换、变更。这些实施例及其变形均被包 含在发明的范围或要旨中，而且，包含在权利要求的范围所记载的 发明和其均等的范围内。

附图标记说明

1               商品读取装置

2               POS终端

8               商品数据文件

12              触摸面板

14                 摄像部

40                 登记画面

43                 自动识别按钮

47                 识别结束按钮

50                 图像识别画面

60                 数量输入画面

70                 按钮

101、201           CPU