首页> 中国专利> 图像数据输出处理装置以及图像数据输出处理方法

图像数据输出处理装置以及图像数据输出处理方法

摘要

在本发明的图像数据输出处理装置中,在注册时,注册原稿为双面原稿的情况下,注册处理单元还与表示正面以及反面的各个原稿图像的ID相关联地注册用于表示注册原稿的DocID。然后,在核对时,在核对原稿为双面原稿的情况下,对核对原稿的正面图像以及反面图像的每个图像提取相似的ID和与此相关的DocID,从而生成正反的候选列表,在各个列表中,第1候选之间具有相同的DocID的情况下,判定它们相似,在不具有相同的DocID的情况下,将判定结果校正为具有相同的DocID的注册图像。由此,在输入图像数据为双面原稿且包含输出处理受限制的原稿图像的情况下,实现能够更准确地限制其输出处理的图像数据输出处理。

著录项

  • 公开/公告号CN101398649A

    专利类型发明专利

  • 公开/公告日2009-04-01

    原文格式PDF

  • 申请/专利权人 夏普株式会社;

    申请/专利号CN200810161795.9

  • 发明设计人 小西阳介;

    申请日2008-09-26

  • 分类号G03G15/01;G03G15/00;G03G21/04;H04N1/00;H04N1/32;G06F17/30;

  • 代理机构北京市柳沈律师事务所;

  • 代理人吕晓章

  • 地址 日本大阪府

  • 入库时间 2023-12-17 21:40:45

法律信息

  • 法律状态公告日

    法律状态信息

    法律状态

  • 2011-01-12

    授权

    授权

  • 2009-05-27

    实质审查的生效

    实质审查的生效

  • 2009-04-01

    公开

    公开

说明书

技术领域

本发明涉及对输入图像数据进行复印处理、发送处理、编辑处理或者归档处理等的输出处理的图像数据输出处理装置,更详细地说,涉及具有以下功能的图像数据输出处理装置,即将输入图像数据的图像与事先注册的注册原稿的图像进行比较而判定相似性,并基于其判定结果,控制输入图像数据的输出处理。

背景技术

以往,存在以下图像核对技术,即将通过扫描仪等读取原稿所得到的原稿的图像数据与事先注册的注册原稿的图像数据进行比较,并判定其相似性。

在相似性的判定中,例如已知以下方法:通过OCR(Optical CharacterReader:光符阅读机)等从图像中提取关键字,从而进行根据关键字的匹配的方法,或者将对象图像限定为有格线的帐票图像,进行根据格线的特征的匹配的方法(参照专利文献1),或者基于输入图像和注册原稿的颜色分布进行判定的方法(参照专利文献2)等。

此外,在专利文献3中,公开了以下技术:根据输入文本的特征生成描述符(descriptor),使用该描述符、和记录描述符并用于指示包含描述符所生成的特征的文本的列表(list)的描述符数据库,从而进行输入文本和在文本数据库中的文本之间的匹配(matching)。描述符被选择,以使对由于文本的数字化所产生的失真、或输入文本与在文本数据库中要匹配的文本之间的差异不变。

在该技术中,在描述符数据库被扫描时,对于文本数据库中的各个文本的投票进行累积,将最高得票数的一个文本或者得票数超过某一阈值的文本设为匹配文本。

此外,在专利文献4中,公开了以下技术:从数字图像中提取多个特征点,对所提取的各个特征点决定局部的特征点的集合,从所决定的各个集合中选择特征点的子集,将所选择的各个子集作为特征量,而基于子集中的特征点的多个组合,分别求对于几何变换的不变量,将所求出的各个不变量进行组合来计算特征量,对具有算出的特征量的数据库中的文本/图像进行投票,从而检索与所述数字图像对应的文本/图像。

而且,以往,在复印机、传真装置、扫描装置、或者复合机等的对输入图像数据进行复印处理、发送处理、编辑处理或者归档处理等的输出处理的图像数据输出处理装置中,利用这样的原稿核对技术,从而在输入图像数据与注册原稿的图像数据相似的情况下,限制其输出处理。

例如,在彩色图像形成装置中,已知如下技术:为了应对纸币或有价证券的伪造,基于从输入图像数据中检测的模式而判断输入图像数据是否为纸币或有价证券等(注册原稿)的图像数据,在是注册原稿的图像数据的情况下,对输出的图像附加特定的模式(pattern)或者涂满复印图像或者禁止复印动作,以能够根据输出的图像确定进行过复印的图像形成装置。

专利文献1:日本公开专利公报“特开平8-255236号公报(1996年10月1日公开)”

专利文献2:日本公开专利公报“特开平5-110815号公报(1993年4月30日公开)”

专利文献3:日本公开专利公报“特开平7-282088号公报(1995年10月27日公开)”

专利文献4:日本公开第2006/092957号小册子(2006年9月8日公开)

但是,在以往的图像数据输出处理装置中,即使输入图像数据为双面原稿的数据,也不能进行考虑了双面原稿的判定。因此,存在以下问题,即无法判定被限制输出处理的原稿图像的情况,而允许应进行限制的输出处理。

使用图25,说明这种情况。在以往的图像数据输出处理装置中,基本上以一页为单位进行核对。因此,如图25所示,即使核对原稿为正反面分别具有原稿图像X、Y的双面原稿A,正面的原稿图像X和反面的原稿图像Y也作为分别独立的一张原稿图像而对注册图像分别判定相似度,双面原稿的属性不被使用。

因此,如图25所示那样,在正反面的各个原稿图像X、Y都被禁止了输出处理的双面原稿A的情况下,即使能够对正面的原稿图像X判定为与注册图像X相似,也不能对反面的原稿图像Y判定为与注册图像Y相似,导致对原稿图像Y许可输出处理。

在上述的情况下,若预先提供包含注册图像X的注册原稿为双面原稿,而其反面为注册图像Y的信息,能够将其加起来判定,则通过修改对反面的原稿图像Y的判定,从而能够禁止原稿图像Y的输出处理。

发明内容

本发明的目的在于,在判定输入图像数据的图像是否与注册原稿的图像相似,并根据判定结果来控制输入图像数据的输出处理的图像数据输出处理装置中,在输入图像数据为双面原稿,且包含了输出处理被限制的原稿图像的情况下,实现了能够更准确地控制其输出处理的图像数据输出处理装置。

为了达到上述目的,本发明的数据输出处理装置是对输入图像数据进行输出处理的装置,其包括:图像核对单元,从输入图像数据提取图像的特征量,另一方面,将提取出的该特征量与预先注册的注册原稿的图像的特征量进行比较,从而判定所述输入图像数据的图像与注册原稿的图像之间的相似性;以及输出处理控制单元,基于所述图像核对单元的判定结果,控制对于所述输入图像数据的输出处理,其特征在于,

所述图像核对单元对存储单元核对输入图像数据的图像,在所述存储单元中存储由双面原稿构成的注册原稿的正面以及反面的各个图像的特征量,同时与用于识别正面以及反面的各个图像的指标相关联地存储了用于识别包含该注册图像的双面原稿的指标,此外,所述图像核对单元包含:投票处理/候选列表生成单元,在所述输入图像数据为双面原稿的情况下,对该双面原稿的正面图像以及反面图像的每个图像提取具有由所述存储单元所预先决定的基准以上的相似性的注册图像的指标、和与该注册图像相关的注册原稿的指标,从而生成正面候选列表以及反面候选列表;以及双面原稿判定处理单元,参照所生成的正面候选列表以及反面候选列表,在双方的候选列表中包含具有相同的注册原稿的指标的注册图像的情况下,判定具有相同的注册原稿的指标的这些各个注册图像和所述输入图像数据的双面原稿的各个图像相似。

根据这样的结构,在注册原稿为双面原稿的情况下,作为双面原稿的属性被包含在判定注册原稿的相似性时的元素之一,在核对原稿为双面原稿的情况下,能够包含核对原稿的作为双面原稿的属性而判定注册图像,从而能够提高对于双面原稿的相似性的判定精度。

即,在注册原稿为双面原稿的情况下,与用于识别其正面以及反面的各个图像的指标(一例:相当于后述的图像索引ID)相关联地在存储单元中存储用于识别包含该注册图像的双面原稿的指标(一例:后述的原稿索引DocID)。

由此,位于双面原稿的正面以及反面的各个图像能够唯一地确定是包含在哪个双面原稿的图像。

而且,在核对时,在核对原稿为双面原稿的情况下,投票处理/候选列表生成单元对该双面原稿的正面图像以及反面图像的每个图像,提取具有由存储单元所预先决定的基准以上的相似性的注册图像的指标、和与此相关的注册原稿的指标,从而生成候选列表。

在这样生成的正面候选列表以及反面候选列表中,核对原稿的正面以及反面的各个图像有可能相似的注册图像根据其相似的程度而被提取多个。当然,在与注册图像不相似的情况,或除了一个注册图像,相似的程度较低的情况等时,还有候选列表中所列出的候选的注册图像数成为无或一个的情况。

然后,双面原稿判定处理单元参照这样生成的正面候选列表以及反面候选列表,在双方的候选列表中包含了具有相同的注册原稿的指标的注册图像的情况下,判定这些具有相同的注册原稿的指标的各个候选列表的各个注册图像、与在核对模式时输入的双面原稿的各个图像相似。

由此,在核对原稿为双面原稿,且与注册原稿相似(一致)的情况下,能够避免只有核对原稿的一面图像被判定为与注册原稿的一面图像相似,而核对原稿的另一面图像与注册原稿的另一面图像不同的错误判定,能够提高核对原稿为双面原稿时的判定精度。

即,在注册原稿为双面原稿的情况下,能够包含双面原稿的属性在内判定注册图像,从而能够提高对于双面原稿的相似性的判定精度。

因此,起到能够提供如下的图像数据输出处理装置的效果,即在输入图像数据为双面原稿,例如包含应对输出处理控制限制等的输出处理的图像的情况下,能够准确地控制其输出处理。

通过以下所述的记载,能够充分了解本发明的其他目的、特征以及优点。此外,通过参照了附图的以下说明,本发明的优点会很清楚。

附图说明

图1是表示在构成本发明的一实施方式的数字彩色复印机的图像数据输出处理装置中所备置的文本核对处理单元中的投票处理/候选列表生成单元、相似度判定处理单元以及核对结果校正处理单元的各个处理步骤的流程图。

图2是表示构成本发明的一实施方式的数字彩色复印机的图像数据输出处理装置的概略结构的方框图。

图3是表示在图2所示的图像数据输出处理装置中所包含的文本核对处理单元的概率结构的方框图。

图4是表示在图2所示的图像数据输出处理装置中所包含的特征点计算单元的概略结构的方框图。

图5是表示在图2所示的图像数据输出处理装置中所包含的特征量计算单元的概略结构的方框图。

图6是表示一例在图2所示的图像数据输出处理装置的MTF处理单元中所包含的混合滤波器的滤波系数的说明图。

图7是表示一例通过在图2所示的图像数据输出处理装置的特征点计算单元而从输入图像数据中提取的连接区域以及该连接区域的重心的说明图。

图8是表示一例通过在图2所示的图像数据输出处理装置的特征点计算单元而从输入图像数据中包含的字符串提取的多个连接区域的各个重心(特征点)的说明图。

图9是表示一例通过在图2所示的图像数据输出处理装置的特征量计算单元而在计算特征量时所提取的关注特征点以及周边特征点的说明图。

图10(a)~图10(d)是表示一例通过在图2所示的图像数据输出处理装置的特征量计算单元而计算特征量时所提取的关注特征点以及周边特征点的组合的说明图。

图11(a)~图11(d)是表示一例通过在图2所示的图像数据输出处理装置的特征量计算单元而计算特征量时所提取的关注特征点以及周边特征点的组合的说明图。

图12(a)以及图12(b)是表示一例在图2所示的图像数据输出处理装置中,对于在散列表中注册的各个特征点的散列值以及表示输入图像数据的索引的说明图。

图13(a)~图13(c)都是表示通过双面原稿模式所读取的注册原稿的原稿索引DocID、和所包含的正面以及反面的各个原稿图像的图像索引ID之间的关系的说明图。

图14是表示在图2所示的图像数据输出处理装置中,图13(a)~图13(c)所示的注册原稿被读取并存储的双面原稿管理表的说明图。

图15是表示一例在图2所示的图像数据输出处理装置的投票处理单元中的对于各个注册图像的投票数的曲线图。

图16(a)是表示一例在图2所示的图像数据输出处理装置的文本核对处理单元中设置的投票处理/候选列表生成单元所生成的正面候选列表的一例的说明图,图16(b)是表示一例与图16(a)的正面候选列表成对的反面候选列表的说明图。

图17是表示一例在图2所示的图像数据输出处理装置的文本核对处理单元中设置的相似度判定处理单元所判定的核对结果的说明图,是表示在图16(a)以及图16(b)所示的正面以及反面的各个候选列表的例子中的核对结果。

图18(a)是表示一例在图2所示的图像数据输出处理装置的文本核对处理单元中设置的投票处理/候选列表生成单元所生成的正面候选列表的其他例子的说明图,图18(b)是表示一例与图18(a)的正面候选列表成对的反面候选列表的说明图。

图19是表示在图2所示的图像数据输出处理装置的文本核对处理单元中设置的、核对结果校正单元对相似度判定处理单元所判定的核对结果进行校正的例子的说明图,表示在图18(a)以及图18(b)中所示的正面以及反面的各个候选列表的例子中的核对结果。

图20是表示在图2所示的图像数据输出处理装置中所包含的彩色图像输入装置中设置的图像读取装置的结构的说明图。

图21是表示在图2所示的图像数据输出处理装置中包含的文本核对处理单元中的输出处理控制处理的步骤的流程图。

图22是表示在构成本发明的其他实施方式的数字彩色复合机的图像数据输出处理装置的概略结构的方框图。

图23是表示在图22所示的图像数据输出处理装置中的传真处理时的图像数据的流程的说明图。

图24是表示在本发明的其他实施方式的图像数据输出处理装置的概略结构的方框图。

图25是表示以往的图像数据输出处理装置中的问题点的说明图。

具体实施方式

在本发明的一实施方式中,基于图1~图2说明如下。在本实施方式中,说明一例将本发明适用于数字彩色复印机的情况,但本发明并不限定于此。

图2是表示本实施方式的数字彩色复印机(图像数据输出处理装置)1的概略结构的方框图。

如图2所示,数字彩色复印机1包括:彩色图像输入装置2、彩色图像处理装置3、彩色图像输出装置4以及操作面板6。

彩色图像输入装置2是读取原稿的图像而生成图像数据的装置,例如由包括将CCD(Charge Coupled Device:电荷耦合装置)等的将光学信息变换为电信号的装置的扫描单元(未图示)构成。在这里,彩色图像输入装置2将来自原稿的反射光像作为RGB(R:红、G:绿、B:蓝)的模拟信号而输出到彩色图像处理装置3。

彩色图像处理装置3对从彩色图像输入装置2输入的模拟信号进行各种处理,同时将其变换为彩色图像输出装置4所处理的形式而输出到彩色图像输出装置。

彩色图像处理装置3在输入级具有将RGB的模拟信号变换为数字信号的A/D(模拟/数字)变换单元11。输入到彩色图像处理装置3的模拟信号的图像数据由该A/D变换单元11变换为数字信号。

之后,变换为数字信号的RBG信号按照黑斑校正单元12、文本核对处理单元14、输入灰度校正单元15、区域分离处理单元17、颜色校正单元18、黑版生成底色除去单元19、空间滤波处理单元20、输出灰度校正单元21、灰度再现处理单元22的顺序被发送,最终成为数字信号的CMYK信号。然后,通过灰度再现处理单元22输出的数字信号的CMYK信号被暂时存储在存储器中(未图示)之后,被输出到彩色图像输出装置4。

以下说明构成彩色图像处理装置3的上述各个部分的处理。黑斑校正单元12对由A/D变换单元11发送来的数字的RGB信号进行用于消除在彩色图像输入装置2的照明系统、成像系统、摄像系统中所产生的各种失真的处理。此外,黑斑校正单元12进行彩色平衡的调整、以及变换为浓度信号等在彩色图像处理装置3中所采用的图像处理系统容易处理的信号的处理。

在黑斑校正单元12中,各种失真被消除、进行了色平衡的调整的RGB信号(RGB的浓度信号)被输出到文本核对处理单元14。

文本核对处理单元(相似度判定单元/输出处理控制单元)14具有以下功能,即从由黑斑校正单元12发送来的RGB信号(输入图像数据)提取特征点,基于所提取的各个特征点提取输入图像数据的图像的特征量。

文本核对处理单元14在注册模式中,从所输入的注册原稿的图像数据提取图像的特征量,同时如后所述,将所提取的特征量与表示注册图像的图像索引ID、表示包含该注册图像的注册原稿的原稿索引DocID、表示该注册图像位于注册图像的正面以及反面的哪一面的面信息一同注册到存储部件中。

此外,在核对模式中,从所输入的核对原稿的图像数据提取特征量,同时与已经注册的注册图像的特征量进行比较,从而判定核对原稿的图像(以下,也称为核对图像)是否与注册图像相似的相似性判定处理。

而且,细节在后面叙述,但在本实施方式中,在核对模式中,核对原稿为双面原稿的情况下,使用表示上述注册图像的图像索引ID、表示包含该注册图像的注册原稿的原稿索引DocID、表示该注册图像位于注册图像的正面以及反面的哪一面的面信息,进行利用了双面原稿的属性的核对。

此外,文本核对处理单元14具有作为输出处理控制单元的功能,若在相似性判定处理中,判定为与注册原稿相似,则输出用于禁止对于输入图像数据的输出处理(在彩色复印机中为图像形成处理)等的控制信号。

此外,文本核对处理单元14还将输入信号原样输出到后级的输入灰度校正单元15。

输入灰度校正单元15对于通过文本核对处理单元14发送来的RGB信号,进行底色(底色的浓度分量:底色浓度)的除去或对比度等的图像质量调整处理。在输入灰度校正单元15中进行了图像质量调整处理的RGB信号被送到区域分离处理单元17。

区域分离处理单元175通过RGB信号,将输入图像中的各个像素分离为字符区域、网点区域、照片区域的任一个区域。区域分离处理单元17基于分离结果,将用于表示像素属于哪个区域的区域识别信号输出到颜色校正单元18、黑版生成底色除去单元19、空间滤波处理单元20以及灰度再现处理单元22。此外,区域分离处理单元17还将由输入灰度校正单元15输出的输入信号原样输出到后级的颜色校正单元18。

为了真实地实现颜色再现,颜色校正单元18进行用于消除色浊的处理,所述色浊是基于包含不需要的吸收分量的CMY(C:青、M:品红、Y:黄)色材的分光特性。

黑版生成底色除去单元19进行如下处理,即由颜色校正之后的CMY的三个颜色信号而生成黑色(K)信号的黑版生成,从原来的CMY信号中除去通过黑版生成所得到的K信号而生成新的CMY信号的处理。由此,CMY的三个颜色信号变换为CMYK的四个颜色信号。

空间滤波处理单元20对于通过黑版生成底色除去单元19所输入的CMYK信号的图像数据,基于区域识别信号而进行通过数字滤波器的空间滤波处理,校正空间频率特性。由此,能够减轻输出图像的模糊或粒状性劣化。灰度再现处理单元22也与空间滤波处理单元20同样地,基于区域识别信号对CMYK信号的图像数据进行规定的处理。

例如,特别是为了提高黑色字符或者颜色字符的再现性,在区域分离处理单元17中分离为字符的区域,由空间滤波处理单元20的空间滤波处理中的清晰度增强处理,高频的增强量被增大。同时,在灰度再现处理单元22中,适于高频的再现的高分辨率的屏幕(screen)下的二值化或者多值化处理被选择。

此外,关于在区域分离处理单元17中分离为网点区域的区域,在空间滤波处理单元20中,进行用于除去输入网点分量的低通滤波处理。然后,在输出灰度校正单元21中,进行了将浓度信号等的信号变换为作为彩色图像输出装置4的特性值的网点面积率的输出灰度校正处理之后,在灰度再现处理单元22中进行灰度再现处理(半色调生成),以使最终将图像分离为像素而能够再现各自的灰度。关于由区域分离处理单元17分离为照片的区域,进行重视灰度再现性的屏幕(screen)下的二值化或者多值化处理。

这样进行了各种处理的图像数据被暂时存储在未图示的存储器中之后,在规定的定时被读出并被输入到彩色图像输出装置4。

然后,在上述的文本核对处理单元14的核对模式时的相似性判定处理中,在被判定为与注册图像相似,例如输出禁止核对图像的输出处理的控制信号的情况下,在从该存储器读出图像数据时,该页的图像数据的数据值被置换为“0”或者“255(8比特的情况下)”,以使其成为不可视。由此,通过彩色图像输出装置4所输出的输出物成为整个页面被涂满的状态或者白纸状态。或者,在输出禁止核对图像的输出处理的控制信号的情况下,也可以停止输出(不输出)。

彩色图像输出装置4将从彩色图像处理装置3输入的图像数据输出到记录片材(例如纸等)上。彩色图像输出装置4的结构没有特别限定,例如可使用采用了电子照片方式或喷墨方式的彩色图像输出装置。

操作面板6例如由液晶显示器等的显示单元和设定按钮等构成(都未图示),将与数字彩色复印机1的主控制单元(未图示)的指示对应的信息显示在所述显示单元,同时将经由所述设定按钮而从用户输入的信息传达到所述主控制单元。用户可经由操作面板6输入对于输入图像数据的处理请求、处理张数等。

所述主控制单元,例如由CPU(Central Processing Unit:中央处理器)等构成,基于在未图示的ROM等中存储的程序或各种数据、从操作面板6输入的信息等,控制数字彩色复印机1的各个部分的动作。

接着,使用图20,说明在所述彩色图像输入装置2中所包括的图像读取装置的结构,所述图像读取装置对原稿图像进行扫描从而读取图像信息作为图像数据。

图20是表示所述彩色图像输入装置2中所包含的图像读取装置50的结构的说明图。如图20所示,图像读取装置50包括:图像传感器单元53,读取在第2接触玻璃52上移动的原稿的上侧的图像;以及读取单元54,通过对放置在第1接触玻璃51上的原稿进行扫描来读取。

由此,图像读取装置50由使原稿静止而读取图像的静止读取模式、传送原稿的同时读取图像的移动读取模式、或者传送原稿的同时读取原稿的双面图像的双面原稿模式,能够进行对于原稿的图像读取。

作为在第2接触玻璃52上移动原稿的方法,例如有ADF(Auto DocumentFeeder:自动文档供给装置)。在通过ADF等而沿着图中的原稿传送路径56传送原稿的情况下,匹配辊对55进行如下动作,即通过被传送的原稿的前端贴到匹配辊对55的接头部分,从而在原稿中形成限制的弯曲之后旋转,使得将原稿传送到下流侧。此时,通过匹配辊对55的接头部分,原稿的前端被匹配为与传送方向成直角。

在图中,参照标号57是对放置在第1接触玻璃51上的原稿进行按压的原稿按压垫57,参照标号58是通过ADF等而传送的原稿的导向装置(guide)。此外,参照标号59是遮光构件,用于防止读取单元54的光源的光进入图像传感器单元53,而图像不能以合适的浓度读取。

其中,原稿按压垫57、匹配辊对55、原稿传送路径56、图像传感器单元51、上侧原稿传送导向装置58等构成上部机架(原稿盖)60,第1接触玻璃53、第2接触玻璃52、读取单元54构成下部机架61。而且,上部机架60构成为相对于下部机架61可开闭。

所述读取单元54包括第1扫描单元63、第2扫描单元64、成像透镜65、CCD(Charge Coupled Device)66。第1扫描单元63是沿着第1接触玻璃51从左到右以一定速度V移动的同时曝光原稿的单元,其包括光源(曝光灯)62、将原稿的反射光导入到第2扫描单元54的第1反射镜67。

第2扫描单元64追随第1扫描单元63以V/2的速度移动,其包括将来自第1反射镜67的光导入到成像透镜65、CCD66的第2以及第3反射镜68、69。

成像透镜65是使来自第3反射镜69的反射光在CCD66上成像的透镜。CCD66是将来自成像透镜65的光变换为模拟的电信号的装置。另外,该电信号通过后述的图像处理装置而变换为数字的图像数据。

第2接触玻璃52是用于放置通过移动读取模式、双面读取模式读取的原稿的台面。在通过移动读取模式、双面读取模式读取原稿时,所述读取单元54从原来位置(未图示)移动到图中的第2接触玻璃52的位置,在通过静止读取模式读取原稿时,从图中的位置P而根据由未图示的原稿尺寸检测部件所检测的原稿尺寸移动限制位置。

此外,在以双面读取模式读取时,例如设定为由所述读取单元54读取双面原稿的正面时,由所述读取单元54所读取的图像数据,首先输入到图像处理装置中,之后,由所述图像传感器单元53所读取的图像数据输入到图像处理装置。在由所述读取单元54所读取的图像数据被图像处理装置处理的期间,由所述图像传感器单元53读取的图像数据存储在存储器中,在由所述读取单元54读取的图像数据的处理结束之后,从存储器被读出而被进行处理。

另外,作为原稿尺寸检测部件,考虑到如下的结构,即通过配置在图像输入装置内的光电晶体管等的光电转变元件,检测放置在原稿台上的主扫描方向、副扫描方向的原稿尺寸,或者检测从操作面板由用户选择的原稿的尺寸的(CPU)等的结构。

接着,说明文本核对处理单元(图像核对单元、输出处理控制单元)14的细节。本实施方式的文本核对处理单元14,首先从输入图像数据中提取多个特征点,对于所提取的各个特征点决定局部的特征点的集合。接着,从所决定的各个集合中选择特征点的子集,将所选择的各个子集作为特征量,而基于有关子集中的特征点的多个组合,分别求对于几何变换的不变量。然后,将所求出的各个不变量进行组合而对每个特征点计算作为特征量的散列值。

然后,在输入图像数据为注册原稿的注册模式中,将计算出的散列值与表示注册图像的图像索引ID相关联地存储在散列表(未图示)中。而且,在要注册的原稿为双面原稿的情况下,与用于识别其正面以及反面的各个原稿图像的图像索引ID相关联地在双面原稿管理表(未图示)中存储作为用于识别包含该注册图像的双面原稿的指标的原稿索引DocID、以及表示注册图像位于注册原稿的正反哪一面的面信息。

另一方面,在输入图像数据为核对原稿的核对模式中,对与算出的散列值对应的图像索引进行投票,若投票结束,还考虑投票结果和原稿索引以及它的面信息,从而判定核对图像和注册原稿之间的相似性。

此外,作为可成为所述注册原稿以及核对原稿的输入图像数据,除了由扫描仪读取并输入原稿的图像数据之外,有使用计算机(软件)生成的电子数据,例如使用计算机(软件)在电子数据的格式中输入必要事项而生成的电子数据的两组,此外,在考虑了实际使用的情况下,考虑到对基于纸的数据进行电子化了的数据、以及由电子数据直接生成的数据(电子申请等)两组。

图3是表示文本核对处理单元14的概略结构的方框图。如该图所示,文本核对处理单元14包括:特征点计算单元31、特征量计算单元32、投票处理/侯选列表生成单元33、相似度判定处理单元34、核对结果校正处理单元(判定结果校正处理单元)35、注册处理单元36、控制单元7、存储器8。

控制单元7控制文本核对处理单元14的各个部分的动作。另外,控制单元7也可以被包括在用于控制数字彩色复印机1的各个部分的动作的主控制单元中,也可以与主控制单元分开设置,协助主控制单元控制文本核对处理单元14的动作。

在文本核对处理单元14的相似性判定处理的结果,判定为无相似性的情况下,控制单元7输出许可对于该图像数据的输出处理的控制信号。另一方面,在判定为有相似性的情况下,控制单元7输出对于输入图像数据的输出处理进行控制的控制信号。

在控制(限制)输出处理时,对每个注册图像决定所限制的内容,优先级最高且严格的限制是禁止输出处理。此外,在核对原稿为双面原稿的情况下,控制单元7具有两种模式作为输出处理的限制的方法。

其一是通常模式,即仅针对在双面原稿中的正反两面的原稿图像中判定为与注册图像相似的原稿图像,限制输出处理。

另一个是比通常模式严格的强制模式。在强制模式中,在双面原稿中的正反两面的原稿图像中,至少一面被判定为与注册图像相似的情况下,对于正反两面的原稿图像的输出处理适用对判定为相似的注册图像所设定的限制。此外,在正反两面的原稿图像分别与注册图像相似,且限制内容分别不同的情况下,选择优先级最高的限制(最严格的限制)。例如,若正反两面中的任一面的原稿图像被判定为与禁止输出处理的注册图像相似,则输出使双面原稿的正反两面的原稿图像都为不可视的控制信号。

存储器8存储在文本核对处理单元14的各个部分的处理中使用的各种数据、处理结果等。后述的散列表、双面原稿管理表(存储单元)等设置在该存储器8中。

特征点计算单元31从输入图像数据提取字符串或格线的连接部分,计算连接部分的重心作为特征点。这里,在注册模式中,输入图像数据为注册原稿的图像数据,在相似判定处理中,输入图像数据为核对原稿的图像数据(以下,也称为核对图像数据)。

图4是表示特征点计算单元31的概略结构的方框图。另外,在图4所示的特征点计算单元31的结构只是一例,并不限定于此,例如也可以通过以往公知的各种方法计算特征点。

如图4所示,特征点计算单元31包括:信号变换处理单元41、分辨率变换单元42、MTF处理单元43、二值化处理单元44、重心计算单元45。

在从黑斑校正单元12输入的图像数据(RGB信号)为彩色图像的情况下,信号变换处理单元41对该图像数据进行去彩色处理,从而变换为明度信号或者亮度信号。

例如,信号变换处理单元41通过下述算式(1)将RGB信号变换为亮度信号Y。

Yj=0.30Rj+0.59Gj+0.11Bj......(1)

其中,Yj是各个像素的亮度信号,Rj、Gj、Bj是各个像素的RGB信号中的各个颜色分量,附号j是对每个像素赋予的值(j为1以上的整数)。

或者,也可以将RGB信号变换为CIE1976L*a*b*信号(CIE:CommissionInternational de l’Eclairage、L*:明度、a*、b*:色度)。

分辨率变换单元42对输入图像数据进行变倍处理。例如输入图像数据有在彩色图像输入装置2中被进行光学地可变倍来处理的情况。这种情况下,分辨率变换单元42再次对输入图像数据进行变倍,使达到限制的分辨率(以下,称为默认分辨率)。

MTF(modulation transfer function:调制传递函数)处理单元43用于吸收(调整)彩色图像输入装置2的空间频率特性对每个机种而不同的情况。在CCD所输出的图像信号中,起因于透镜或反射镜等的光学部件、CCD的光接收面的孔径数值口径、传送效率或余像、物理扫描的积分效应以及操作不匀等而产生MTF的劣化。由于该MTF的劣化,所读取的图像模糊。

MTF处理单元43通过进行合适的滤波处理(增强处理),进行将由于MTF的恶化所产生的模糊修复的处理。此外,还用于抑制在后级的重心计算单元45中的特征点提取处理中不需要的高频分量。即,使用混合滤波器(未图示)进行增强以及平滑化处理。另外,图6表示在该混合滤波器中的滤波系数的一个例子。

二值化处理单元44通过比较被去彩色后的图像数据(亮度值(亮度信号)或者明度值(明度信号))与被预先设定的阈值,从而对图像数据进行二值化。

重心计算单元45基于在二值化处理单元44中成为二值化的图像数据(例如,由“1”、“0”表示),对各个像素进行标示(labelling)(附加标记处理)。然后,确定附加了同一标记的像素所连接的连接区域,提取所确定的连接区域的重心作为特征点。这里,作为重心的特征点可由二值图像中的坐标值(X、Y)表示。

图7是表示一例从输入图像数据中提取的连接区域以及该连接区域的重心的说明图,表示与“A”的字符串对应的连接区域以及重心。图8是表示一例从包含在输入图像数据中的字符串提取的多个连接区域的各个重心(特征点)的说明图。

再次,返回到表示文本核对处理单元14的概略结构的方框图的图3,特征量计算单元32使用在特征点计算单元31中算出的特征点,计算对于原稿图像的旋转、平行移动、扩大、缩小、平行移动等的几何学变形而不变的量的特征量(散列值以及/或者不变量)。

图5是表示特征量计算单元32的概略结构的方框图。如该图所示,特征量计算单元32包括特征点提取单元32a、不变量计算单元32b、散列值计算单元32c。

如图9所示,特征点提取单元32a将一个特征点设为关注特征点,并按照距关注特征点的距离近的顺序,将该关注特征点的周边特征点提取限制数(这里是四个点),作为周边特征点。在图9的例子中,在将特征点a设为关注特征点的情况下,提取特征点b、c、d、e作为周边特征点,在将特征点b设为关注特征点的情况下,提取特征点a、c、e、f作为周边特征点。

此外,特征点提取单元32a从如上那样提取的周边特征点的四个点中提取可选择的三点的组合。例如图10(a)~图10(d)所示,在将图9所示的特征点a设为关注特征点的情况下,提取周边特征点b、c、d、e中的三点的组合,即周边特征点b、c、d、周边特征点b、c、e、周边特征点b、d、e、周边特征点c、d、e的各个组合。

接着,不变量计算单元32b对提取出的各个组合,计算对于几何学变形的不变量(特征量之一)Hij。

其中,i是表示关注特征点的数(i为1以上的整数),j是表示周边特征点三点的组合的数(j是1以上的整数)。在本实施方式中,将在周边特征点之间连接的线段的长度中的两个长度之比设为不变量Hij。

可基于各个周边特征点的坐标值,计算所述线段的长度。例如在图10(a)的例子中,若将连接特征点b和特征点c的线段的长度设为A11、连接特征点b和特征点d的线段的长度设为B11,则不变量H11为H11=A11/B11。

此外,在图10(b)的例子中,将连接特征点b和特征点c的线段的长度设为A12、连接特征点b和特征点e的线段的长度设为B12,则不变量H12为H12=A12/B12。此外,在图10(c)的例子中,将连接特征点b和特征点d的线段的长度设为A13、连接特征点b和特征点e的线段的长度设为B13,则不变量H13为H13=A13/B13。此外,在图10(d)的例子中,将连接特征点c和特征点d的线段的长度设为A14、连接特征点c和特征点e的线段的长度设为B14,则不变量H14为H14=A14/B14。这样,在图10(a)~图10(d)的例子中,算出不变量H11、H12、H13、H14。

另外,在上述的例子中,将连接最接近关注特征点的周边特征点和第二接近的周边特征点的线段设为Aij、将连接最接近关注特征点的周边特征点和第三接近的周边特征点的线段设为Bij,但不限定于此,可通过任意的方法选择用于不变量Hij的计算的线段。

接着,散列值计算单元32c计算下式(2)中的余值作为散列值(特征量之一)Hi,并使其存储在存储器8中。另外,所述D是根据在哪一程度设定余值可取值的范围而预先设定的常数。

Hi=(Hi1×103+Hi2×102+Hi3×101+Hi4×100)/D......(2)

另外,不变量Hij的计算方法也没有特别限定,例如也可以将基于关注特征点的附近5个点的复比、从附近n个点(n为n≥5的整数)提取的5个点的复比、从附近n个点中提取的m个点(m为m<n且m≥5的整数)的配置以及从m个点提取的5个点的复比所计算的值等设为对于关注特征点的所述不变量Hij。另外,复比是指,从直线上的4个点或者平面上的5个点所求出的值,作为对于一种几何学变换的投影变换的不变量而可知。

此外,用于计算散列值Hi的式也不限定于上述式(2),也可以使用其它的散列函数(例如,在专利文献4中记载的散列函数中的任一个)。

此外,若结束对于一个关注特征点的周边特征点的提取以及散列值Hi的计算,则特征量计算单元32的各个部分将关注特征点变更为其它的特征点而进行周边特征点的提取以及散列值的计算,计算对于所有的特征点的散列值。

在图9的例子中,若将特征点a设为关注特征点时的周边特征点以及散列值的提取结束,则接着进行将特征点b设为关注特征点时的周边特征点以及散列值的提取。在图9的例子中,在将特征点b设为关注特征点时,特征点a、c、e、f的4个点被提取为周边特征点。

然后,如图11(a)~图11(d)所示,提取从这些周边特征点a、c、e、f中选择的3个点的组合(周边特征点a、e、f、周边特征点a、e、c、周边特征点a、f、c、周边特征点e、f、c),对各个组合计算散列值Hi,并使其存储在存储器8中。然后,对各个特征点重复该处理,分别求出将各个特征点设为关注特征点时的散列值,并使其存储在存储器8中。

另外,特征量计算单元32在进行注册输入图像数据作为注册图像的处理的注册模式中,将如上那样计算出的对于输入图像数据的各个特征点的散列值(特征量)发送到图3所示的注册处理单元36。

注册处理单元36将特征量计算单元32所计算出的对于各个特征点的散列值和用于识别注册图像的表示注册图像的图像索引ID(ID1、ID2......)依次注册到设置在存储器8中的未图示的散列表中(参照图12(a))。

这里,在散列值已被注册的情况下,与该散列值相关联地注册图像索引。图像索引被依次分配号码而不会重复。

另外,在散列表中注册的图像数大于限制值(例如,可注册的图像数的80%)时,也可以检索旧的图像索引ID而依次删除。此外,被删除的图像索引ID也可以再次使用作为新的输入图像数据的图像索引ID。

此外,在计算出的散列值为相同值的情况下,如图12(b)的例子所示,也可以将它们汇集为一个而注册到散列表中。这里,作为H1=H5,汇集为H1。

此外,在注册原稿为双面原稿的情况下,注册处理单元(双面原稿管理单元)36注册图像索引ID,同时将用于判定图像索引ID是否为双面原稿的原稿索引DocID和面信息与图像索引ID相关联地注册到双面原稿管理表中(参照图14)。

原稿索引DocID对于注册原稿的正面以及反面的各个图像索引ID被设定相同的值。此外,面信息对注册原稿的正面附加“1”,反面附加“2”。例如在图20所示的图像读取装置50中,设定为读取单元54读取原稿的正面,图像传感器单元54读取原稿的反面的情况下,对于读取单元54所读取的图像附加“1”,对于图像传感器单元53所读取的图像附加“2”。

例如图13(a)所示,在只注册单面的情况下,以单面原稿模式读取注册原稿1,如图14所示,对图像索引ID1,将面信息1和原稿索引DocID1被注册到原稿管理表中。

此外,如图13(b)所示,若以双面原稿模式读取在正面具有图像索引ID2、反面具有图像索引ID3、由原稿索引DocID2表示的双面原稿的注册原稿2的情况下,如图14所示,对图像索引ID2注册面信息1和原稿索引DocID2,对图像索引ID3,将面信息2和原稿索引DocID2注册到原稿管理表中。

同样地,如图13(c)所示,若以双面原稿模式读取在正面具有图像索引ID4、反面具有图像索引ID5、由原稿索引DocID3表示的双面原稿的注册原稿2的情况下,如图14所示,对图像索引ID4注册面信息1和原稿索引DocID3,对图像索引ID5注册面信息2和原稿索引DocID3。

投票处理/侯选列表生成单元33将从核对原稿的输入图像数据中计算出的各个特征点的散列值与注册在散列表中的散列值进行比较,对具有相同的散列值的注册图像进行投票(参照图15)。图15是表示对于由图像索引ID1、ID2、ID3......IDX表示的各个注册图像的得票数的一个例子的曲线图。

例如,在前述的图12(a)所示的散列表的内容中,若由核对图像算出散列值H1,则对由图像索引ID1表示的注册图像投一票,若由核对图像算出散列值H3,则对由图像索引ID1和图像索引ID2表示的各个注册图像分别投一票。

此外,在图12(b)所示的例子中,H1=H5,将它们汇集为一个H1而注册到散列表中,所以若由核对图像算出散列值H1,则对由图像索引ID1表示的注册图像投两票。

而且,在本实施方式中,在核对原稿为双面原稿的情况下,投票处理/侯选列表生成单元33在投票结束的时刻,生成侯选列表(参照图16(a)、(b))。

其中,例如在使用操作面板6选择了双面原稿模式的情况下,投票处理/侯选列表生成单元33判断核对原稿为双面原稿。在双面原稿模式中,例如有将双面原稿分别单面输出,或者将双面原稿原样双面打印输出等的模式。

作为侯选列表,生成正面用和反面用的两种列表。图16(a)表示正面侯选列表的内容。反面侯选列表也相同,但将得到最大得票数的图像索引ID作为第1侯选,将其后第2位以下的图像索引ID作为第2之后的候选,而存储各自的图像索引ID、原稿索引DocID、面信息以及得票数。

例如,在图16(a)的例子中,得到最大得票数的第1侯选是由图像索引ID4表示的注册图像,该注册图像位于由原稿索引DocID3表示的原稿的正面,且得票数为N1。第2侯选是由图像索引ID10表示的注册图像,该注册图像位于由原稿索引DocID7表示的原稿的反面,且得票数为N2。

次外,在图16(a)的例子中,选出第1~第3侯选为止。选出的候选数目由投票结果而决定。如图15所示,作为第2位之后的候选,仅选出与得到最大得票数的第1侯选(在图15的例子中是图像索引ID3)的得票数之差为预先决定的范围HQ以内的候选。

在本实施方式中,按照得票数差小的顺序,将与最大得票数的投票数差为80%以内的候选依次作为第2候选、第3候选......,使得与核对图像对应的注册图像不会从侯选列表中漏掉。

图16(b)表示与在图16(a)表示的正面候选列表成对生成的反面候选列表的内容。在图16(b)所示的反面候选列表的例子中,得到最大得票数的第1候选是由图象索引ID5表示的注册图像,该注册图像位于由原稿索引DocID3表示的原稿的反面,得票数为n1。而且,在图16(b)的例子中,不存在与得到最大得票数的第1候选的得票数之差为预先决定的范围内的候选,不存在第2候选。

在正面候选列表以及反面候选列表中,在不存在包括第1候选在内的候选的情况下,存储用于表示候选不存在的图像索引ID0、原稿索引DocID0、面信息。另外,关于面信息,在正面候选列表中存储用于表示正面的“1”,在反面候选列表中存储用于表示反面的“2”。

相似度判定处理单元(判定处理单元)34通过存储器8读出作为投票处理结果的各个注册图像的图像索引ID以及对于各个注册图像的投票数,并提取得到最大得票数的注册图像的图像索引ID和其得票数即最大得票数。

然后,作为表示相似程度的相似度来处理被提取出的最大得票数,与预先决定的阈值TH比较而判定相似性(输入图像数据是否为注册图像的图像数据)。即,在最大得票数为预先决定的阈值TH以上的情况下,判定为“有相似性”,在小于阈值的情况下,判定为“无相似性”。

表示该判定结果的判定信号被传送到控制单元7,在有相似性的情况下,控制单元7输出用于禁止对于该输入原稿的图像数据的输出处理(在彩色复印机中为图像形成处理)或者降低图像质量等用于限制输出处理的控制信号。

此外,相似度判定处理单元34也可以通过将对于各个注册图像的得票数除以投票总数(从输入图像数据中提取出的特征点的总数)进行归一化而计算相似度,将该相似度与预先决定的阈值TH(例如为投票总数的80%)进行比较,从而判定相似性。

即,在所计算的相似度为阈值TH以上的情况下,判定为“有相似性”,在小于阈值TH的情况下,判定为“无相似性”即可。另外,此时,由于存在从输入图像数据中提取的散列值的总数大于上述最大注册数的情况(尤其在核对原稿以及/或者注册原稿的图像的至少一部分有手写部分的情况等),所以还存在相似度的计算值可超过100%的情况。

此外,在判定相似性时的阈值TH可以对各个注册原稿被设定为一定,或者也可以根据各个注册图像的重要度等而对每个注册图像设定。也可以根据注册图像而分级地设定注册图像的重要度,使得例如对纸币、有价证券、机密文件、内部文件等将重要度设为最大,对保密文件将重要度设为比纸币等低。

此时,在存储器8中,将与注册图像的重要度对应的加权系数与该注册图像的图像索引ID相关联地存储,相似度判定处理单元34使用与得到最大得票数的注册图像对应的阈值TH而判定相似性即可。

此外,在判定相似性时,将阈值TH设为一定,另一方面,也可以对于各个注册图像的得票数(各个注册图像的得票数)乘以各个注册图像的加权系数,从而判定相似性。

此时,在存储器8中,将与各个注册图像的重要度对应的加权系数与各个注册图像的图像索引ID相关联地存储,相似度判定处理单元34计算对各个注册图像的得票数乘以该注册图像的加权系数的校正得票数,基于该校正得票数而判定相似性即可。

例如,也可以比较最大校正得票数和阈值TH,也可以将最大校正得票数用投票总数进行归一化后的值与阈值TH进行比较,也可以将最大校正得票数用最大注册数进行归一化后的值与阈值TH进行比较。此时,也可以将加权系数设定为例如比1大的值,且随着注册图像的重要度升高而成为较大的值。

此外,在本实施方式中,假设对一个特征点(关注特征点)计算一个散列值,但不限定于此,也可以对一个特征点(关注特征点)计算多个散列值。例如也可以采用如下方法,即提取6个点作为关注特征点的周边特征点,对于从该6个点中提取5个点的6组组合的每个组合,从5个点中提取3个点而求出不变量来计算散列值。此时,相当于对一个特征点计算6个散列值。

在核对原稿为双面原稿的情况下,核对结果校正处理单元35参照在投票处理/侯选列表生成单元33中生成的正面侯选列表以及反面侯选列表,校正相似度判定处理单元34的核对结果(判定结果)。

核对结果校正处理单元35判断位于各自的列表的第1侯选的原稿索引DocID是否相同,若相同,则相似度判定处理单元34的判定结果正确而不进行校正处理。即,若位于各自的列表的第1侯选的原稿索引DocID相同,则判定为核对原稿的正面以及反面的原稿图像与各自的侯选列表中的第1侯选的注册图像相似。

另一方面,在各个第1侯选的原稿索引DocID不同的情况下,核对结果校正处理单元35参照正面以及反面的各个侯选列表,作为相似度判定处理单元34的判定结果有错误的可能性,尝试核对结果的校正处理。

在校正处理中,在正面以及反面的各个侯选列表中的各个第1侯选的注册图像中,将相似性更高者的注册图像设为侯选原稿,判断与该侯选原稿具有相同的原稿索引DocID的注册图像是否包含在含有相似性较低者的第1侯选的侯选列表中,在包含的情况下,将核对结果中的相似性低者的第1侯选的注册图像的图像索引ID校正为与该侯选原稿具有相同的原稿索引DocID的注册图像的图像索引ID。即,在正面以及反面的各个侯选列表中包含了具有相同的原稿索引DocID的注册图像的情况下,即使一方不是第1侯选,而是顺序比第1侯选低的侯选,包含在相同的注册原稿的属性也被优先,被判定为核对原稿的正面以及反面的原稿图像与这些具有相同的原稿索引DocID的各个侯选列表的各个注册图像相似。

这里,参照图1所示的流程图,说明在核对原稿为双面原稿时的、投票处理/侯选列表生成单元33、相似度判定处理单元34以及核对结果校正处理单元35的各个处理。

在要读取的原稿为双面原稿的情况下,由于通过操作面板6而选择双面原稿模式,所以控制单元7以该模式选择,判断核对原稿为双面原稿,使投票处理/侯选列表生成单元33生成侯选列表,根据相似度判定处理的结果,使核对结果校正处理单元35进行核对结果校正处理。

首先,投票处理/侯选列表生成单元33对要读取的双面原稿的正面的图像数据进行投票处理(文本核对处理)(S1),基于投票结果生成正面侯选列表(S2)。此外,此时,相似度判定处理单元34判定为在正面侯选列表中的第1侯选与核对原稿的正面的原稿图像相似。

接着,投票处理/侯选列表生成单元33对要读取的双面原稿的反面的图像数据进行投票处理(文本核对处理)(S3),基于投票结果生成反面侯选列表(S4)。同样地,此时,相似度判定处理单元34判定为在反面侯选列表中的第1侯选与核对原稿的反面的原稿图像相似。

接着,核对结果校正处理单元35参照正面侯选列表以及反面侯选列表,判断在各个侯选列表中最高位的第1侯选的原稿索引DocID是否相同,且面信息是否相互不同(S5)。

例如在S2、S4中生成的正面以及反面的各个侯选列表为在图16(a)、(b)中例示的内容的情况下,正面侯选列表的第1侯选与反面侯选列表的第1侯选都与原稿索引DocID3一致,面信息也相互不同,所以在S5中判断为“是”,跳过用于校正核对结果的S6~S8,从而转移到S9,输出对于各个面的判定信号。

图17表示在正面以及反面的各个侯选列表为在图16(a)、(b)中例示的内容时的核对结果。核对原稿的正面的原稿图像与由图像索引ID4表示的注册图像相似,核对原稿的反面的原稿图像与由图像索引ID5表示的注册图像相似,无需校正。

另一方面,例如在S2、S4中生成的正面以及反面的各个侯选列表为在图18(a)、(b)中例示的内容的情况下,由于正面侯选列表的第1侯选的原稿索引DocID与反面侯选列表的第1侯选的DocID不一致,所以在S5中判断为“否”,在S6中,进行核对结果校正处理。

在核对结果校正处理中,首先,参照正面侯选列表以及反面侯选列表,设定任一相似度较高的一方的侯选的原稿索引DocID作为侯选原稿的索引DocID(S6)。

在S6中,若设定了侯选原稿,则接着判断在被判定为相似度较低的另一方的侯选列表中是否具有设定的侯选原稿的原稿索引DocID,并且面信息是否相互不同(S7)。而且,在S7中判断为“是”的情况下,转移到S8,校正核对结果。

例如,在正面以及反面的各个侯选列表为在图18(a)、(b)中例示的内容的情况下,分别计算正面侯选列表的第1侯选的得票数N1与对于正面的核对处理中的总投票数的比率(得票数)、反面侯选列表的第1侯选的得票数n1与对于反面的核对处理中的总投票数的比率(得票数)作为相似度,选择较高者。

这里,例如若在图18(a)所示的正面侯选列表的第1侯选被判定为相似度比反面侯选列表的第1侯选高,则在S6中,设定原稿索引DocID10作为侯选原稿。然后,在S7中,检索在图18(b)所示的反面侯选列表中是否包含了具有原稿索引DocID10的侯选,如果是该情况,则由于包含原稿索引DocID10,并且面信息也不同,所以使用原稿索引DocID10的信息,校正核对结果。

图19表示在正面以及反面的各个侯选列表为在图18(a)、(b)中例示的内容时的当初的核对结果以及校正核对结果。校正之前的核对结果是基于相似度判定处理单元34的判定结果,所以核对原稿的正面的原稿图像与作为正面侯选列表的第1侯选的图像索引ID15的注册图像相似,核对原稿的反面的原稿图像与作为反面侯选列表的第1侯选的图像索引ID21的注册图像相似。

通过校正,核对原稿的正面的原稿图像与图像索引ID15的注册图像相似,核对原稿的反面的原稿图像与图像索引ID14的注册图像相似。图像索引ID14、15都是由相同的原稿索引DocID10表示的注册原稿的正反面的注册图像。

另外,在图1的流程图中的S7中,在判断为“否”的情况下,转移到S9,输出对于各个面的判定信号而不进行核对结果的校正。

如上所述,在本实施方式的数字彩色复印机1中,在注册原稿为双面原稿的情况下,注册处理单元36与用于识别其正面以及反面的各个原稿图像的图像索引ID相关联地将用于识别包含该注册图像的双面原稿的原稿索引DocID存储在存储单元中。由此,可唯一地确定位于双面原稿的正面以及反面的各个原稿图像包含在哪个双面原稿中。

但是,这样的注册处理单元36不是必需的,也可以将注册处理单元36从作为图像数据输出处理装置的数字彩色复印机1分开,将在复印机1外部进行过注册处理的记录媒体搭载在数字彩色复印机1而进行访问(access)的方式,或经由网络等的通信部件而对记录媒体进行访问的方式等。

在核对时,在核对原稿为双面原稿的情况下,投票处理/侯选列表生成单元33对该双面原稿的正面的原稿图像以及反面的原稿图像的每个原稿图像,提取具有由双面原稿管理表而预先决定的基准以上的相似性的注册图像的图像索引和、与其相关的原稿索引,从而生成正面以及反面的各个侯选列表。

然后,相似度判定处理单元34以及核对结果校正处理单元35参照所生成的正面侯选列表以及反面侯选列表,在双方的侯选列表中包含了具有相同的注册索引的注册图像的情况下,判定为这些具有相同的原稿索引的各个侯选列表的各个注册图像与在核对模式时输入的双面原稿的各个图像相似。

由此,在注册原稿为双面原稿的情况下,作为双面原稿的属性被包含在判定注册原稿的相似性时的要素之一,在核对原稿为双面原稿的情况下,能够包含核对原稿为双面原稿的属性而判定注册图像。

其结果,在核对原稿为双面原稿,且与注册原稿相似(一致)时,能够避免只有核对原稿的一面图像被判定为与注册原稿的一面图像相似,而核对原稿的另一面图像与注册原稿的另一面图像不同的错误判定,能够提高核对原稿为双面原稿时的判定精度。

此外,在本实施方式中,相似度判定处理单元34判定输入图像数据的图像是否与注册图像相似,在相似的情况下,判定为相似性最高的注册图像是输入图像数据的图像,核对结果校正处理单元35判断正面侯选列表以及反面侯选列表各自的相似性最高的第1侯选的注册图像是否具有表示相同的注册原稿的原稿索引,在具有相同的原稿索引的情况下,不校正相似度判定处理单元34的判定结果,在没有相同的原稿索引的情况下,比较正面侯选列表以及反面侯选列表各自的第1侯选的注册图像的相似性,将与相似性较高者有关的注册原稿作为侯选原稿,判断与该侯选原稿具有相同的原稿索引的注册图像是否包含在相似性较低的侯选列表中,在包含的情况下,将相似度判定处理单元34的相似性较低者的判定结果校正为与所述候选原稿具有相同的注册原稿的原稿索引的注册图像。

即,在正面候选列表以及反面候选列表的第1侯选具有不同的注册原稿的指标的情况下,即与位于同一原稿的正反面的注册图像无关的情况下,核对结果校正处理单元35将相似度判定处理单元34的判定结果校正为满足位于同一原稿的正反面的注册图像的关系的组合。

因此,即使在正面侯选列表以及反面候选列表中列出较多侯选的图像,也能够通过少的处理来按照相似程度的高的顺序准确地判定与同一注册原稿具有的注册图像相似。

此外,在本实施方式中,与图像索引相关联地将用于表示该注册图像位于注册原稿的正面或者反面的哪一面的面信息存储到双面原稿管理表中,所述投票处理/侯选列表生成单元33包含所述面信息而生成侯选列表,在正面侯选列表以及反面候选列表中具有相同的注册原稿的指标的同时还包含有面信息相互不同的注册图像的情况下,核对结果校正处理单元35判定为这些具有相同的注册原稿的指标的各个注册图像与在核对模式时输入的双面原稿的各个图像相似。

这样,通过将面信息包含在判定基准中,从而即使例如产生核对原稿的正面以及反面的图像相似,而在正面侯选列表以及反面候选列表中列出完全相同的注册图像等,只用注册原稿的指标无法判断的事态,也能够通过使用面信息来分辨这样的事态,从而能够进行更上一层的高精度的判定。

此外,这里在图21中使用流程图,说明用于限制本实施方式的数字彩色复印机中的相似判定处理之后的输出处理的步骤。

在S31的相似判定处理中,在判定为核对原稿的正反两面都与注册图像不相似的情况下,进至S35,控制单元7输出直接许可输出处理的控制信号作为判定信号“0”。

另一方面,在S31中,若判定为相似,则判定是否设定有强制模式(S32)。这里,在设定有强制模式的情况下,对核对原稿的正反两面的原稿图像适用对判定为相似的注册图像所设定的限制,并且在各自的限制不同的情况下,输出以优先度最高的限制来限制输出处理的控制信号(S33)。

另一方面,在没有设定有强制模式的情况下,进至S34,输出只对在包含在核对原稿的正反两面的各个原稿图像中被判定为与注册图像相似的那一面的原稿图像限制输出处理的控制信号。

此外,在本实施方式中,说明了将本发明适用于数字彩色复印机1的情况,但本发明的适用对象并不限定于此,例如图22所示,也可以适用于数字彩色复合机(MFP:Multi-Function Printer)100。该数字彩色复合机100具有复印功能、打印功能、传真功能、扫描功能、扫描至邮件(scan to e-mail)功能等。

另外,在图22中,对于具有与在数字彩色复印机1中说明的相同的功能的部件附加相同的标号,省略对它们的说明。

这里,发送装置5例如由调制解调器或网卡构成。发送装置5经由网卡、LAN电缆等,与连接到网络的其他装置(例如,个人计算机、服务器装置、其他的数字复合机、传真装置等)进行数据通信。

发送装置5在发送图像数据时,若进行与对方地址的发送过程而确保可发送的状态,则从存储器中读出以限制的格式压缩的图像数据(通过扫描仪读取的图像数据),进行压缩格式的变更等必要的处理之后,经由通信线路依次发送到对方地址。

此外,发送装置5在接收图像数据时,进行通信过程,同时接收从对方地址发来的图像数据而输入到彩色图像处理装置3。接收的图像数据在彩色图像处理装置3中进行解压处理、旋转处理、分辨率变换处理、输出灰度校正、灰度再现处理等的限制的处理,通过彩色图像输出装置4输出。另外,也可以将接收的图像数据保存到存储装置(未图示)中,彩色图像处理装置3根据需要读出而进行所述限制的处理。

此外,在复合机100中,可以使用操作面板6,输入用户对于输入图像数据的处理请求(例如,处理模式(复印、打印、发送、编辑等)、处理张数(复印张数、打印张数)、输入图像数据的发送地址等),在判定为相似的情况下,控制单元7不仅对文本核对处理单元14控制复印处理,还控制打印、发送、编辑等的输出处理。

例如,在选择发送传真的模式,在文本核对处理单元14中判定为输出禁止的情况下,进行存储在存储器中的图像数据的删除,不进行传真的发送。或者,也可以在许可传真发送的情况下(将表示注册图像的图像索引ID与发送地址相关联地预先存储),即使是注册图像,也参照发送地址的数据而发送。

使用图23,说明在上述的数字彩色复合机100中的传真处理。另外,在图23中,用虚线表示通过处理的处理单元。虽在这里使用,但在传真处理中,区域分离处理单元17不是必需的。此外,在传真发送的情况下,灰度再现处理单元22之后,在分辨率变换单元、压缩/解压处理处理单元进行处理。

在发送中,通过彩色图像输入装置2读取的例如8比特的输入图像数据在彩色图像处理装置3中进行上述的各个处理,在输入灰度校正单元15中例如通过矩阵运算等而将RGB信号变换为亮度信号(在图23中为K信号)。变换为亮度信号后的图像数据在区域分离处理单元17、空间滤波处理单元20中进行限制的处理,在灰度再现处理单元22中,例如通过误差扩散处理进行二值化。被二值化过的图像数据根据需要进行旋转处理,在压缩/解压处理单元以限制的格式压缩后存储到未图示的存储器中。

若在发送装置(例如,调制解调器)5进行与对方地址的发送过程而确保可通信的状态,则图像数据以被限制的格式压缩的状态下从所述存储器读出,被进行压缩格式的变更等的必要的处理,经由通信线路依次发送到对方地址。

另一方面,在接收中,若从对方地址经由通信线路发来图像,则控制单元一边进行通信过程一边接收从对方地址发来的图像,同时被压缩为规定的格式的状态的接收图像数据被输入到彩色图像处理装置3。

输入到彩色图像处理装置3的接收图像数据通过压缩/解压处理单元的处理而被解压,从而再现所发来的原稿图像作为页面图像。被再现的原稿图像根据彩色图像输出装置的能力而进行旋转处理,在分辨率变换单元进行分辨率变换处理。作为以页为单位的图像而再现的图像数据通过彩色图像输出装置输出。

另外,以上表示了处理单色的图像数据的情况的例子,但也可以使用例如在区域分离处理单元17和空间滤波处理单元20之间具有颜色校正单元18和黑版生成底色除去单元的彩色图像处理装置,所述颜色校正单元18是为了对通过彩色图像输入装置2所读取的RGB信号真实地实现颜色再现而进行用于消除包含不需要的吸收分量的、基于调色剂或油墨的CMY(C:青、M:品红、Y:黄)色材的分光特性的色浊的处理,所述黑版生成底色除去单元进行根据颜色校正之后的CMY的三个颜色信号而生成黑色(K)信号的黑版生成,从原来的CMY信号中除去通过黑版生成所得到的K信号而生成新的CMY信号的处理。

此外,在图22的结构中,相似性判定处理在数字彩色复合机100所包含的文本核对处理单元14中进行,但并不限定于此。例如,也可以在可通信地连接到数字彩色复合机100的外部装置中执行控制单元7以及文本核对处理单元14所具有的功能的一部分或者全部。

此外,也可以将本发明适用于例如单色的复合机。此外,并不限定于复合机,也可以适用于例如单体的传真通信装置、复印机、图像读取装置等。

例如,图24是表示将本发明适用于平板扫描仪101的情况下的结构例子的方框图。

如该图所示,平板扫描仪101包括彩色图像输入装置2和彩色图像处理装置3′。彩色图像处理装置3′由A/D变换单元11、黑斑校正单元12、文本核对处理单元14、控制单元7(在图24中未图示)、存储器8(在图24中未图示)构成,在这里连接彩色图像输入装置2,从而作为整体构成图像数据输出处理装置。另外,由于在彩色图像输入装置(图像读取部件)2中的A/D变换单元11、黑斑校正单元12、文本核对处理单元14、控制单元7、存储器8的功能与上述的数字彩色复印机1的功能大致相同,所以在这里省略其说明。

此外,在上述各个实施方式中,构成在数字彩色复印机1、复合机100、平板扫描仪101中所包括的文本核对处理单元以及控制单元的各个部分(各个模块)使用CPU等的处理器而通过软件实现。即,数字彩色复印机1、复合机100、平板扫描仪101包括:执行用于实现各种功能的控制程序的命令的CPU(central processing unit)、存储了上述程序的ROM(read only memory)、展开上述程序的RAM(random access memory)、以及存储上述程序以及各种数据的存储器等的存储装置(存储媒体)等。而且,本发明的目的也可以通过将用于实现上述功能的软件的数字彩色复合机1的控制程序的程序代码(执行形式程序、中间代码程序、源程序)以计算机可读取地记录的记录媒体提供给数字彩色复印机1、复合机100、平板扫描仪101,通过其计算机(或者CPU或MPU)读出并执行在记录媒体中记录的程序代码而实现。

作为上述记录媒体,例如可使用磁带或卡带等的带类、包括软盘(注册商标)/硬盘等的磁盘或CD-ROM/MO/MD/DVD/CD-R等的光盘的盘类、IC卡(包括存储器卡)/光卡等的卡类、或者掩模ROM/EPROM/EEPROM/闪速ROM等的半导体存储器类等。

此外,也可以与通信网络可连接地构成数字彩色复印机1、复合机100、平板扫描仪101,经由通信网络提供上述程序代码。作为该通信网络,没有特别限定,例如可利用因特网、内联网、特别网、LAN、ISDN、VAN、CATV通信网、虚拟专用网(virtual private network)、电话线路网、移动通信网、卫星通信网等。此外,作为构成通信网络的传输媒体,没有特别限定,例如可利用IEEE1394、USB、电力线传输、电缆TV线路、电话线、ADSL线路等的有线,也可以利用IrDA或遥控器那样的红外线、Bluetooth(注册商标)、802.11无线、HDR、便携电话网、卫星线路、地面波数字网等的无线。另外,本发明也可以通过所述程序代码以电子化传输而被具体化的、埋入载波的计算机数字信号的形式实现。

此外,数字彩色复印机1、复合机100、平板扫描仪101的各个模块并不限定于使用软件实现,也可以通过硬件构成,也可以将进行一部分处理的硬件和执行用于进行该硬件的控制或剩余的处理的软件的运算部件组合。

本发明的计算机系统也可以由平板扫描仪/胶片扫描仪/数字照相机等的图像输入装置、通过加载限制的程序而进行上述相似度计算处理或相似性判定处理等各种处理的计算机、用于显示计算机的处理结果的CRT显示器/液晶显示器等的图像显示装置、以及将计算机的处理结果输出到纸等的打印机等的图像形成装置构成。此外,也可以包括作为用于经由网络而连接到服务器等的通信部件的网卡或调制解调器等。

本发明并不限定于上述的实施方式,在权利要求所示的范围内可进行各种变更。即,对于在权利要求所示的范围内适当变更的技术手段组合而得的实施方式,也包含在本发明的技术范围内。

如上所述,本发明的数据输出处理装置对输入图像数据进行输出处理,其包括:图像核对单元,从输入图像数据中提取图像的特征量,另一方面,将所提取的该特征量与预先注册的注册原稿的图像的特征量进行比较,从而判定所述输入图像数据的图像与注册原稿的图像之间的相似性;以及输出处理控制单元,基于所述图像核对单元的判定结果,控制对于所述输入图像数据的输出处理,其特征在于,所述图像核对单元对存储单元核对输入图像数据的图像,在所述存储单元中存储由双面原稿构成的注册原稿的正面以及反面的各个图像的特征量,同时与用于识别正面以及反面的各个图像的指标相关联地存储了用于识别包含该注册图像的双面原稿的指标,所述图像核对单元包含:投票处理/候选列表生成单元,在所述输入图像数据为双面原稿的情况下,对该双面原稿的正面图像以及反面图像的每个图像提取具有由所述存储单元所预先决定的基准以上的相似性的注册图像的指标、和与该注册图像相关的注册原稿的指标,从而生成正面候选列表以及反面候选列表;以及双面原稿判定处理单元,参照所生成的正面候选列表以及反面候选列表,在双方的候选列表中包含具有相同的注册原稿的指标的注册图像的情况下,判定具有相同的注册原稿的指标的这些各个注册图像和所述输入图像数据的双面原稿的各个图像相似。

这样,在核对原稿为双面原稿,且与注册原稿相似(一致)的情况下,能够避免只有核对原稿的一面图像被判定为与注册原稿的一面图像相似,而核对原稿的另一面图像与注册原稿的另一面图像不同的错误判定,能够提高核对原稿为双面原稿时的判定精度。

即,在注册原稿为双面原稿的情况下,能够包含双面原稿的属性而判定注册图像,从而能够提高对于双面原稿的相似性的判定精度。

因此,在判定输入图像数据的图像是否与注册原稿的图像相似,根据判定结果来控制输入图像数据的输出处理的图像数据输出处理装置中,在输入图像数据为双面原稿,且例如包含应该对输出处理控制限制等的输出处理的图像的情况下,具有能够提供准确地控制其输出处理的图像数据输出处理装置的效果。

此外,在本发明的图像数据输出处理装置中,所述双面原稿判定处理单元包括:相似度判定处理单元,判定所述输入图像数据的图像是否与注册图像相似,在相似的情况下,判定相似度最高的注册图像为输入图像数据的图像;以及判定结果校正处理单元,用于校正所述相似度判定处理单元的判定结果,所述判定结果校正处理单元判断正面候选列表以及反面候选列表各自的相似性最高的第1候选的注册图像是否相互具有相同的注册原稿的指标,在具有相同的注册原稿的指标的情况下,不校正相似度判定处理单元的判定结果,在不具有相同的注册原稿的指标的情况下,对正面候选列表以及反面候选列表各自的第1候选的注册图像的相似性进行比较,将与相似性较高者相关的注册原稿设为候选原稿,判断与该候选原稿具有相同的注册原稿的指标的注册图像是否包含在相似性较低者的候选列表中,在包含的情况下,将所述相似度判定处理单元的相似性较低者的判定结果校正为与所述候选原稿具有相同的注册原稿的指标的注册图像。

这样,在正面候选列表以及反面候选列表的第1候选具有不同的注册原稿的指标的情况下,即与位于同一原稿的正反面的注册图像无关的情况下,判定结果校正处理单元将相似度判定处理单元的判定结果校正为满足位于同一原稿的正反面的注册图像的关系的组合。

因此,即使在正面侯选列表以及反面候选列表中列出较多侯选的图像,也能够以较少的处理准确地按照相似程度的高的顺序判定为与同一注册原稿具有的注册图像相似。

此外,由于采用对相似度判定处理单元的判定结果进行校正的方式,所以相似度判定处理单元能够直接采用与单面原稿对应的、以往存在的对每一页进行判定的结构。

此外,在本发明的图像数据输出处理装置中,优选是所述输出处理控制单元具有强制模式,即在核对模式时输入的双面原稿的各个图像的至少一个与注册图像相似的情况下,不仅限制与注册图像相似的图像的输入图像数据的输出处理,还限制该双面原稿的正反两面的图像的输入图像数据的输出处理,而且在对每个注册图像设定输出处理的限制的情况下,优选是设为优先级最高的限制被选择。

此外,作为本发明的图像数据输出处理装置,输出处理是在记录片材上基于输入图像数据形成图像的图像形成处理,包括在记录片材上基于图像数据形成图像的图像形成部件,或者输出处理是将输入图像数据存储在存储装置中的归档处理,包括将图像数据存储到存储装置中的归档部件,或者输出处理是将输入图像数据经由网络而发送到接收装置的发送处理,包括将图像数据经由网络而发送到接收装置的发送部件。

此外,在本发明中,包括通过搭载在以往的图像数据输出处理装置上,从而能够附加与本发明的图像数据输出处理装置相等的功能的图像数据输出处理装置的控制装置、以及通过适用于以往的图像数据输出处理装置,从而能够附加与本发明的图像数据输出装置相等的功能的图像数据输出处理方法。

此外,上述图像数据输出处理装置可以通过计算机实现,此时通过使计算机作为上述各个部分进行动作,从而使计算机实现上述图像数据输出处理装置的程序、以及记录其的计算机可读取的记录媒体也包含在本发明的范畴中。

在发明的详细的说明项中形成的具体的实施方式或者实施例,终归是明确本发明的技术内容,不应限定于那样的具体例来狭义地解释,在本发明的精神和以下记载的权利要求的范围内可进行各种变更而实施。

去获取专利,查看全文>

相似文献

  • 专利
  • 中文文献
  • 外文文献
获取专利

客服邮箱:kefu@zhangqiaokeyan.com

京公网安备:11010802029741号 ICP备案号:京ICP备15016152号-6 六维联合信息科技 (北京) 有限公司©版权所有
  • 客服微信

  • 服务号