首页> 中国专利> 电子照相机、图像处理装置以及图像处理程序

电子照相机、图像处理装置以及图像处理程序

摘要

将多个图像的再现顺序设为与被拍摄体的特性相应的最合适的顺序。包括:拍摄部,其对被拍摄体进行拍摄,生成多个图像;评价部,其对由拍摄部生成的多个图像,进行评价;选择部,其基于由评价部进行的评价结果,从由拍摄部生成的多个图像中,选择一部分图像;识别部,其对由选择部选择的多个图像,进行场景识别;和,确定部,其基于由识别部进行的识别结果,确定进行了场景识别的多个图像的再现顺序。

著录项

  • 公开/公告号CN103797786A

    专利类型发明专利

  • 公开/公告日2014-05-14

    原文格式PDF

  • 申请/专利权人 株式会社尼康;

    申请/专利号CN201280042306.2

  • 发明设计人 中田佑子;

    申请日2012-08-31

  • 分类号H04N5/91(20060101);H04N5/225(20060101);H04N5/93(20060101);H04N101/00(20060101);

  • 代理机构11247 北京市中咨律师事务所;

  • 代理人陈海红;段承恩

  • 地址 日本东京都

  • 入库时间 2023-12-17 00:25:44

法律信息

  • 法律状态公告日

    法律状态信息

    法律状态

  • 2017-06-09

    授权

    授权

  • 2014-10-08

    实质审查的生效 IPC(主分类):H04N5/91 申请日:20120831

    实质审查的生效

  • 2014-05-14

    公开

    公开

说明书

技术领域

本发明涉及电子照相机、图像处理装置以及图像处理程序。 

背景技术

一直以来,生成多个图像而记录于记录介质后、从曝光、对比度、模糊等的观点进行图像的评价、将评价比预定的基准低的图像从上述的记录介质删除的技术众所周知(例如,参照专利文献1)。 

在专利文献1的发明中,通过曝光条件评价、对比度评价、模糊、焦点模糊的评价等执行图像评价处理。而且,对图像评价的结果为没有被从记录介质删除的图像,通常,以时间系列赋予连号的名称。 

在先技术文献 

专利文献 

专利文献1:特开2006-50494号公报 

发明内容

发明要解决的课题 

但是,上述的图像评价的结果为没有被从记录介质删除的图像通常为多张图像,用户顺序再现这些图像,选择最优选的1张(或者数张)图像。对没有被从记录介质删除的图像,以时间系列赋予连号的名称,所以再现这些图像时,多个图像以时间系列进行再现。 

但是,在合照和/或纪念照等为在主要被拍摄体上没有较大的变动的被拍摄体的情况下,以时间系列进行再现没有特别优点。因此,用户必须顺 序上翻或者下翻多个图像而进行比较,具有不能立即判断哪个图像是最优选的图像的问题。 

本发明是鉴于上述问题而完成的,其目的在于将多个图像的再现顺序设为与被拍摄体的特性相应的最合适的顺序。 

用于解决课题的技术方案 

本发明的电子照相机,其中,包括:拍摄部,其对被拍摄体进行拍摄而生成多个图像;评价部,其对由所述拍摄部生成的所述多个图像进行评价;选择部,其基于由所述评价部进行的评价结果,从由所述拍摄部生成的所述多个图像中,选择一部分图像;识别部,其对由所述选择部选择的多个图像,进行场景识别;和确定部,其基于由所述识别部进行的识别结果,确定进行了所述场景识别的多个图像的再现顺序。 

另外,也可以包括命名部,其根据由所述确定部确定的所述再现顺序,确定进行了所述场景识别的多个图像的各自的名称。 

另外,也可以:所述确定部,基于由所述识别部进行的识别结果,以由所述评价部进行评价较高的顺序确定所述再现顺序,或者根据由所述拍摄部进行的拍摄顺序确定再现顺序。 

另外,也可以:所述确定部,在由所述识别部进行的识别的结果为在主要被拍摄体上具有连续的变化的场景的情况下,根据由所述拍摄部进行的拍摄顺序而确定所述再现顺序,当在所述主要被拍摄体没有连续的变化的情况下,以由所述评价部进行的评价较高的顺序确定所述再现顺序。 

另外,也可以:所述评价部,在由所述识别部进行的识别结果为人像的场景的情况下,进而评价背景区域是否显眼;所述确定部,在由所述识别部进行的识别结果为所述人像的场景的情况下,以由所述评价部进行的评价的结果为所述背景区域不显眼的顺序确定所述再现顺序。 

另外,也可以:包括:记录部,其将由所述拍摄部生成的所述多个图像记录于记录介质;和 

删除部,其基于由所述评价部进行的评价结果,从记录于所述记录介质的多个图像中,删除由所述选择部选择的一部分图像; 

所述识别部对没有被所述删除部删除的多个图像,进行所述场景识别。 

另外,也可以:所述记录部,将表示由所述确定部确定的所述再现顺序的信息,与没有被所述删除部删除的所述多个图像相关联而进行记录。 

本发明的图像处理装置,包括:获取部,其获取多个图像作为处理对象的图像;评价部,其对由所述获取部获取的所述多个图像,进行评价;识别部,其对由所述获取部获取的所述多个图像,进行场景识别;和确定部,其基于由所述识别部进行的识别结果,确定进行了所述场景识别的多个图像的再现顺序。 

另外,也可以:包括:记录部,其将由所述获取部获取的所述多个图像记录于记录介质;和删除部,其基于由所述评价部进行的评价结果,从记录于所述记录介质的多个图像中,删除一部分图像;所述获取部,获取所拍摄以及生成的多个图像作为所述多个图像;所述识别部,对没有被所述删除部删除的多个图像,进行所述场景识别。 

本发明的图像处理程序,是用于通过计算机实现与处理对象的图像相对的图像处理的图像处理程序,其特征在于,包括:获取步骤,获取多个图像作为所述处理对象的图像;评价步骤,对在所述获取步骤中获取的所述多个图像,进行评价;识别步骤,对在所述获取步骤中获取的所述多个图像,进行场景识别;和确定步骤,基于所述识别步骤中的识别结果,确定进行了所述场景识别的多个图像的再现顺序。 

发明的效果 

根据本发明,能够将多个图像的再现顺序设为与被拍摄体的特性相应的最合适的顺序。 

附图说明

图1是表示一个实施方式中的电子照相机的构成例的框图。 

图2是表示一个实施方式中的电子照相机的动作的流程图。 

具体实施方式

图1是表示一个实施方式中的电子照相机10的构成例的框图。电子照相机10包括拍摄透镜11、快门12、拍摄元件13、AFE14、图像处理部15、第1存储器16、第2存储器17、记录I/F18、CPU19、操作部20和总线21。在这里,图像处理部15、第1存储器16、第2存储器17、记录I/F18、CPU19经由总线21分别连接。另外,快门11、拍摄元件13、AFE14、操作部20分别与CPU19连接。 

快门12是配置于拍摄透镜11与拍摄元件13之间的机械快门。 

拍摄元件13是对由拍摄透镜11形成的成像进行拍摄的拍摄设备。一个实施方式的拍摄元件13,由例如能够随机存取地读取任意的感光元件的图像信号的CMOS型的固体拍摄元件构成。另外,拍摄元件13的输出被连接于AFE14。 

AFE14是对拍摄元件13的输出实施模拟信号处理的模拟前端电路。该AFE14进行相关双重(相関二重)采样、和/或图像信号的增益的调整、和/或图像信号的A/D转换。而且,AFE14的输出被连接于图像处理部15。另外,CPU19通过由AFE14调整图像信号的增益,而进行与ISO感光度相当的拍摄感光度的调整。 

图像处理部15,对从AFE14输出的数字的图像信号实施各种图像处理(颜色插值处理、灰度转换处理、白平衡调整等)。 

第1存储器16在图像处理的前工序和/或后工序中暂时存储图像的数据。例如,第1存储器16由作为易失性的存储介质的SDRAM构成。另外,第2存储器17为存储由CPU19执行的程序、和/或表示各图像信号中的SN比与拍摄感光度的值的对应关系的数据表等的非易失性的存储器。 

记录I/F18,具有用于连接非易失性的存储介质22的连接器。而且,记录I/F18对连接于连接器的存储介质22执行后述的本图像的数据的写入/读取。上述的存储介质22由硬盘和/或内装有半导体存储器的存储卡等构成。另外,在图1中作为存储介质22的一例图示存储卡。 

CPU19是综合控制电子照相机10的动作的处理器。例如,CP U19在用于进行被拍摄体的拍摄的拍摄模式下的动作时,与用户的拍摄指示输入相应地驱动拍摄元件13,执行伴随着朝向非易失性的存储介质22的记录的本图像的拍摄处理。 

另外,拍摄模式下的CPU19在本图像的拍摄之前执行公知的自动曝光运算,设定作为拍摄条件的1个参数的拍摄感光度。另外,CPU19也可以基于用户的输入设定上述的拍摄感光度。 

操作部20具有接受用户的操作的多个开关。该操作部20由例如接受本图像的拍摄指示的快门按钮、和/或十字状的光标键、和/或确定按钮等构成。 

另外,电子照相机10具备所谓的最佳拍摄模式,在该模式中,连续对多个图像进行拍摄,暂时记录所生成的多个图像,然后进行图像评价而将评价较低的图像删除。该模式可以基于用户经由操作部20的操作而设定,也可以由CPU19自动设定。另外,在最佳拍摄模式中,用户通过操作1次操作部20的快门按钮而进行拍摄指示。 

接下来,使用图2的流程图对最佳拍摄模式下的电子照相机10的动作例进行说明。 

在步骤S101中,CPU19判定是否进行了由用户进行的拍摄指示。CPU19待机一直到进行用户经由操作部20的拍摄指示,在进行拍摄指示时进入步骤S102。 

在步骤S102中,CPU19控制各部分,对第n张图像进行拍摄。另外,在初次的步骤S102中,n=1。另外,以下,将通过第n次拍摄生成的图像称为Img[n]。例如,通过第1次拍摄生成的图像为Im g[1]。 

在步骤S103中,CPU19将通过步骤S102的拍摄而生成的第n张图像经由记录I/F18记录于存储介质22。另外,CPU19也可以代替记录于存储介质22而记录于第1存储器16。 

在步骤S104中,CPU19判定是否结束了N张的从步骤S102到步骤S103的处理。CPU19在判定为没有结束N张时进入步骤S105,在判定为结束了N张时,进入后述的步骤S106。另外,所谓N为预先确定的拍摄张数(例如N=20)。该张数可以是固定的,也可以由CPU19自动确定,也可以通过经由操作部20的用户操作确定。 

在步骤S105中,CPU19设为n=n+1,返回到步骤S102。即,CPU19反复进行N次拍摄(步骤S102),记录N张图像(步骤S103)。 

在步骤S106中,CPU19对于记录于存储介质22的N张图像,分别计算评价值E[n]。另外,以下,将对第n张图像进行计算的评价值称为评价值E[n]。例如,对第1张图像进行计算的评价值为评价值E[1]。评价值的计算基于例如亮度信息、焦点信息、对比度信息、边缘信息等,与公知技术同样进行。 

在步骤S107中,CPU19对于记录于存储介质22的N张图像,分别基于在步骤S106中计算的评价值E[n],进行图像的评价。图像的评价,例如将评价值E[n]分数化等,与公知技术同样进行。在分数化中,优选通过例如曝光、对比度、模糊、笑脸、闭眼等因素进行综合的评价。 

在步骤S108中,CPU19确定删除的图像。CPU19基于在步骤S107中进行的评价,从评价较低的图像中选择预定的张数(例如15张)的图像作为删除的图像。通过进行这样的选择,能够有选择地使评价较高的图像剩余。另外,删除的图像的张数可以是固定的,也可以由CPU19自动确定,也可以通过经由操作部20的用户操作确定。另外,在确定删除的图像时,在基于评价值E[n]与阈值的比较进行确定时,优选以有选择地剩余的图像(没有被删除的图像)为1张以上的方式调整上述的阈值。 

在步骤S109中,CPU19将在步骤S108中确定的图像从记录介质22删除。 

另外,在步骤S103中,在将通过拍摄而生成的图像记录于第1存储器16的情况下,CPU19从第1存储器删除图像,将剩余的图像经由记录I/F18记录于存储介质22。 

在步骤S110中,CPU19进行场景识别。CPU19基于记录于存储介质22的图像(在步骤S109中没有被删除的图像),与公知技术同样进行场景识别。例如,CPU19综合地解析图像的图像信息和/或拍摄信息(快门值、快门速度、ISO感光度、焦距等),识别主要被拍摄体是怎样的物体。 

该场景识别用于推测在被拍摄体上是否含有变动的轨迹。另外,在人像和/或合照那样的场景中,能够推测为在被拍摄体上不含有(难以含有)变动的轨迹。另外,例如,在被拍摄体为进行运动的人物和/或交通工具等那样的场景中,能够推测为在被拍摄体上含有(容易含有)变动的轨迹。 

在步骤S111中,CPU19基于在步骤S110中进行的场景识别的结果,判定“在被拍摄体上是否含有变动的轨迹”。CPU19在判定为“在被拍摄体上含有变动的轨迹”时进入步骤S112,在判定为“在被拍摄体上不含有变动的轨迹”时,进入后述的步骤S113。基本上能够认为,在“在被拍摄体上含有变动的轨迹”的情况下,优选时间系列的再现顺序,在“在被拍摄体上不含有变动的轨迹”的情况下,优选不是时间系列的再现顺序。 

另外,具有拍摄期间较长且记录于存储介质22的图像(在步骤S109中没有被删除的图像)的数较少等不能判定“在被拍摄体上是否含有变动的轨迹”的情况。在这样的情况下,CPU19也可以设为进入步骤S112以及步骤S113中的预先确定的步骤(例如,步骤S113)的构成。 

在步骤S111中,在判定为“在被拍摄体上含有变动的轨迹”时,在步骤S112中,CPU19根据在步骤S102中说明的拍摄的拍摄顺序,确定记录于存储介质22的图像(在步骤S109中没有被删除的图像)的再现顺序。 

所谓“在被拍摄体上含有变动的轨迹”的情况,为主要被拍摄体为进行挥杆(ゴルフスイング)的人物的情况和/或为行驶中的车的情况等。在这样的情况下,主要被拍摄体进行连续的动作或者主要被拍摄体连续变化的可能性较高,所以再现顺序优选为时间系列。因此,CPU19根据多个图像的拍摄的拍摄顺序,确定再现顺序。通过这样确定再现顺序,在再现时,用户能够目视以时间系列变化的多个图像而确认变动的轨迹。因此,用户能够没有别扭感地比较多个图像,并且能够迅速进行哪个图像为最优选的图像的判断。 

另一方面,在步骤S111中,在判定为“在被拍摄体上不含有变动的轨迹”时,在步骤S113中,CPU19基于在步骤S107中说明的评价的结果,按照评价较高的顺序,确定记录于存储介质22的图像(在步骤S109中没有被删除的图像)的再现顺序。 

所谓“在被拍摄体上不含有变动的轨迹”的情况,是被拍摄体为合照和/或纪念照的人物的情况和/或风景等情况。在这样的情况下,在主要被拍摄体自身没有较大的变动和/或变化,但笑脸和/或闭眼等细节不同的可能性较高,所以再现顺序为时间系列没有优点。因此,CPU19以评价较高的顺序确定再现顺序。通过这样确定再现顺序,在再现时,用户能够从评价较高的图像开始顺序目视比较多个图像,并且能够迅速进行哪个图像为最优选的图像的判断。 

特别,在被拍摄体为所谓的人像等的情况下,“背景区域是否显眼”也成为重要的因素。因此,也可以通过显著性映射等在评价上加上“背景区域是否显眼”。所谓显著性映射,是基于颜色、亮度、边缘量、边缘的方向性等表示与周围的区域相对的特异性的映射。通过使用这样的映射进行评价,能够将背景区域设为基准而进行图像的评价。另外,“背景区域是否显眼”的评价可以与在步骤S106中说明的评价值E[n]的计算时以及在步骤S107中说明的评价时一起进行,也可以基于在步骤S110中说明的场景识别的结果,在判断为“背景区域是否显眼”的评价有效果的情况下进行,也可以在步骤S113中确定再现顺序时进行。 

另外,在步骤S113中,在以评价较高的顺序确定再现顺序时,也可以基于在步骤S110中说明的场景识别的结果而改变再现顺序的确定方法。例如,也可以:在合照中,以整体的评价较高的顺序确定再现顺序,在人像中,以“背景区域是否显眼”的评价较高的顺序确定再现顺序。 

在步骤S114中,CPU19按照在步骤S112或者步骤S113中确定的再现顺序,确定记录于存储介质22的各图像(在步骤S109中没有被删除的图像)的名称。通常,在图像的生成时,按照数字和/或字母等的升序进行再现。因此,CPU19按照上述的再现顺序确定各图像的名称。 

在步骤S115中,CPU19记录在步骤S114中确定的各图像的名称,结束一连串的处理。CPU19将记录于存储介质22的图像(在步骤S109中没有被删除的图像)的各自的名称变更为在步骤S114中确定的名称。 

另外,在将通过一连串的处理而产生的多个图像(在步骤S109中没有被删除的多个图像)分组化而记录的情况下,也可以将再现顺序为第1的图像设为代表图像(主图像)。 

如以上所说明,根据本实施方式,对被拍摄体进行拍摄,生成多个图像,对于生成的多个图像,进行评价。然后,基于评价结果,在由拍摄部生成的多个图像中,选择一部分图像,基于选择的多个图像,进行场景识别。进而,基于识别结果,确定进行了场景识别的多个图像的再现顺序。因此,能够将多个图像的再现顺序设为与被拍摄体的特性相应的最合适的顺序。 

特别,根据本实施方式,基于场景识别的结果,推测在主要被拍摄体上是否有连续的变化,根据在主要被拍摄体上是否有连续的变化,确定再现顺序,由此能够确定与被拍摄体的特性相应的最合适的再现顺序。而且,通过如上所述那样确定再现顺序,在对在相同场景下记录的多张图像进行再现时,能够一直以适合人的感觉的顺序进行再现,所以用户能够没有别扭感地欣赏图像,并且能够迅速进行哪个图像是最优选的图像的判断。 

另外,在本实施方式中,表示了在对N张图像进行拍摄(步骤S102)以及记录(步骤S103)后进行评价值E[n]的计算(步骤S106)的例子,但本发明并不限定于该例。例如,也可以在对N张图像进行拍摄(步骤S102)后立即开始评价值E[n]的计算(步骤S106)。 

另外,在本实施方式中,作为确定再现顺序的因子,列举评价以及拍摄顺序为例子进行了说明,但本发明并不限定于该例子。例如,在电子照相机10具有认证预先登记的特定的人物而拍摄的功能的情况下,也可以按照个人认证用的登记顺序而确定再现顺序。上述的功能在例如运动会的赛跑中的冲刺场景等中利用。例如,也可以使比个人认证用的登记顺序较高的(优先顺序较高的)人物的部分的评价高或者人物拍摄得大的图像的再现顺序提前,使比该人物的部分的评价低或者人物拍摄得小的图像的再现顺序滞后。另外,这样的再现顺序的确定可以在上述的功能有效的情况下一直执行,也可以加上在步骤S110中说明的场景识别的结果,判断是否执行。 

另外,在本实施方式中,例示了与在步骤S110中说明的场景识别的结果相应而变更用于确定再现顺序的规则性的例子,但本发明并不限定于该例。例如,在设定为人像和/或风景模式等拍摄模式的情况下,也可以设为与该拍摄模式相应而变更用于确定再现顺序的规则性的构成。进而,也可以用户预先设定预定的条件与用于确定再现顺序的规则性的关系,在满足该条件的情况下,基于上述的关系而变更用于确定再现顺序的规则性。 

另外,在本实施方式中,例示了与再现顺序相应而确定各图像的名称的例子,但本发明并不限定于该例。例如,也可以设为不变更各图像的名称而与各图像相对应地记录表示再现顺序的信息的构成。例如,也可以在图像的附加信息(标签信息)等中记录表示再现顺序的信息和/或表示用于确定再现顺序的规则性的信息等。 

另外,在本实施方式中,表示了在最佳拍摄模式时进行图2的流程图所示的一连串的处理的例子,但本发明并不限定于该例。例如,在连拍模 式下生成多个图像的情况下也同样能够适用本发明。另外,也可以将由用户选择的多个图像设为对象,进行步骤S106以后的处理。 

另外,在上述的实施方式中,对在图1所示的电子照相机10中实现本发明的技术的例子进行了说明。然而,本发明并不限定于此。例如,在图1所示的电子照相机10以外的构成的电子照相机中也同样能够适用本发明。 

另外,也可以通过计算机与图像处理程序,软件性实现在上述实施方式中说明的图像处理装置。在该情况下,设为通过计算机实现在图2的流程图中说明的步骤S106以后的处理的一部分或者全部的构成即可。另外,进而,除了上述的计算机以外,本发明同样能够适用于具有数字的图像的再现显示功能和/或修正功能的电子设备(例如,相片浏览装置、数字相框、照片的印刷装置等)等。另外,在上述的实施方式中说明的电子照相机10也可以作为便携电话终端等的照相机模块而安装。 

另外,在上述的实施方式中,对软件性实现各处理的例子进行了说明,但当然也可以通过ASIC等而硬件性实现这些处理。 

符号说明 

10…电子照相机,13…拍摄元件,14…AFE,16…第1存储器,17…第2存储器,19…CPU,22…存储介质 。

去获取专利,查看全文>

相似文献

  • 专利
  • 中文文献
  • 外文文献
获取专利

客服邮箱:kefu@zhangqiaokeyan.com

京公网安备:11010802029741号 ICP备案号:京ICP备15016152号-6 六维联合信息科技 (北京) 有限公司©版权所有
  • 客服微信

  • 服务号