首页> 中国专利> 红外选择通知装置和红外选择通知方法

红外选择通知装置和红外选择通知方法

摘要

本发明的红外选择通知装置和红外选择通知方法,涉及热像装置、热像处理装置,以及红外热成像检测的应用领域。现有技术的热像装置,拍摄时需依靠使用者的主观经验来拍摄被摄体热像,工作量大,并且难以保证热像的质量;本发明提供一种红外选择通知装置和红外选择通知方法,能检测出所获取的热像数据帧中特定被摄体热像的规定信息,或还考虑辅助信息的因素,以此能从连续获取的热像数据帧中自动选择符合规定条件的热像数据帧并进行通知,以利于进一步进行分析、存储等处理或操作,从而使拍摄的操作简单,拍摄速度快,热像质量高。

著录项

  • 公开/公告号CN114923580A

    专利类型发明专利

  • 公开/公告日2022-08-19

    原文格式PDF

  • 申请/专利权人 杭州美盛红外光电技术有限公司;

    申请/专利号CN202210406409.8

  • 发明设计人 王浩;

    申请日2012-12-27

  • 分类号G01J5/48(2006.01);G01J5/10(2006.01);G01J5/02(2022.01);G06V10/28(2022.01);G06V10/44(2022.01);G06V10/74(2022.01);

  • 代理机构杭州天昊专利代理事务所(特殊普通合伙) 33283;

  • 代理人董世博

  • 地址 311100 浙江省杭州市余杭区良渚街道七贤桥村1幢

  • 入库时间 2023-06-19 16:25:24

法律信息

  • 法律状态公告日

    法律状态信息

    法律状态

  • 2022-09-06

    实质审查的生效 IPC(主分类):G01J 5/48 专利申请号:2022104064098 申请日:20121227

    实质审查的生效

说明书

技术领域

本发明的红外选择通知装置和红外选择通知方法,涉及手持拍摄或在线拍摄的各种热像装置,接收和处理热像的热像处理设备,以及红外检测的应用领域。

背景技术

自热像检测技术应用以来,使用者一直困惑于对正确拍摄部位、拍摄角度下被摄体成像形态的认知和拍摄距离的控制,这些取决于使用者的主观意念和经验,导致目前如果要确保检测的质量则需边拍摄边思考,拍摄速度很慢,如果加快速度则易遗漏关键拍摄部位或被摄体缺陷,影响状态评估的效果。通常需要数年的实践积累,使用者才能达到较高的检测水平。

本领域的技术人员一直试图解决这个问题,存在这样的技术,将体现了被摄体形态特征的参考图像与红外热像进行连续重叠显示,使用者以该参考图像作为拍摄特定被摄体热像的视觉参照,进行被摄体的拍摄,来确保特定被摄体热像在红外热像中的位置、尺寸和特定被摄体热像的形态特征的正确,以保证了拍摄的质量。例如专利文献申请号:201210008404.6公开了这样的热像拍摄装置。

然而,上述方式需要使用者通过视觉人工来判断参考图像和特定被摄体热像的匹配程度,使用者容易产生视觉上的疲劳;当使用的是手持的热像装置时,对准拍摄的操作容易疲劳,反复的瞄准延长的拍摄的时间,并影响了拍摄的热像质量。并且,这种方式操作呆板,对拍摄对准的要求高。

因此,所理解需要一种红外选择通知装置,其能达到无需过度依赖使用者主观上的意念,能从所获取的热像数据帧中自动选择符合规定条件的热像数据帧,并进行通知,以利于分析、存储等处理或操作,从而使操作简单,获得的热像数据帧质量高,

发明内容

本发明提供一种红外选择通知装置和红外选择通知方法,在红外热像中显示参考图像,并能自动检测出所获取的热像数据帧中特定被摄体热像的位置、尺寸、倾斜角度、相关度的值等规定信息,或还考虑辅助信息的因素,以此从连续获取的热像数据帧中自动选择符合规定条件的热像数据帧,以利于进一步进行通知、分析、存储等处理或操作。从而使拍摄的操作简单,拍摄速度快,热像质量高。并且,本发明也适用于从大量处理的热像数据帧(例如获取自热像文件)中来检测出符合条件的热像数据帧。

为此,本发明采用以下技术方案,红外选择通知装置,具有,

获取部,用于连续获取热像数据帧;

参考图像指定部,用于指定参考图像的构成数据;

位置设置部,用于设置参考图像位于红外热像中的位置参数;

图像处理部,用于基于所指定的参考图像的构成数据及位置设置部所设置的位置参数,对所获取的热像数据帧进行规定处理,生成体现了参考图像的红外热像;

显示部,用于显示规定处理后获得的图像;

检测部,用于基于获取部连续获取的热像数据帧,检测热像数据帧中与特定被摄体热像有关的规定信息;

比较部,用于将检测部检测获得的规定信息和/或基于检测获得的规定信息而得到的评价值与规定的对比值进行比较;

通知部,基于比较部的比较结果,进行通知。

在采用上述技术方案的基础上,本发明还可同时采用以下进一步的技术方案:红外选择通知装置,具有,

获取部,用于连续获取热像数据帧;

参考图像指定部,用于指定参考图像的构成数据;

位置设置部,用于设置参考图像位于红外热像中的位置参数;

图像处理部,用于基于所指定的参考图像的构成数据及位置设置部所设置的位置参数,对所获取的热像数据帧进行规定处理,生成体现了参考图像的红外热像;

显示部,用于显示规定处理后获得的图像;

检测部,用于基于获取部连续获取的热像数据帧,检测热像数据帧中与特定被摄体热像有关的规定信息;

辅助信息获取部,用于获取辅助信息;

比较部,用于将检测部检测获得的规定信息及辅助信息获取部获取的辅助信息和/或检测部检测获得的规定信息及辅助信息获取部获取的辅助信息而得到的评价值,与规定的对比值进行比较;

通知部,基于比较部的比较结果,进行通知。

本发明的红外选择通知方法,具有,

获取步骤,用于连续获取热像数据帧;

参考图像指定步骤,用于指定参考图像的构成数据;

位置设置步骤,用于设置参考图像位于红外热像中的位置参数;

图像处理步骤,用于基于所指定的参考图像的构成数据及位置设置步骤所设置的位置参数,对所获取的热像数据帧进行规定处理,生成体现了参考图像的红外热像;

显示步骤,用于显示规定处理后获得的图像;

检测步骤,用于基于获取步骤连续获取的热像数据帧,检测热像数据帧中与特定被摄体热像有关的规定信息;

比较步骤,用于将检测步骤检测获得的规定信息和/或基于检测获得的规定信息而得到的评价值与规定的对比值进行比较;

通知步骤,基于比较步骤的比较结果,进行通知。

本发明的其他方面和优点将通过下面的说明书进行阐述。

附图说明:

图1是表示本发明的实施例1的热像装置100的概略构成的框图。

图2是实施例1的热像装置100的外型图。

图3是实施例1存储介质中存储的被摄体信息、被摄体识别信息等的示意图。

图4是不同参数的检测窗口的示意图。

图5是检测区域中设置检测窗口进行检测的示意图。

图6是实施例1的处理过程的显示界面的显示例。

图7是表示实施例1的控制流程图。

图8是表示实施例2的控制流程图。

图9是实施例2的处理过程的显示界面的显示例。

图10是表示实施例3的控制流程图。

图11是实施例4的处理过程的显示界面的显示例。

具体实施方式

现在将根据附图详细说明本发明的典型实施例。注意,以下要说明的实施例用于更好地理解本发明,所以不限制本发明的范围,并且可以改变本发明的范围内的各种形式。而且,虽然本发明在以下实施例中用于手持式的热像拍摄设备,但对于本发明来说拍摄功能不是必须的,可以使用要进行特定被摄体检测的任意热像数据源。因此本发明广泛用于读出和播放或显示记录热像、或者从外部接收和处理热像的热像处理设备。所述热像处理设备包括如个人计算机、个人数字助理等各种装置。

实施例1

实施方式1的热像装置100(红外选择通知装置)基于由拍摄部1拍摄获得的热像数据帧(拍摄获得的热像数据帧是指热像信号帧),检测获取的热像数据帧与被摄体识别信息之间的相关度,并且,热像装置100基于获得的最大相关度对应的热像数据帧有关的特定信息,来通知使用者。

图1是表示本发明的实施例1的红外选择通知装置的示例的的热像装置100的概略构成的框图。

具体而言,热像装置100具有拍摄部1、临时存储部2、闪存3、通信I/F4、存储卡I/F5、存储卡6、图像处理部7、检测部8、显示控制部9、显示部10,控制部11、操作部12、控制部11通过控制与数据总线13与上述相应部分进行连接,负责热像装置100的总体控制。

拍摄部1由未图示的光学部件、镜头驱动部件、红外探测器、信号预处理电路等构成。光学部件由红外光学透镜组成,用于将接收的红外辐射聚焦到红外探测器。镜头驱动部件根据控制部11的控制信号驱动透镜来执行聚焦或变焦操作。此外,也可为手动调节的光学部件。红外探测器如制冷或非制冷类型的红外焦平面探测器,把通过光学部件的红外辐射转换为电信号。信号预处理电路包括采样电路、AD转换电路、定时触发电路等,将从红外探测器输出的电信号在规定的周期内进行取样等信号处理,经AD转换电路转换为数字的热像信号,该热像信号例如为14位或16位的二进制数据(又称为AD值)。在实施例1中,拍摄部1作为获取部的实例。

所谓热像数据,可以是热像信号(红外探测器输出信号经AD转换后获得的AD值数据),或红外热像的图像数据,或温度值的阵列数据,或其他基于热像信号生成的数据等。在下文中热像数据以热像信号为例。

临时存储部2如RAM、DRAM等易失性存储器,作为对拍摄部1输出的热像数据帧进行临时存储的缓冲存储器,例如重复如下处理,将获取的热像数据帧临时存储规定时间份,并在由所述获取部(拍摄部1)获取新的帧时,删除旧的帧后存储新的热像数据帧;同时,作为图像处理部7、检测部8、控制部11等的工作存储器起作用,暂时存储进行处理的数据。不限于此,图像处理部7、检测部8、控制部11等处理器内部包含的存储器或者寄存器等也可以解释为一种临时存储介质。

闪存3,存储有用于控制的程序,以及各部分控制中使用的各种数据。本实施例中,如图3所示,与参考图像、检测等有关的数据存储在闪存3中,例如存储被摄体识别信息的数据库(表3),将每个被摄体的被摄体信息、参考图像的构成数据、被摄体识别信息相互对应,存储在该特征数据库中,此外,也可以以特定格式的数据文件等来存储。所谓参考图像的构成数据,例如矢量图形数据,点阵图像数据,也包括由多个坐标点数据构成参考图像的构成数据。其中模板可以参考图像与相同或不同。被摄体信息为与被摄体有关的信息,例如代表被摄体地点、类型、编号等的信息,此外,还可以例举被摄体有关的归属单位、分类等级(如电压等级、重要等级等)、型号、制造厂商、性能和特性、过去的拍摄或检修的履历、制造日期、使用期限等各种信息。

通信I/F4是例如按照USB、1394、网络等通信规范,将热像装置100与外部装置进行连接并数据交换的接口,作为外部装置,例如可以列举个人计算机、服务器、PDA(个人数字助理装置)、其他的热像装置、可见光拍摄装置、存储装置等。

存储卡I/F5,作为存储卡6的接口,在存储卡I/F5上,连接有作为可改写的非易失性存储器的存储卡6,可自由拆装地安装在热像装置100主体的卡槽内,根据控制部11的记录控制单元(省略图示)的控制记录热像数据等数据。

图像处理部7用于对通过拍摄部1获得的热像数据帧进行规定的处理,例如其在显示定时每次到来之际,从临时存储在所述临时存储部2的规定时间份的热像数据帧中,选择并读出每个规定时间间隔的帧;图像处理部7的处理如修正、插值、伪彩、合成、压缩、解压等,进行转换为适合于显示用、记录用等数据的处理。图像处理部7例如可以采用DSP或其他微处理器或可编程的FPGA等来实现,或者,也可与检测部8、控制部11对应的处理器为一体。

图像处理部7用于对拍摄部1拍摄获得的热像数据实施规定的处理来获得红外热像的图像数据。具体而言,例如,图像处理部7对拍摄部1拍摄获得的热像数据进行非均匀性校正、插值等规定处理,对规定处理后的热像数据进行伪彩处理,获得红外热像的图像数据;伪彩处理的一种实施方式,例如根据热像数据(AD值)的范围或AD值的设定范围来确定对应的伪彩表范围,将热像数据在伪彩板范围中对应的具体颜色值作为其在红外热像中对应像素位置的图像数据。从图像处理部7伪彩处理后获得的图像数据传送到作为缓冲存储器使用的临时存储部2中。

另外,图像处理部7具备合成单元(未图示),所述合成单元基于参考图像指定部11F所指定的参考图像的构成数据,及位置设置部11G设置的位置参数,来获得参考图像,并与图像处理部7生成的红外热像,进行合成后产生合成图像的图像数据。具体地说,图像合成单元根据规定的透明率,将参考图像与红外热像进行合成;包括这种情况,参考图像的透明率为1(如参考图像为边缘轮廓的线条图像),即不透明与红外热像合成。

图像处理部7,用于基于所指定的参考图像的构成数据及位置设置部11G所设置的位置参数,对所获取的热像数据帧进行规定处理,生成体现了参考图像的红外热像。

此外,合成也可以是根据这样的处理,例如根据参考图像位于红外热像中的像素位置,来对热像数据帧进行伪彩处理,以生成体现了参考图像和红外热像的显示用图像数据(类似重叠的效果);例如,根据参考图像的位于红外热像中的像素位置,对该像素位置的热像数据不进行伪彩处理,将参考图像的像素位置以外的热像数据进行伪彩处理,而后结合参考图像的图像数据,来生成显示用图像数据。

或者,也可以将参考图像对应热像数据帧中的像素位置的像素,进行与生成红外热像的其他像数位置的热像数据的伪彩处理所不同的处理(如伪彩处理,来生成带有体现该参考图像的图像。这种情况下,在热像装置100中可以去除用来将参考图像与红外热像合成的图像合成单元。

所谓的参考图像,是指与红外热像共同显示,来帮助使用者拍摄特定被摄体的图像。例如,体现该特定被摄体的形态特征的图像;参考图像也可以是其他的形状,如方形、圆形;例如,体现被摄体热像位于红外热像中的期望成像位置的的标识图像;例如体现红外热像中的检测区域(检测区域可以包含一个或多个检测窗口)的标识图像;例如体现了期望的被摄体热像的分析区域的标识图像等。优选的方式,参考图像按照规定的位置参数(位置、或还包括尺寸,或还包括旋转角度)与红外热像重叠显示;此外,参考图像也可显示于显示部中,红外热像窗口之外的区域;此外,也可以将代表参考图像与红外热像的位置及尺寸比例等关系的缩略图显示在红外热像窗口之外的显示部的区域。

检测部8基于获取的热像数据帧,进行与被摄体识别信息之间的相关度计算;其中,检测部8基于获取部连续获取的热像数据帧,可以是对连续获取的热像数据帧依次全部进行检测处理,也可以从连续获取的热像数据帧中选择部分热像数据帧进行检测处理,例如只读取规定间隔的热像数据帧进行检测处理;例如当第一次检测到与相关度和/或评价值大于对比值的热像数据帧时,即不再继续检测;例如响应使用者的预定操作来开始进行检测或停止检测;或者对读取的热像数据帧或检测窗口中的热像数据检测前进行了缩小处理;以此,能减轻伴随着检测的处理负担。

所谓热像数据,可以是热像信号(AD值),或红外热像的图像数据,或温度值的阵列数据,或其他基于热像信号获得的数据等。例如,检测部8基于控制部11的控制,可以通过读取临时存储部2中所存储的拍摄部1拍摄获得的热像信号帧,或通过读取临时存储部2中所存储的图像处理部对拍摄部1拍摄获得的热像信号帧进行规定处理获得的数据(例如伪彩处理获得的红外热像的图像数据),来执行与所登记的被摄体识别信息之间的相关度的检测处理。不限定于拍摄部1拍摄获取的热像数据帧,也可以是外部输入的数据通过规定处理获得的,例如通过I/F4从其他热像装置所接收后解码获得的热像信号帧(或红外热像的图像帧)。也可以是从记录介质中获取的,例如从存储卡5中读取热像文件而获得热像信号帧(或红外热像的图像帧)。

检测部8包括特征登记单元、检测窗口设置单元、检测单元(未图示)。

特征登记单元,用于登记用来相关度计算有关的被摄体识别信息。例如,可根据存储介质中预先存储的被摄体识别信息来登记被摄体识别信息;例如,根据使用者的选择的被摄体信息关联的被摄体识别信息,来登记用于相关度计算的被摄体识别信息。此外,也可以由用户来指定被摄体识别信息,例如可以通过从显示图像中指定被摄体区域来获得被摄体识别信息(例如模板数据,或提取的特征量)。所登记的被摄体识别信息例如被存储在临时存储部2的规定位置,或存储时以标记与存储的其他被摄体识别信息区别。

所谓被摄体识别信息可以是用于模板匹配的模板数据;此外,被摄体识别信息也可以是参数描述的特征量,所谓特征量(点、线、面等特征),例如,为根据检测窗口中所包含的像素的状态所决定的值,如为特定检测窗口中的规定部分像素的比例、像素值的平均值、特定被摄体的轮廓的中心点、面积等。例如,对于表3中的被摄体1,被摄体识别信息为模板数据301,对于表3中的被摄体2,被摄体识别信息为特征量302。在具体应用中,可以根据情况选择其中一种或多种方式的结合。

检测窗口设置单元,用于设置检测窗口。例如根据一定范围的检测区域(如图5中的G1),在该检测区域G1中设置多个检测窗口(例如按照质量要求来预定检测窗口的参数),可以是多个不同尺寸的检测窗口,也可以是近一步倾斜后的检测窗口,如图4所示,其中图4(a)为标准的检测窗口,图4(b)为根据缩小尺寸的检测窗口,图4(c)为放大尺寸设置的检测窗口,图4(d)为按照规定角度倾斜而设置的检测窗口。为了等于检测窗口的尺寸,此处模板图像以缩小或放大或还倾斜的状态被使用,或者,也可以准备及存储尺寸等于窗口尺寸的模板图像以备使用。此外,也可将检测窗口中的热像数据以缩小或放大或还倾斜的状态被使用,以对应模板图像。检测窗口不限定于方形,也可以是其它形状,例如可以根据模板的形状来定。

检测区域可由使用者根据拍摄习惯来设置;或者也可以是预存的如与被摄体信息关联的;也可以根据上次检测出特定被摄体热像的位置生成的;也可不设置检测区域,即默认热像数据帧的范围为检测区域。也可以是使用者指定的位置和尺寸来设置多个检测窗口。此外,并非必须设置多个检测窗口,也可以只设置一个检测窗口。

需要注意的是,对于红外检测的应用领域,例如变电站中充斥着大量外形类似,但名称不同的设备,为避免误导使用者及误拍摄,优选的是设置检测区域。在红外热像上重叠显示检测区域的标识,使用者易于明白所拍摄的特定被摄体热像的大致位置、尺寸等,便于拍摄参照。并且能加快检测处理的速度,但检测区域也可不显示。

检测单元,将所读取的热像数据帧中基于检测窗口设置单元所设置的检测窗口中的热像数据,根据所登记的被摄体识别信息,获得用于评价类似程度的相关度的值。当设置了多个检测窗口时,例如可将其中检测获得的最大相关度的值作为该热像数据帧的相关度的值。

检测部8的检测处理可以是基于模板匹配的检测方式,基于检测窗口中的热像数据与模板图像进行相关度的计算和比较;例如,检测单元计算检测窗口中的红外热像和作为模板的红外热像相互对应的位置的像素之间的差的和,所计算出的差的和越小,相关度越高。

也可配置为提取特征量进行匹配的实施方式,利用模板与检测窗口中的热像数据的特征量之间的比较来确定相关度。例如,提取检测窗口中的被摄体图像的特定像素的比例,与模板图像中的特定像素的比例越接近,相关度越高。

检测部8的检测处理也可以是基于参数描述的特征量的检测实施方式,进行规定的运算来获得检测窗口中的热像数据的特征量,并与特征量的基准值(被摄体识别信息)进行比较,来获得相关度的值。例如,所述特征量的基准值为特定像素值的像素的比例,检测单元计算热像数据中特定像素值的像素的比例,与特征量的基准值进行比较,来获得二者之间的相关度的值。

优选的方式,采用轮廓图像作为匹配的模板,检测部8例如通过以下的处理来计算相关度,首先,检测部8提取位于检测窗口中的热像数据,按照AD值的预定阀值对读取的检测窗口中的热像数据进行二值化;接着,提取该二值图像的具有预定像素值(1或0)的像素相连通的连通图像;而后判断该连通图像是否具有预定范围的大小;如果判断出该连通图像的大小在预定范围内,则近一步在提取的连通图像与所登记的模板之间执行比较处理,例如计算二者之间的重叠面积在各自总面积中的比例之和,由此,获得所提取热像数据与模板之间相关度。

对于检测的示例,如图5所示,检测部8从热像数据帧501的规定检测区域G1的左上角到右下角移动窗口J1以进行检测,剪切窗口中的热像数据,并检测其与模板图像T1的相关度。具体而言,窗口J1从左端向右以规定值的窗口位移(例如一个像素)逐步地移动,并在到达右端后,被设置返回左端并向下移动窗口位移,以及随后再次逐步地向右移动。为高精度地检测被摄体,检测的窗口尺寸、窗口位移、窗口的倾斜角度的变换范围被预先定义,例如窗口尺寸的变化范围从150×50像素到120×40像素,窗口位移的变化范围从10个像素到1个像素,窗口的倾斜角度的变化范围为基于中心点的0°到10°。检测部8逐次的,每次5个像素地改变窗口尺寸,并每次1个像素地改变窗口位移,并每次2°地改变窗口倾斜角度。检测部8进行模板图像T1和热像数据帧501的相关度计算;在完成所有检测窗口的检测后,从中选择相关度最高的检测窗口所获得的相关度的值,作为该热像数据帧501对应的相关度的值。

注意,可以基于被摄体识别信息,来计算热像数据帧的相关度的各种方法,上述例举的处理仅是可使用方法的示例。

显示控制部9,用于将临时存储部2所存储的显示用的图像数据显示在显示部10。例如,在拍摄待机模式中,连续显示拍摄获得的热像数据生成的红外热像;在回放模式,显示从存储卡6读出和扩展的红外热像,此外,还可显示各种设定信息。具体而言,显示控制部9具有VRAM、VRAM控制单元、信号生成单元(未图示)等,并且,信号生成单元在控制部11的控制下,从VRAM中定期读出图像数据(从临时存储部2读出并存储到VRAM的图像数据),产生视频信号输出,显示在显示部10。在热像装置100中,显示部10例如是液晶显示装置。不限于此,显示部10还可以是与热像装置100连接的其他显示装置,而热像装置100自身的电气结构中可以没有显示部,这时显示控制部9也可作为体现通知结果的图像的输出部件的实例。

另外,在实施例1中,显示部10基于通知部11D的控制,用于对通知信息进行显示;例如以文字和图像进行警告,如显示最大相关度的信息,显示最大相关度的热像数据帧获得的红外热像,或者还伴随着文字、图像的透明率、颜色、尺寸、线形、粗细、闪烁、亮度、边框的变化等方式来进行通知。

其中,通知的方式可以持续规定的时间。此外,也可控制热像装置100中的振动部件、指示灯(未图示),分析部件(未图示),诊断部件(未图示),在检测到最大相关度的热像数据帧时,也可由指示灯产生灯光变化,由振动装置产生震动,由分析部件进行分析并显示分析结果,由诊断部件进行诊断并显示诊断结果;或同时以上述方式之一或多个进行通知,只要是使用者可以感知的方式都可。

控制部11控制了热像装置100的整体的动作,在存储介质例如闪存3中存储有用于控制的程序,以及各部分控制中使用的各种数据。控制部11例如由CPU、MPU、SOC、可编程的FPGA等来实现。在本实施例中,控制部11、显示部10等还作为被摄体选择部件的构成,用来选择被摄体信息。

另外,控制部11具备比较部11A,用于对检测部8检测获得的规定信息和/或基于检测获得的规定信息而得到的评价值与规定的对比值进行比较,所述规定信息,至少包括特定被摄体热像的位置、尺寸、倾斜角度、相关度的值中的一种或任意组合的信息;实施例1中,将检测部8所获得的热像数据帧的相关度的值,与相关度的对比值进行比较。注意,相关度的对比值可以是预先准备的相关度的判断值(例如与被摄体识别信息对应存储在表3中,例如使用者设置的对比值),当大于该对比值时,判断该热像数据帧中具有特定被摄体热像;也可不必预先准备的相关度的对比值,而根据热像数据帧中的相关度的值来获得,例如将第一次检测处理获得的相关度的值作为后续对比相关度的对比值,并且,当后续检测到相关度大于该对比值时,予以更新。

另外,控制部11具有选择部11B,基于比较部11A的比较结果,选择与规定的热像数据帧有关的特定信息。所选择的特定信息可用于后续将经历的规定处理,如分析、记录、通知等。

其中,规定的热像数据帧有关的特定信息,可以是在临时存储部2的多帧热像数据帧中的一帧或多帧热像数据帧有关的特定信息;例如,基于比较部11A的比较结果,选择具有最大相关度的热像数据帧有关的特定信息;但并不限定于所检测到的最大相关度的那一帧热像数据帧,例如检测到最大相关度的帧的时序之前或之后的那一帧,或由多帧运算获得的那一帧,或最早检测到大于规定的对比值的相关度对应的热像数据帧有关的特定信息。也可以配置为选择多个热像数据帧有关的特定信息,例如选择相关度第一、第二、第三的三帧热像数据帧有关的特定信息,也可能选择多帧相关度一样的热像数据帧的特定信息。

或者,也可以是检测到最大相关度的热像数据帧时,拍摄部1拍摄获得并存储在临时存储部2中的多个热像数据帧中的一帧或多帧;或者,也可以是检测到最大相关度的热像数据帧后,拍摄部1拍摄获得并存储在临时存储部2中的多个热像数据帧中的一帧或多帧。

所述特定信息为从临时存储部2的多帧热像数据帧中选择的热像数据帧,从多帧热像数据帧中选择的热像数据帧进行规定处理获得的数据,检测获得的规定信息,基于检测获得的规定信息而得到的评价值,基于检测获得的规定信息和/或所述评价值生成的提示信息,其中的一项或多项。

其中,从多帧热像数据帧中选择的热像数据帧进行规定处理获得的数据,例如将所选择的热像数据帧进行规定处理后获得的数据,例如从该热像数据帧中提取的特定被摄体热像,例如生成的红外热像的图像数据,例如将该热像数据帧转换为分析数值例如温度数值的阵列等。

其中,检测获得的规定信息,所述规定信息例如所述规定信息,至少包括特定被摄体热像的位置、尺寸、倾斜角度、相关度的值中的一种或任意组合的信息。

其中,基于检测获得的规定信息而得到的评价值,为根据检测获得的规定信息根据加权系数进行加权、规定信息与评价值的对照表等来获得评价热像质量等的评价值。

其中,基于检测获得的规定信息和/或所述评价值生成的提示信息,例如将检测获得的规定信息和/或所述评价值转换为使用者便于理解的百分比信息的提示等。

选择部11B对所选择的特定信息进行保持/或不保持的控制;所保持的特定信息保持在临时存储部2的规定区域,此外,也可保持(存储)在例如闪存3等存储介质中。在下文中,选择部11B将热像数据帧等特定信息保持在临时存储部2的规定区域为例。

选择部11B可以将所选择的特定信息始终保持,也可以在规定的条件下进行保持,例如当前选择的特定信息保持规定的时间;例如在检测到更大相关度的热像数据帧之前始终保持当前的特定信息;例如在用于检测比对的被摄体识别信息被变更之前始终保持所选择的特定信息;例如根据使用者的指示(如使用者选择了显示部中显示的某个特定信息来确定保持)来保持的特定信息。此外也可不保持,例如通过通信I/F4发送至其他外部装置;例如经历其他处理如在通知后即删除等。

并且,选择部11B,用于按照规定的条件将临时存储部2所保持的特定信息,更新为选择部11B后续选择的特定信息。所谓规定的条件,例如规定的时间,例如检测了规定数量的热像数据帧,例如根据比较部11A的比较结果(获得了相关度大于所保持的热像数据帧的相关度等情况),例如使用者的指示等。此外,还可将之前予以保持的特定信息继续保持。

实施例1中,基于比较部11A的比较结果,选择部11B对特定信息进行选择、保持及更新的控制。如当检测部8检测到的特定被摄体热像的相关度的值大于相关度的对比值时,将选择该相关度的值及对应的热像数据帧等特定信息予以保持在临时存储部2等存储介质中;当之前有相关度的值及对应的热像数据帧等特定信息时,将替换之前的特定信息;直到后续有相关度更高的热像数据帧时,可被替换(也可保持规定数量的相关度较高的热像数据帧)。这样,作为最大的相关度的值及对应的热像数据帧等特定信息得以保持。此外,还可将之前予以保持的特定信息继续保持。

注意,选择部11B并不限定于选择最优(例如相关度最大)的一帧热像数据帧有关的特定信息,例如,也可以选择次优的,或选择多帧运算来获得那一帧,或也可以配置为选择多个热像数据帧有关的特定信息,例如选择存储(保持)相关度第一、第二、第三的三帧热像数据帧有关的特定信息,也可能保存了三帧相关度一样的热像数据帧的特定信息。

另外,控制部11具有对比值更新部11C,用于按照规定的条件将对比值进行更新;并且,当对比值更新后,所述比较部11A,对检测部8检测获得的规定信息和/或基于检测获得的规定信息而得到的评价值,与更新后的对比值进行比较。

对比值的更新条件,例如使用者的指示来更新;例如根据比较部11A的比较结果,将对比值进行更新;例如根据规定的时间来进行更新。

根据比较部11A的比较结果,将对比值进行更新,可以是根据预先准备的多个对比值,依次进行更新;例如准备了三个相关度的对比值,当检测部8检测到的相关度大于第一个对比值时,后续将更新为第二个对比值,当大于第二个对比值时,将更新为第三个对比值。

根据比较部11A的比较结果,将对比值进行更新,也可以是根据检测获得的规定信息来更新预先准备的对比值;例如根据检测部8检测获得相关度的值,当该相关度的值大于预先准备的相关度的对比值时,将根据所获得相关度的值来替换对比值进行更新。

根据比较部11A的比较结果,将对比值进行更新,也可以是根据检测获得的规定信息来自我更新,其中,没有预先准备的对比值;例如根据检测部8检测获得相关度的值,当该相关度的值大于相关度的对比值(例如之前所检测到的相关度最大的值来作为对比值)时,将所获得相关度的值相应替换对比值进行更新。

另外,控制部11具备通知部11D,基于选择部11B所选择与规定的热像数据帧有关的特定信息和/或对比值更新的信息,进行通知。例如,基于选择部11B所选择的并保持的与规定的热像数据帧有关的特定信息,将特定信息获得的通知信息与获取部连续获取的热像数据帧获得的红外热像共同显示。优选的,将当前所选择的特定信息获得的通知信息与获取部连续获取的热像数据帧获得的红外热像共同显示。例如将当前所选择的并保持的热像数据帧获得的红外热像与拍摄部1获取的连续的红外热像共同显示,此外,也可以同时或单独显示其他的通知信息,例如相关度的值,评价值等。此外,也可将动态红外热像切换为显示该热像数据帧的冻结图像。

其中,当选择部11B选择并保持了多个热像数据帧有关的特定信息时,通知部11D可以对其中之一或多个进行通知,例如,将多个热像数据帧获得的红外热像与拍摄部1获取的连续的红外热像共同显示。

其中,根据选择部11B所选择与规定的热像数据帧有关的特定信息,来获得通知信息,例如可以将相关度的值换算为示意类似程度的便于使用者理解的信息,进行显示;例如根据相关度的值与百分比的规定的对照表,或计算的方式(如所提取的特定被摄体轮廓与轮廓T1重叠面积在各自总面积中的比例之和,除以200%,即可换算为相关度的百分比值)将相关度的值换算为百分比值);也可以是其他的方式,例如直接将计算相关度的值显示,如直接显示像素值之差的和的数值等。注意,当未与代表检测到特定被摄体热像与否的规定对比值(代表特定被摄体热像与被摄体识别信息匹配与否的判断值)做对比时,所显示的相关度的信息并不一定代表检测到特定被摄体热像(匹配)与否。为便于说明,在下文中,将相关度的值、评价值、对比值换算的百分比值作为示例,但实际中并不必须换算成百分比值。

其中,通知的方式可以持续规定的时间。并且,基于通知部11D的控制,可以使显示部10产生显示内容的变化、热像装置100中的振动部件的振动、指示灯的灯光变化、声音部件的声音、分析部件的分析处理(并使显示部10显示分析结果),诊断部件进行诊断(并使显示部10显示诊断结果)、参考图像闪烁显示或变色等、红外热像的伪彩变化等之一或多项的变化;只要是使用者可以感知的方式都可。

另外,控制部11具有记录部11E(未图示),响应规定的记录指示,将选择部11B所选择并保持在临时存储部2中的热像数据帧进行记录到存储卡8。例如响应使用者对所通知的热像数据帧的选择等指示,例如定时的自动记录等指示,将所述热像数据帧进行记录到存储卡8。

另外,控制部11具备参考图像指定部11F(未图示),用于指定要与红外热像共同显示的参考图像的构成数据;例如,基于存储介质中存储的被摄体信息关联的参考图像的构成数据(点阵数据或矢量数据),根据使用者对被摄体信息的选择,来指定与被摄体信息关联的参考图像的构成数据;并不限定于通过被摄体信息,也可从存储介质中选择例如热像文件等来获得参考图像的构成数据;此外,也可以根据热像装置100的默认配置,来指定参考图像的构成数据,例如默认的检测区域的数据;此外,也可以例如从显示部显示的红外热像中指定区域,并将该区域的红外热像作为参考图像等各种指定的方式。

另外,控制部11具备位置设置部11G(未图示),用于设置参考图像位于显示部中的位置参数(位置,或还包括尺寸,或还包括旋转角度)。优选的,位置设置部11G用于设置参考图像位于红外热像中的位置参数;例如,根据红外热像中规定的自适应显示区域,根据所计算的参考图像在该自适应区域中最大化居中显示的位置参数,从而来设置参考图像位于红外热像中的位置参数;例如,也可根据参考图像所附带的参数(例如体现了红外热像中的位置参数),根据该参数来设置参考图像位于红外热像中的位置参数;或者,也可以根据热像装置100的配置(居中,原始尺寸)来设置参考图像位于红外热像中的位置参数;或者,也可以根据使用者输入的位置参数。

操作部12:用于使用者进行各种指示操作,或者输入设定信息等各种操作,控制部11根据操作部12的操作信号,执行相应的程序。参考图2来说明操作部12,提供使用者操作的按键有记录键1、调焦键2、确认键3、回放键4、菜单健5、方向键6等;此外,也可采用触摸屏7或语音识别部件(未图示)等来实现相关的操作。

参考图6来说明拍摄过程中的显示界面的变化,参见图7来说明热像装置100的检测模式的控制流程。本应用场景如使用者手持热像装置100对变电站的被摄体进行拍摄。控制部11基于闪存3中存储的控制程序,以及各部分控制中使用的各种数据,控制了热像装置100的整体的动作及执行多种模式处理的控制。在接通电源后,控制部11进行内部电路的初始化,而后,进入待机拍摄模式,即拍摄部1拍摄获得热像数据,图像处理部7将拍摄部1拍摄获得的热像数据进行规定的处理,存储在临时存储部2中,显示部10上以动态图像形式连续显示红外热像,在此状态,控制部11实施其控制,持续监视是否按照预定操作切换到了其他模式的处理或进行了关机操作,如果有,则进入相应的处理控制。检测模式的控制步骤如下:

步骤A01,确定参考图像;

在待机拍摄状态,显示部10显示动态的红外热像,以往使用者会困惑于特定被摄体热像IR1的形态特征和在其所在的红外热像中的成像位置、大小、角度,为保证拍摄质量规范,通过操作部12的预定操作选择检测模式,控制部11基于闪存3中存储的表3,将被摄体信息生成的被摄体指示信息显示在显示部10,当使用者根据拍摄现场的被摄体“被摄体1”,通过操作部12来选择显示部10上所显示的“被摄体1”,参考图像指定部11F根据使用者的选择,就确定了参考图像T1,从闪存3中读取参考图像T1的构成数据,传送到临时存储部2;并且位置设置部11G设置参考图像T1位于红外热像的位置参数(位置和尺寸)。例如,根据所附带位置参数,来设置参考图像T1位于红外热像中的位置参数。此外,也可根据规定的自适应显示区,或使用者指定的位置参数,来确定参考图像T1位于红外热像中的位置参数。

在步骤A02,特征登记单元登记被摄体识别信息。特征登记单元根据使用者的选择“被摄体1”,就确定了用来匹配的被摄体识别信息,在此,假定将参考图像T1作为计算相关度的模板图像。(此外,也可以从闪存3中读取模板数据301来作为计算相关度的被摄体识别信息)。

步骤A03,获取热像数据帧,将拍摄部1拍摄获得的热像数据帧传送到临时存储部2;图像处理部7对所获取的热像数据帧进行规定处理例如伪彩转换,获得红外热像的图像数据,并且,合成单元将所确定的构成数据根据设置的规定尺寸获得参考图像T1的图像数据,按照所设置的规定位置,与生成的红外热像的图像数据进行合成(重叠),将合成的图像数据存放在临时存储部2,接着,显示控制部9将合成图像显示在显示部10,如图6(a)所示,被摄体热像IR1与轮廓图像T1之间存在位置、尺寸的差异,使用者可根据参考图像来拍摄被摄体热像IR1。如在后续处理中未检测到特定被摄体热像,将不断与新获取的热像数据帧进行合成,以此,来不断显示动态的合成图像。

接着,在步骤A04,读取临时存储部2中例如由拍摄部1即时拍摄获得的热像数据帧,检测窗口设置单元,设置检测窗口。例如,基于规定的检测区域G1的左上角,首先设置了检测窗口;

步骤A05,进行检测窗口中的热像数据与被摄体识别信息之间的相关度计算的处理。

检测部8基于检测窗口设置单元所设置的检测窗口,抽取位于该检测窗口中的热像数据,根据特征登记单元所登记的模板,计算二者之间的相关度。例如,根据检测窗口中的热像数据所提取的特定被摄体热像的轮廓,与轮廓图像T1的轮廓对比,计算二者之间的重叠面积在各自总面积中的比例之和。

并且,在步骤A06,存储所得到的相关度的值。

在步骤A07中,检测部8判断在热像数据帧中设置检测窗口时,是否已经针对所有检测窗口计算了相关度。如果剩余还没有计算相关度的区域(步骤A07中为否)则回到步骤A04中,检测窗口设置单元在预定方向上将检测窗口的位置偏移预定像素数,将该位置设置为检测窗口的下一位置,并重复后续的处理。

此外,从热像数据帧中搜索与模板类似的帧部分时,对于放大及缩小、以及将检测窗口J1倾斜规定角度后的检测窗口时,也进行类似上述说明的检测处理。

如果已经针对热像数据帧的所有检测窗口计算了相关度(步骤A07中为是),则在步骤A08中将检测到的最大相关度的值(或还将所对应的检测窗口的位置参数)保持在临时存储部2的规定区域。

在步骤A09中,与相关度的对比值进行比较;

如果小于该对比值,则表示当前检测的热像数据帧中的特定被摄体热像与轮廓图像T1的相似程度,未优于之前所获得的对比值;回到步骤A03,重复后续的处理;在此,使用者通过改变拍摄的位置和调整热像装置100的光学部件和特定被摄体热像之间的拍摄距离、成像位置、角度,伴随着使用者的调整操作,重复后续的处理。当在步骤A09检测到的相关度大于相关度的对比值,则进入步骤A10;

其中,相关度的对比值可以是预先准备的起始的相关度的对比值(例如将判断是否检测到特定被摄体热像与被摄体识别信息匹配与否的判断值,作为起始的相关度的对比值),当检测获得的相关度的值大于该判断值,代表所检测的特定被摄体热像的相关度优于所准备的判断值,则将该判断值替换为当前所检测的相关度的值所获得的对比值;作为后续检测相关度的对比值,以便后续是否能获得相关度更高的特定被摄体热像。本实施例中,热像装置100起始相关度的对比值为72%,该起始的对比值为判断是否检测到特定被摄体热像的判断值,如果所获得的热像数据帧的相关度小于该对比值,则代表该热像数据帧中未检测到特定被摄体热像;其效果是当使用者反复拍摄也无法获得通知信息时,意味着是否拍摄了错误的被摄体。所以,在图6(a)中,由于所检测到的相关度的值小于72%,没有显示用来通知的信息。而在如图6(b)所示,检测到的最大相关度的热像数据帧的相关度为80%,则在后续进行通知。

此外,相关度的对比值,也可以没有预先准备,这时,例如,当将第一次检测到的热像数据帧的相关度的值,作为后续检测热像数据帧获得的相关度的值的对比值,当后续检测到大于该对比值时,则替换该对比值。

在此,以是否大于对比值为评价相关度的依据,但也有小于对比值或接近对比值(预先准备的判断值)作为评价相关度的情况。并且,对比值可以是相关度的值,也可以是相关度的值经过换算获得的值等。

步骤A10,对比值更新部11C,将根据所检测到的具有最大相关度的值,来更新相关度的对比值,并且,更新后的对比值作为后续的热像数据帧的比较相关度的对比值。

步骤A11,选择部11B将所检测到的具有最大相关度的值对应的热像数据帧等特定信息,保持在临时存储部2的规定区域,替换之前的特定信息(如果有)。此外,也可以保持规定数量的多个热像数据帧有关的特定信息,例如保持相关度最高的3帧热像数据帧及其相关度的值等特定信息。

步骤A12,进行通知,对检测获得的相关度最大的热像数据帧有关的特定信息进行通知。

例如,将该热像数据帧获得的图像,与动态的红外热像共同显示。并且,所保持的特定信息,在未接受到选择部11B重新选择的特定信息或使用者的指示之前,一直将被保持在临时存储部2中。

不限定于显示红外热像601,也可以是其他的方式,例如直接将计算相关度的值显示,如直接显示像素值之差的和的数值等。此外,也可将显示动态红外热像切换为显示该热像数据帧的冻结图像;优选的方式,还可将所检测到的具有最大相关度的检测窗口的区域(或被摄体的位置参数等)进行通知。例如在冻结的红外热像中示意检测到的具有最大相关度的被摄体热像的位置的标识等。或将显示动态红外热像切换为显示该热像数据帧的冻结图像,而后,响应使用者的指示,再切换回动态红外热像的显示状态,或该热像数据帧获得的图像与动态的红外热像共同显示的状态。此外,也可不显示该热像数据帧获得的红外热像,而显示提示信息;或以振动、指示灯闪烁等,各种使用者能察觉的方式。并且,当选择部11B配置为指示保持多帧热像数据帧时,则可以同时显示多个所保持的热像数据帧获得的红外热像,例如,还按照相关度的高低来排序显示。

注意,当未与判断是否具有特定被摄体热像的对比值(代表特定被摄体热像与被摄体识别信息匹配与否的判断值)做对比时,所显示的相关度的信息并不一定代表检测到特定被摄体热像与否。

并且,不限于与通知选择部所选择的特定信息,也可对对比值进行更新的事件或还进一步通知对比值。

步骤A13,判断是否退出,如未退出,则回到步骤A03,重复后续的处理。这时,由于在步骤A11中,对相关度的对比值进行了更新,因此,在后续拍摄获得的热像数据帧,将与更新后的相关度的对比值进行比较,并且,当大于相关度的对比值时,将所保持的特定信息予以更新,并且,在步骤A12,进行通知。

如图6(b)所示,在拍摄中,首先检测到的最大相关度为80%(根据重叠面积的比例之和换算得到的提示信息),将该相关度的值作为后续比较的相关度的对比值,并且与动态红外热像同时显示该热像数据帧获得的红外热像601。当后续检测到最大相关度的值大于80%时,如图6(c)所示,相关度的值为95%,则替换相关度的对比值80%,作为新的相关度的对比值(95%),以此类推,当所检测的相关度的值为95%时,如图6(c)所示,使用者如果满意,可以停止对被摄体的瞄准拍摄,由于该热像数据帧保持在临时存储部2等存储介质中,可方便进行后续的分析、存储等处理或操作。这时,如果使用者按下记录键,则将红外热像603对应的热像数据帧进行规定的处理(如压缩等)记录到存储卡8。并且,即便是不显示提示信息或红外热像的方式,例如指示灯闪烁的方式,由于该热像数据帧保持在临时存储部2等存储介质中,同样可以在使用者的按下确认键或记录键时,进行显示、记录等处理。

并且,也可通知更新对比值的信息,而不通知热像数据帧的信息。

并且,在有些应用的情况下,对是否检测到特定被摄体热像,并不限于相关度的值与相关度的对比值之间的比较,也可变形为例如根据检测获得的规定信息和/或规定信息获得的评价值及预定的对比值的比较结果,来作为是否检测到特定被摄体热像的依据。

如上所述,在本实施例中,显示参考图像来辅助拍摄,并当检测到相关度高于比较值的热像数据帧时,才选择该热像数据帧或还予以通知,并在后续每当检测到高于之前的相关度的对比值时,能不断更新对比值,及所通知的信息,能达到大幅度降低视觉对准的操作难度,大幅度降低拍摄的体力强度,提高最终获得的热像数据帧的质量的有益效果。普通使用者容易掌握这种拍摄技能。当然,实施本发明的实施方式的任一产品并不一定需要同时达到以上所述的所有优点。

并且,在红外检测的领域,由于考虑到特定被摄体热像在红外热像中的位置、尺寸、倾斜角度等的不同,对应了不同的拍摄质量,即便相关度高,如果上述参数不理想,所获取的热像数据帧的质量不一定高;因此,考虑特定被摄体热像位于热像数据帧中的位置、尺寸、倾斜角度、相关度的值等因素,例如根据上述因素来获得评价值(可以是一个或多个),与规定的对比值进行比较,作为进行规定热像数据帧的选择和进行通知的因素,来提示使用者注意拍摄的质量,或选择最佳拍摄质量的热像数据帧进行后续的处理。

实施例2

实施例2,与实施例1的不同之处在于,所述热像装置100的检测部8基于获取部(拍摄部1)连续获取的热像数据帧,检测热像数据帧中与特定被摄体热像有关的规定信息;控制部11具有辅助信息获取部(未图示),用于获取辅助信息;比较部11A,用于将检测部检测获得的规定信息、辅助信息获取部获取的辅助信息、检测部检测获得的规定信息得到的评价值、辅助信息获取部获取的辅助信息而得到的评价值、检测部检测获得的规定信息及辅助信息获取部获取的辅助信息而得到的评价值中的一项或多项,与对应的一个或多个对比值进行比较;选择部11B,基于比较部11A的比较结果,选择与规定的热像数据帧有关的特定信息,当有多项比较,根据不同的比较结果,所通知的特定信息可能是一帧或多帧热像数据帧有关的特定信息;通知部11D,基于选择部11B所选择与规定的热像数据帧有关的特定信息,进行通知。对比值更新部11C,用于对比值的更新。

其中,所述规定信息,至少包括特定被摄体热像的位置、尺寸、倾斜角度、相关度的值中的一种或任意组合的信息。

在红外检测的领域,由于考虑到特定被摄体热像在红外热像中的位置、尺寸、倾斜角度等的不同,对应了不同的拍摄质量,即便相关度高,如果上述参数不理想,所获取的热像数据帧的质量不一定高;因此,考虑特定被摄体热像位于热像数据帧中的位置、尺寸、倾斜角度等因素,作为生成通知的因素,来提示使用者注意拍摄的质量,或选择最佳拍摄质量的热像数据帧进行后续的处理。

其中,所述辅助信息,至少包括分析值、环境温度、背景因素、风速、湿度、距离中的一种或任意组合的信息,及其他由热像装置100所获取的辅助信息(包括由使用者进行设置),包括其他各种对选择部11B所选择的规定热像数据帧有关的信息和/或对通知部11D所通知的信息有影响的因素都在其范围中。

在红外检测的应用领域,根据上述的辅助信息的不同,所获得的热像数据帧的质量及重要程度不同,应有不同的条件来应对规定的热像数据帧的比较、选择、通知等处理;例如,当获得的特定被摄体热像中具有大于规定的对比值(例如缺陷的阀值)的分析值时,代表被摄体具有缺陷,那么,应引起使用者的重视,这时在相关度接近的情况下,也优选选择并通知分析值超标的热像数据帧有关的特定信息,将立即引起使用者的注意,对红外检测的意义重大;例如考虑环境温度、背景、风速、背景因素(例如背景与被摄体热像的差异性,背景的热场分布等)等的影响因素,在相关度接近的情况下,这些影响因素可能会导致不同的热像质量及后续分析的价值降低,应选择并通知其他影响因素干扰小的热像数据帧。

其中,辅助信息获取部,例如可以根据热像装置100或与热像装置100中连接的相应功能的部件(未图示)来获取上述辅助信息,例如,通过分析部件获取分析值(分析值并不限定于温度值,例如,也可以是AD值、伪彩热像中的颜色值、特定像数值的比例,或还将这些数值按照规定公式计算获得的值等,分析部件所获取的分析值可以针对热像数据帧中的全部像素或特定分析区域中的像素),通过温度传感器来获取环境温度,通过湿度计来获得湿度,通过测距仪来获得热像装置100与被摄体的距离等。也可以根据存储介质中预先存储的上述辅助信息来获取,例如,辅助信息的历史数据;或结合当前测量获取的辅助信息与存储介质中预先存储的辅助信息的历史数据的对比来获得辅助信息。

并且,可以通过规定信息和/或辅助信息来获得综合的评价值;例如,可以采用所检测的规定信息中的特定信息对应了不同的系数,而由所检测的规定信息中的其他的规定信息结合该系数来获得评价值;例如,可以采用不同的信息所占的权重,通过加权来获得评价值。可以通过各种不同的计算方式来获得最终的评价值。例如,如图9所示,假定图9(c)的红外热像901根据窗口系数为0.94的检测窗口获得,而红外热像902根据窗口系数为0.8的检测窗口获得,评价值=相关度的值×窗口系数,因此,即便红外热像901的相关度小于红外热像902的相关度,但评价值反而高。

并且,也可以通过所述规定信息和所述辅助信息,来获得综合的评价值。例如,获得综合了特定被摄体热像的位置、尺寸、倾斜角度、分析值、相关度的值获得的评价值,例如根据下式来获得综合评价值,综合评价值=位置×位置加权系数+尺寸×尺寸加权系数+倾斜角度×倾斜角度加权系数+分析值×分析值加权系数+相关度的值×相关度加权系数;或者,另一种优选的方式,根据所检测的规定信息和所获取的辅助信息与综合评价值的对照表来获得评价值。

并且,也可以根据所述规定信息和所述辅助信息,将其中部分来获得评价值,而后,根据其中的未参与获得评价值的规定信息和/或辅助信息,与获得的评价值一起,作为比较部与规定的对比值的比较的对象。

其中,对比值更新部11C,根据比较部11A的比较结果,将对比值进行更新;并且,当有多项对比值时,将对应的对比值中的至少一项进行更新;其中,当多项对比值全部更新,在更新后,所述比较部11A,用于对检测部8后续检测获得的规定信息,和/或,基于辅助信息获取部获取的辅助信息,和/或,由所述规定信息和/或所述辅助信息而得到的评价值,与多项更新的对比值进行比较;其中,当多项对比值中的部分更新,在更新后,与多项对比值中的更新项的对比值及未更新项的对比值进行比较。优选的,根据比较部比较获得的最优的规定信息、或最优的辅助信息、或最优的根据检测获得的规定信息和/或辅助信息获得的评价值中的一项,将相应的至少一项对比值进行更新。

其中,当检测部8被配置为检测特定被摄体热像的多个规定信息,并且比较部11A,对检测部8检测获得的规定信息和/或基于检测获得的规定信息而得到的评价值与规定的多项对比值进行比较时,基于比较的结果,选择部11B可能选择多个热像数据帧有关的特定信息,这时,通知部11D可以对其中之一或多个进行通知。优选的,所述选择部,基于比较部的比较结果,选择相关度的值和/或规定信息和/或辅助信息和/或评价值(规定信息和/或辅助信息获得的评价值)优于规定的对比值的热像数据帧有关的特定信息进行保持。所述通知部,基于选择部所选择并保持的与规定的热像数据帧有关的特定信息,选择相关度的值和/或规定信息和/或辅助信息和/或评价值(规定信息和/或辅助信息获得的评价值)优于规定的对比值的热像数据帧有关的特定信息进行通知。

参见图8来说明实施例2的热像装置100的检测模式的控制流程,在下面的说明中,配置了三个对比值为例。将检测部8所检测的热像数据帧中与特定被摄体热像有关的规定信息(相关度的值)、基于检测获得的规定信息及辅助信息获取部获取的辅助信息(分析值)而得到的评价值,与第一、第二、第三对比值进行比较。

第一对比值预先准备(在本实施例中为相关度的第一对比值),用来判断是否具有特定被摄体热像的对比值(代表特定被摄体热像与被摄体识别信息匹配与否的判断值),第一对比值不更新。

第二对比值(在本实施例中为相关度的第二对比值),为大于第一对比值的相关度的对比值,其根据检测到的热像数据帧的相关度的值而获得,当后续的热像数据帧检测到更高的相关度的值时,第二对比值将随之更新为更高的值。

第三对比值,以位置、尺寸、倾斜角度、相关度的值、分析值等获得综合评价值,作为与对应(例如预先准备的)第三对比值进行比较,当后续的热像数据帧检测到更高(更优)的综合评价值时,第三对比值将随之更新为更高的值。

最终,选择部11B将选择优于第二对比值和/或优于第三对比值的热像数据帧有关的特定信息;便于后续的通知、分析、诊断、记录等处理。

步骤A01-步骤A03,类同于实施例1的步骤A01-A03,省略了说明;

步骤B03,类同于实施例1的步骤A04-A08,检测获得相关度,省略了说明;

步骤B04,判断所检测的热像数据帧的相关度的值,是否大于第一对比值,如否,表示未检测到特定的特定被摄体热像,回到步骤A03,重复后续的处理。

当在步骤B04检测到的相关度大于第一对比值,则进入步骤B05。

步骤B05,辅助信息获取部对相关度大于第一对比值的热像数据帧和/或该热像数据帧检测窗口中的热像数据,获得辅助信息例如与特定被摄体热像有关的分析值等,例如控制分析部件进行分析获得分析值。此外,例如,当检测部8配置为通过检测像素比例来计算相关度时,不限于根据检测窗口的位置参数来决定所检测到的特定被摄体热像的位置参数,这时,也可根据检测到的检测窗口中进一步提取特定被摄体的轮廓,来获得更为精确的位置、尺寸、倾斜角度等与特定被摄体热像有关的规定信息。

步骤B06,获得评价值,获得综合了特定被摄体热像的位置、尺寸、倾斜角度、相关度的值、分析值获得的评价值,例如根据下式来获得综合评价值,综合评价值=位置×位置加权系数+尺寸×尺寸加权系数+倾斜角度×倾斜角度加权系数+相关度的值×相关度加权系数+分析值×分析值加权系数;或者,另一种优选的方式,根据检测获得的规定信息及获取的辅助信息与综合评价值的对照表来获得评价值。

步骤B07,与第三对比值进行比较,如小于第三对比值时,则在步骤B08,将检测获得的相关度的值与第二对比值进行比较;如否,则跳到步骤B19,代表之前已检测到相关度比当前检测的热像数据帧高的热像数据帧。如是,则在步骤B09-B10,对比值更新部11C将根据所检测到的最大相关度的值,来更新第二对比值。并且,选择部11B将该热像数据帧有关的特定信息,保持在临时存储部2的规定区域,或还替换之前的特定信息(如果有之前的热像数据帧有关的特定信息,并且之前的热像数据帧的相关度小于当前检测的热像数据帧,并且评价值在所保持的热像数据帧中并不最大时,才进行替换),并且在步骤B11,对相关度大于第二对比值的热像数据帧有关的特定信息进行通知。

如果步骤B07,如综合评价值大于第三对比值,则在步骤B12,将相关度的值与第二对比值进行比较;

如果大于第二对比值,则在B13-B14,对比值更新部11C将根据该热像数据帧所检测到的最大相关度的值,最大综合评价值来更新第二对比值、第三对比值。并且,选择部11B将与该热像数据帧有关的特定信息,保持在临时存储部2的规定区域,或还替换之前的特定信息(如果有),并且在步骤B11,对相关度大于第二对比值并且综合评价值大于第三对比值的热像数据帧有关的特定信息进行通知。

如果小于第二对比值,则在B16-B17,对比值更新部11C将根据所检测到的该热像数据帧的综合评价值,来更新第三对比值。并且,选择部11B将所检测到的具有最大综合评价值对应的热像数据帧有关的特定信息,保持在临时存储部2的规定区域,替换之前的特定信息(如果有之前的热像数据帧有关的特定信息,并且之前的热像数据帧的评价值小于当前检测的热像数据帧,并且相关度在所保持的热像数据帧中并不最大时,才进行替换),并且在步骤B18,对综合评价值大于第三对比值的热像数据帧有关的特定信息进行通知。

步骤B19,判断是否退出检测模式,如退出,则结束,如未退出,则回到步骤B02,重复上述的处理。这样,对连续拍摄获得的热像数据帧,根据所检测的规定信息,将优于第二对比值和/或优于第三对比值的热像数据帧有关的特定信息进行选择和通知;便于后续的通知、分析、诊断、记录等处理。其中,将检测的热像数据帧的相关度是否大于第一对比值作为进一步检测规定信息的条件,能进一步避免拍摄错误部位、提示有效特定信息的有益效果。这里所谓的优于,根据对比值的不同,可能有小于或大于对比值的情况。

参考图9来说明拍摄过程中的显示界面的变化。

如图9(a)所示,当未检测到相关度大于第一对比值(假定第一对比值换算的相关度百分比为72%)的热像数据帧时,显示动态的红外热像。

接着,如图9(b)所示,当第一次检测到相关度大于第一对比值的热像数据帧时,显示动态的红外热像与所检测到的热像数据帧有关的通知信息,该通知信息基于选择部11B所指示保持的该热像数据帧的特定信息例如该热像数据帧、相关度的值、评价值来生成;通知信息包括该热像数据帧生成的红外热像901,相关度的值换算的相关度百分比85%,评价值换算的评价值百分比80%。并且,对比值更新部11C将第二对比值例如更新为85%,第三对比值例如更新为80%;并且,当后续未检测到大于该第二对比值和/或大于第三对比值的热像数据帧时,显示部10将保持显示红外热像901等通知信息及动态红外热像的状态;并且,由于红外热像901为当前所新获得的特定信息生成的通知信息,加粗的边框予以提醒使用者。

而后,如图9(c)所示,当第检测到大于第二对比值的热像数据帧时,显示动态的红外热像与所检测到的热像数据帧有关的特定信息,该特定信息包括该热像数据帧生成的红外热像902等,在此,由于红外热像902所对应的相关度大于红外热像901,而其评价值又小于红外热像901,于是,选择部11B将该二个热像数据帧有关的特定信息进行保持;并且对比值更新部11C将根据红外热像902所对应的相关度,将第二对比值进行更新;通知部11D将使显示部10显示二个不同的热像数据帧所获得的特定信息生成的通知信息,并且,将红外热像901去除加粗的边框,而红外热像902予以加粗的边框。这时,由于红外热像901、902所对应的热像数据帧等特定信息保持在临时存储部2,使用者可以从显示部10显示的信息如红外热像901、902中,来选择后续进行记录或分析的所对应的热像数据帧。

并且,如图9(d)所示,当第检测到的相关度大于第二对比值并且评价值大于第三对比值的热像数据帧时,选择部11B将与红外热像903有关的特定信息进行保持,或还将红外热像901、902有关的特定信息予以删除;并且,对比值更新部11C将根据红外热像903所对应的相关度(95%)和评价值(95%),将第二、第三对比值进行更新;通知部11D将使显示部10显示动态的红外热像与所检测到的该热像数据帧有关的特定信息,该特定信息包括该热像数据帧生成的红外热像903等。

这样,选择部,基于比较部的比较结果,选择并保持相关度的值和/或评价值大于规定的对比值(第二对比值、第三对比值)的热像数据帧有关的特定信息;基于通知部11D的控制,在显示部10的界面中,总是能显示通知相关度最高和/或评价值最高的热像数据帧获得的信息,对使用者的拍摄帮助极大,随意的拍摄也易于获得高质量的热像数据帧。

如上所述,在本实施例中,不仅可以获得实施例1的效果,并且,设置了根据检测到的特定被摄体热像的规定信息及辅助信息获取部获取的辅助信息,来作为选择及通知的因素,能达到进一步减低视觉对准的操作难度,提高检测匹配时的被摄体的检测精度,避免误操作,提示特定状态的有益效果,普通使用者容易掌握这种拍摄技能。当然,实施本发明的实施方式的任一产品并不一定需要同时达到以上所述的所有优点。

此外,虽然例举了三个对比值,也可以更多的对比值,对应了几个不同侧重的评价值和/或辅助信息和/或检测获得的规定信息,例如由特定被摄体热像的位置、尺寸、倾斜角度获得的评价值,由分析值、环境温度等获得的评价值等。

此外,虽然实施例2中例举了多个对比值(三个,或者也可以减少为二个),其中部分更新、部分不更新;但也可以配置为全部更新;或也可去除对比值更新部11C的结构,而预先准备多个相应的对比值,全部不更新。

在实施例2中,介绍了根据相关度的值及规定信息与辅助信息获得的评价值作为示例,也根据最大相关度和/或最大评价值来进行通知。当也可以只通知其中之一;或者,还配置了更多的对比项,相应的还将通知多个根据不同的对比项所占优而选择的热像数据帧的特定信息;或者,还将相关度的值及多个评价值按照次序或优先等级来进行通知。

通知部11D,根据选择部11B选择的规定热像数据帧有关的特定信息和/或对比值更新部11C的更新信息(可以是更新的动作,也可以是是更新后的对比值的信息等)进行通知,并且优选的,将选择部最新选择(通常是相关度和/或评价值大于对比值)的规定热像数据帧有关的特定信息进行通知。这样,使用者非常的方便;例如将热定被摄体的位置、尺寸、倾斜度、相关度的值,作为评价因素,便于获得高质量的热像数据帧或特定拍摄要求的热像数据帧;将辅助信息作为评价因素,便于优化通知热像数据帧。

并且,在实施例2中,当检测到大于之前的相关度和/或评价值的热像数据帧时,选择部11B将之前的热像数据帧所获得的特定信息予以替换(例如删除),但也可继续保持,这时,通知部11D也可显示多个热像数据帧有关的特定信息,例如按照相关度和/或评价值的高低等因素来排序显示这些特定信息。

实施例3

实施例3,与上述实施例1,2的不同之处在于,在如图1所示的述热像装置100的结构中去除了对比值更新部11C的功能部件(未图示),在判断所检测的热像数据帧大于规定的相关度的对比值时,即进行通知,并不更新相关度的对比值。

步骤A01-步骤A03,类同于实施例1的步骤A01-A03,省略了说明;

步骤C03,类同于实施例1的步骤A04-A08,省略了说明;

步骤C04,将所获得的热像数据帧的相关度的值与规定的对比值(例如,代表特定被摄体热像与被摄体识别信息匹配与否的判断值),进行比较,如果否,则回到步骤C02。

如是,在步骤C05,对大于规定的对比值的热像数据帧有关的信息进行选择及通知,例如,将该热像数据帧获得的图像,与动态的红外热像共同显示。此外,也可将显示动态红外热像切换为显示该热像数据帧的冻结图像;或将显示动态红外热像切换为显示该热像数据帧的冻结图像,而后,响应使用者的指示,再切换回动态红外热像的显示状态,或该热像数据帧获得的图像与动态的红外热像共同显示的状态。

步骤C06,检测是否退出,如否,则回到步骤A02,重复后续的处理;如是,则退出。

并且,在后续的热像数据帧中检测到特定被摄体热像时,替换之前所保持的热像数据帧,进行相关信息的显示通知;或者,也同时显示相关的信息;例如当保持了规定数量的热像数据帧时,通知使用者从这些热像数据帧中选择要进行后续记录、分析等处理的热像数据帧。

如上所述,在本实施例3中,当检测相关度大于规定的对比值的热像数据帧时,即通知使用者,也能减低视觉对准的操作强度,普通使用者容易掌握这种拍摄技能,操作简单。由于不更新比较值,因此,在后续的拍摄中,有可能获得的热像数据帧的质量比之前的要差。

本实施例也可变形为,根据检测热像数据帧中与特定被摄体热像有关的规定信息,或根据检测热像数据帧中与特定被摄体热像有关的规定信息及获取的辅助信息,及根据检测部检测获得的规定信息和/或辅助信息获取部获取的辅助信息而得到的评价值,与规定的对比值进行比较,获得比较的结果,来决定通知。

此外,也可去除选择部11B的结构,即当检测到特定被摄体热像时,进行通知,例如振动等来提醒使用者。

实施例4

实施例4,与上述实施例1,2,3的不同之处在于,所述热像装置100,在判断有检测指示时,基于临时存储部2中所存储的多帧热像数据,来检测其中具有最高相关度的热像数据帧。适用于对快速运动被摄体拍摄。

参考图11来说明实施例3的热像装置100的检测模式的控制流程。

在步骤D01,将获得的热像数据帧,例如拍摄部1拍摄获得的热像数据传送到临时存储部2;显示部10显示动态的红外热像和参考图像,其中,临时存储部2例如配置为能临时存储多帧份(例如50帧)的热像数据帧的循环存储器,循环存储由拍摄部1拍摄获得的热像数据帧。

步骤D02,控制部11判断是否有检测的指示?例如,当检测到使用者通过操作部12的检测指示,则进入下一步;并且,检测指示并不必须由使用者的操作来发出,也可以是规定的定时等方式来发出。

步骤D03,从临时存储部2读取所存储的热像数据帧进行检测处理,将计算所读取的热像数据帧获得的相关度存储在临时存储部2;当检测了规定数量(或所有热像数据帧)的热像数据帧后,获得最大的相关度的值及其对应的热像数据帧

在步骤D04,将所获的的最大相关度与规定的对比值进行比较,如果否,则回到步骤D01,继续显示红外热像,或显示未检测到大于对比值的热像数据帧的字样;

如是,在步骤D05,根据检测获得的最大相关度的值,将对比值进行更新;并在D06对相关度最大的热像数据帧有关的特定信息进行保持,并在步骤D07进行通知,例如显示该热像数据帧获得的红外热像与动态的红外热像。

步骤D08,检测是否退出,如否,则回到步骤D01,重复后续的处理;如是,则退出。

如上所述,在本实施例4中,当接收到检测的指示,则检测临时存储部2中所存储得热像数据帧中的相关度最高的帧,能减低视觉对准的操作强度,普通使用者容易掌握这种拍摄技能,操作简单,并能降低处理器的运算速度负担,降低热像装置100的成本等的有益效果,并适用于对快速运动目标的拍摄。

其他实施例

在上述实施例中各自说明了作为红外选择通知装置的示例的热像装置100。然而,本发明不仅适用于带有拍摄功能的热像装置,还适用于如之前所述的各种热像处理装置。

并且,可以不仅检测整个被摄体的整体区域,而且检测将被摄体划分为多个部件构成的多个检测窗口,这样,能够更精确检测;其中,对于各部件,与整体相同,准备对应的被摄体识别信息(可以是模板或特征量)。

也可以是这样的实施方式,检测单元,也可根据被摄体识别信息,并根据多个被摄体识别信息所对应的判断值,来获得判断结果,例如,根据多个特征量的加权,来获得最终的判断结果。

也可以是这样的实施方式,检测单元,也可根据多个被摄体识别信息,先计算其中的一个特征量与热像数据帧的比较结果,当大于规定的阀值,并计算下一个被摄体识别信息与热像数据帧的比较结果,根据多次比较,来获得最终的判断结果。

注意,可以使用检测特定被摄体热像的各种方法,在该实施例中的处理仅是可使用方法的示例。

注意,可以使用检测特定被摄体热像的各种方法,在该实施例中的处理仅是可使用方法的示例。

注意,在上述的实施例中,可以对热像数据帧的检测、选择、通知、对比值的数量、对比值的更新、辅助信息的获取等处理,进行不同的组合,这些组合均在本发明的范围之内。

本发明还可以通过独处和执行记录在存储装置上的程序来执行上述实施例的功能的系统或设备的计算机(或诸如CPU、MPU等的装置)、以及通过其步骤由系统或设备的计算机通过例如读出和执行记录在存储装置上的程序来执行上述实施例的功能而知性的方法来实现。为此目的,例如经由网络或从用作存储装置的各种类型的记录介质(例如,计算机可读介质)中将程序提供至计算机。

虽然,可以通过硬件、软件或其结合来实现附图中的功能块,但通常不需要设置以一对一的对应方式来实现功能块的结构。可以通过一个软件或硬件模块来实现多个功能的块。

去获取专利,查看全文>

相似文献

  • 专利
  • 中文文献
  • 外文文献
获取专利

客服邮箱:kefu@zhangqiaokeyan.com

京公网安备:11010802029741号 ICP备案号:京ICP备15016152号-6 六维联合信息科技 (北京) 有限公司©版权所有
  • 客服微信

  • 服务号