首页> 中国专利> 一种用于生物特征识别移动终端的驱动自动聚焦方法

一种用于生物特征识别移动终端的驱动自动聚焦方法

摘要

本发明提供了一种用于生物特征识别移动终端的驱动自动聚焦方法,包括以下步骤:1)根据预定的聚焦工作物距范围,定义待搜索的局部感兴趣区域和搜索参数;2)控制光学成像透镜按照步骤1)中定义待搜索的局部感兴趣区域和搜索参数,驱动自动聚焦光学成像透镜执行在单调方向上连续性焦点位置搜索;3)控制图像传感器获取步骤2)中在单调方向上连续性焦点位置搜索输出的成像原始图像像素数据;4)实时计算焦点位置搜索图像I{Pi,i=1,NO}的焦点质量,并评估焦点质量;5)判断最佳焦点质量对应的图像为最佳聚焦图像。

著录项

  • 公开/公告号CN105376469A

    专利类型发明专利

  • 公开/公告日2016-03-02

    原文格式PDF

  • 申请/专利权人 倪蔚民;

    申请/专利号CN201510815397.4

  • 发明设计人 倪蔚民;金城;

    申请日2014-11-03

  • 分类号H04N5/225;H04N5/232;

  • 代理机构北京律恒立业知识产权代理事务所(特殊普通合伙);

  • 代理人顾珊

  • 地址 310027 浙江省杭州市西湖区浙大路38号浙江大学光学工程研究所

  • 入库时间 2023-12-18 14:40:21

法律信息

  • 法律状态公告日

    法律状态信息

    法律状态

  • 2018-11-13

    授权

    授权

  • 2018-02-02

    著录事项变更 IPC(主分类):H04N5/225 变更前: 变更后: 申请日:20141103

    著录事项变更

  • 2018-02-02

    专利申请权的转移 IPC(主分类):H04N5/225 登记生效日:20180112 变更前: 变更后: 申请日:20141103

    专利申请权、专利权的转移

  • 2016-03-30

    实质审查的生效 IPC(主分类):H04N5/225 申请日:20141103

    实质审查的生效

  • 2016-03-02

    公开

    公开

说明书

技术领域

本发明涉及生物识别光电领域,尤其是一种用于高安全性的移动终端可见光和 生物识别组合光电成像系统及方法。

背景技术

移动终端包括智能手机、平板、可穿戴设备等,现在的信息技术移动化发展趋 势来看,移动终端设备必然是未来适用最广泛的设备。

目前,现实应用中的移动终端在移动安全支付、账户安全登陆、网上银行方面 运用已经极其的广泛了,如余额宝、微信、银行账户管理等方面的运用,虽然在其使 用过程中,为生活带来了极大的便利,但是一种新型的通过移动终端安全性能薄弱等 特点进行的经济犯罪逐渐的兴起。

而移动终端中,现有技术进行身份确认的惯用手段就是密码输入,但是这种身 份确认的手段安全性能十分的低,只需要在移动终端上植入简单的病毒程序,就能将 该密码泄露,造成相应的损失。为了解决这个问题,国际上还是用生物识别的方式进 行移动终端安全身份认证;如苹果公司提出的基于AuthenTec公司开发的指纹识别技 术,该技术运用在手机终端上,极大的提高了移动终端的身份确认安全性;但是,指 纹技术识别的过程中,由于指纹是静态的,虽然具有唯一性,但是也极其容易被获取 指纹信息,甚至被仿制等,所以随着指纹技术在移动终端上的运用越来越广泛,其安 全性也会相应的呈下降趋势,所以在安全性方面更加具有优势的生物识别是解决移动 终端安全身份认证过程中非常有效的方法,而生物识别系统是现有的生物识别中精确 度最高的。

目前在所有移动终端中生物识别系统技术和产品中,没有实现用于自拍功能的 可见光光电成像系统和虹膜静脉生物识别光电成像系统组合。但如果自拍功能的可见 光光电成像系统和虹膜静脉生物识别光电成像系统组合分开独立实现,其成本大大增 加,更主要的移动终端的体积无法提供容纳3套及以上分开独立光学成像系统的安装 空间。

另外尽管虹膜静脉在防伪造物安全性方面生物识别与指纹识别相比更加具有优 势,但如果大规模应用于如手机移动大额支付等重要场合,仍然需要更进一步升级防 伪造物活体检测的安全性技术,消除安全隐患的威胁。毕竟生物识别本身目的就是为 安全,其本身的安全性是最基本和最重要的。

以及如何在移动终端应用中获取高质量的图像光电成像方法和提高生物识别成 功率的成像方法。

需要指出采用RGB-IR独立通道光电成像系统,可以实现可见光和生物识别组 合成像,但目前其鉴于生产成本和工艺,独立通道间的相互波长背景隔离度或截止深 度还未能满足实际需求。

更进一步的,高安全性的移动终端可见光和生物识别组合光电成像系统及方法 需要解决以下严重的问题:

1、移动终端应用中可见光和生物识别组合光电成像系统,满足自拍功能的可见 光光电成像系统和虹膜静脉生物识别光电成像系统组合,其体积控制在 8.5mm*8.5mm*6mm内,低功耗。

2、移动终端应用中可见光和生物识别组合光电成像系统,需要一整套高安全性 的防伪造物活体检测方法,保证生物识别本身的安全性。

3.移动终端应用中可见光和生物识别组合光电成像系统,需要获取高质量的图 像光电成像方法。

4、移动终端应用中可见光和生物识别组合光电成像系统,需要一套提高生物识 别成功率的成像方法。

5、移动终端应用中可见光和生物识别组合光电成像系统,需要极大降低成本, 成本降低至10美金以内才能大规模得到应用。

解决以上问题是目前面临的最大挑战。

发明内容

本发明要解决的技术问题提供一种用于高安全性的移动终端可见光和生物识别 组合光电成像系统。

特别的说明,本发明说述的生物识别指定为虹膜和静脉。

为了解决上述技术问题,本发明提供一种移动终端可见光和生物识别组合光电 成像系统,包括可见光光电成像和生物识别光电成像系统;所述可见光光电成像和生 物识别光电成像均由处理器芯片、LED照明光源、光学滤波器、光学成像透镜、图 像传感器组成;所述图像传感器的成像阵列被配置为单元像素具有接收可见光-红外 光宽带分布的成像波长光谱;所述LED照明光源被配置为通过LED电流驱动器控制 的辐射可见光-红外光成像波长的LED照明光源,且该LED照明光源具有与图像传 感器的可见光-红外光宽带成像波长分布相互匹配的辐射波长范围;

所述光学滤波器被配置为通过光学滤波器控制驱动器控制的可见光-红外光可 变波长光学滤波器;所述可见光-红外光可变波长光学滤波器被配置为具有与图像传 感器可见光-红外光宽带成像波长分布相互匹配的过滤波长范围;所述光学成像透镜 被配置为通过光学成像透镜聚焦驱动器控制的自动聚焦光学成像透镜;所述自动聚焦 光学成像透镜被配置为具有与图像传感器的可见光-红外光宽带成像波长分布相互匹 配的聚焦波长范围;所述可见光-红外光可变波长光学滤波器,自动聚焦光学成像透 镜,图像传感器的光学中心被配置为成像系统光学轴的同轴光路位置;所述的LED 照明光源的光学中心被配置为成像系统光学轴的离轴光路位置。

作为对本发明所述的一种移动终端可见光和生物识别组合光电成像系统的改 进:通过所述LED照明光源辐射可见光成像波长,可见光-红外光可变波长光学滤波 器切换为过滤红外光成像波长,自动聚焦光学成像透镜物理折射聚焦可见光成像波长 以及图像传感器的成像阵列接收可见光波长构成可见光光电成像的光学通路;通过所 述LED照明光源辐射红外光成像波长,可见光-红外光可变波长光学滤波器切换为过 滤可见光成像波长,自动聚焦光学成像透镜物理折射聚焦红外光成像波长以及图像传 感器的成像阵列接收红外光波长构成生物识别光电成像的光学通路;所述可见光光电 成像采用可见光成像波长为400-650nm,聚焦工作物距WD至少在30-100cm的范围 内;所述生物识别光电成像采用红外光成像波长为750-950nm,聚焦工作物距WD至 少在30-100cm的范围内;所述同轴光路位置为可见光-红外光可变波长光学滤波器, 自动聚焦光学成像透镜,图像传感器的光学中心线与成像系统光学轴间夹角具有0 度角度;所述离轴光路位置为照明光源的辐射光学中心线与成像系统光学轴间夹角具 有5-30度角度。

作为对本发明所述的一种移动终端可见光和生物识别组合光电成像系统的进一 步改进:所述的生物识别光电成像具有以下光学成像要求:生物识别光电成像的成像 波长WI满足:750nm≤WI≤950nm;生物识别光电成像的聚焦工作物距WD满足: 10cm≤WD≤30cm;生物识别光电成像的像素空间分辨率PSR满足: PSR≥10pixel/mm;生物识别光电成像的光学放大倍率OM满足:OM=PS*PSR;其 中,所述PS为图像传感器每个成像像素单元的物理尺度;PSR为生物识别光电成像 的像素空间分辨率;所述生物识别光电成像的光学空间分辨率OSRI在像方平面满足: 在调制传递函数等于60%时,1/(4*PS)≤OSRI≤1/(2*PS);所述可见光光电成像具有 以下光学成像要求:可见光光电成像的成像波长WI满足:400nm≤WI≤650nm;可 见光光电成像的聚焦工作物距WD满足:30cm≤WD≤100cm;可见光光电成像的像 素空间分辨率PSR应该满足:PSR≤3pixel/mm;可见光光电成像的光学放大倍率OM, 应该满足:OM=PS*PSR;其中,以上所述PS为图像传感器每个成像像素单元的物 理尺度;PSR为可见光光电成像的像素空间分辨率;

所述可见光光电成像的光学空间分辨率OSRI在像方平面满足:在调制传递函 数等于60%时,1/(4*PS)≤OSRI≤1/(2*PS)。

优选地,所述图像传感器、LED电流驱动器、自动聚焦光学成像透镜聚焦驱动 器以及光学滤波器控制驱动器均由处理器芯片控制;

所述处理器芯片被配置为用于连接图像传感器,控制图像传感器成像阵列输出 的图像像素值数据;连接LED电流驱动器驱动控制LED照明光源辐射强度、辐射角 度和位置、辐射时间;连接自动聚焦光学成像透镜聚焦驱动器实现驱动自动聚焦光学 成像透镜物理聚焦;以及连接光学滤波器控制驱动器实现驱动可见光-红外光可变波 长光学滤波器波长范围改变。

作为对本发明所述的一种移动终端可见光和生物识别组合光电成像系统的进一 步改进:所述图像传感器的成像阵列中接收可见光-红外光波长的成像像素单元的物 理尺度PS满足如下条件:1um/pixel≤PS≤3um/pixel;所述图像传感器成像阵列接收 的波长像素单元具有光电转换的数值Y,其数值Y为:

Y=Q*GAIN*EXP*ADCG*E*PSUEQ1

其中:所述EXP为图像传感器成像阵列的积分时间或曝光时间;EXP同步等于 LED照明光源辐射时间;EXP≤33.3ms;GAIN为图像传感器成像阵列的数字和模拟 增益;最大值GAIN满足图像传感器的信噪比SNR,SNR≥36db分贝;ADCG为图 像传感器成像阵列的ADC电压模拟-数值转换量化分辨率;E为图像传感器成像阵列 接收的辐射率或辐射照度;

E=C*β*I/WD2*cos2ψ*(1/FNO)2

其中:I为LED照明光源106辐射强度;I的最小值满足I≥100mw/sr;ψ为 LED照明光源的辐射角度,即LED照明光源的辐射光学中心线与成像系统光轴间的 离轴夹角;ψ满足:5度≤ψ≤30度;WD为光学成像系统的聚焦工作物距;FNO 为自动聚焦光学成像透镜的数值光圈,即相对孔距倒数;FNO满足: 0.5*PS/(1.22*λ)≤FNO≤2.0*PS/(1.22*λ);

λ为成像波长;β为成像物体的生物组织光学效应反射率;C为光学成像系统 的光学系数;

C=1/16*cos4ω/(1+OM)2

其中:ω为入射光的物方视场角;ω满足:0≤ω≤FOV/2,FOV为光电成像 系统的全视场角;OM为光电成像系统的光学放大倍率;PSU为图像传感器成像阵列 的成像像素单元的物理尺度面积单位比;

PSU=(PS*PS)/cm2

Q为光电成像系统光电转换常数;所述图像传感器成像阵列接收像素单元光电 转换的数字值Y被作为成像图像原始RAW像素数据I{Y}输出;所述图像传感器的 成像阵列被配置为全局帧成像模式或滚动行成像模式;所述图像传感器被配置为 RAWRGB像素输出格式,使用RGB通道补偿增益或RGB通道平衡增益;

R=λlλhr(λ)f(λ)S(λ)L(λ)dλ

G=λlλhg(λ)f(λ)S(λ)L(λ)dλ

B=λlλhb(λ)f(λ)S(λ)L(λ)dλ

以G通道补偿或平衡增益为规范化标准,G_GC=1.0;R通道补偿或平衡增益 R_GC=G/R;B通道补偿或平衡增益B_GC=G/B;所述[λl,λh]为成像波长范围; 所述g(λ),r(λ),b(λ)分别为图像传感器的RGB光谱的光电量子转换效率敏感度波 长分布函数,f(λ)为可见光-红外光可变波长光学滤波器的透射率波长分布函数,S(λ) 为LED照明光源的辐射率波长分布函数;L(λ)为自动聚焦光学成像透镜的透射率波 长分布函数;所述等价采用以R通道补偿增益或B通道补偿增益为归一标准;所述 图像传感器的图像分辨率ROI被配置为:ROI≥2560pixels*1280pixels;所述图像传 感器具有主光线入射角CRA(ChiefRayAngle)≥25度。

作为对本发明所述的一种移动终端可见光和生物识别组合光电成像系统的进一 步改进:所述LED照明光源具有:独立或混合辐射的可见光和红外光成像波长;半 峰值辐射视场角Ω;所述半峰值辐射视场角Ω满足:

Ω≥FOV;

所述FOV为成像系统的全视场角;

FOV≥2*arctan((DI*PS)/(2*EFL));

其中:EFL为自动聚焦光学成像透镜的等效焦距;DI为图像传感器成像阵列的 像面对角线像素单元的数量;PS为图像传感器成像阵列的像素单元的物理尺度;用 于优化光电成像系统的成像视场和成像质量效果的一个或多个不同辐射角度和位置; 用于联合优化光电成像系统的成像质量效果的与图像传感器成像同步的连续或脉冲 辐射时间和辐射强度;所述LED照明光源采用SMD表面贴片封装。

作为对本发明所述的一种移动终端可见光和生物识别组合光电成像系统的进一 步改进:所述可见光-红外光可变波长光学滤波器具有:当改变为可见光成像波长时:

可见光成像波长范围内的光截止率Fi≤10.0%,可见光成像波长范围外的光截 止率Fo≥99.0%,

或等价的

可见光成像波长范围内的光透射率Ti≥90.0%,可见光成像波长范围外的光透 射率To≤1.0%;

当改变为红外光成像波长时:

红外光成像波长范围内的光截止率Fi≤10.0%,红外光成像波长范围外的光截 止率Fo≥99.0%,

或等价的

红外光成像波长范围内的光透射率Ti≥90.0%,红外光成像波长范围外的光透 射率To≤1.0%。

作为对本发明所述的一种移动终端可见光和生物识别组合光电成像系统的进一 步改进:所述自动聚焦光学成像透镜被配置为固定焦距,采用液体驱动透镜、液晶驱 动透镜、VCM音圈驱动透镜、MEMS驱动透镜、EDOF波前相位调制透镜或者晶圆 级阵列微透镜中任意一种;

且其具有:

表面最大反射率Rmax≤1.0%,表面平均反射率Ravg≤0.3%,

或等价的

表面最小透射率Tmin≥99.0%,表面平均透射率Tavg≥99.7%;

所述自动聚焦光学成像透镜具有:焦距EFL,数值光圈FNO满足:

2mm≤EFL≤5mm,1.4≤FNO≤2.8;

所述自动聚焦光学成像透镜的光学畸变DOL绝对值被配置为:DOL绝对值 ≤1%;

所述自动聚焦光学成像透镜的相对照明率IOR被配置为:IOR≥50%;

所述IOR=光学成像透镜的边缘视场亮度/光学成像透镜的中心视场亮度;

所述自动聚焦光学成像透镜和图像传感器被配置为相互匹配主光线入射角 CRA。

一种用于可见光光电成像的成像方法,包括以下步骤:①处理器芯片进行对光 学滤波器控制驱动器,LED电流驱动器,图像传感器,自动聚焦光学成像透镜聚焦 驱动器初始化工作状态配置;②处理器芯片控制光学滤波器控制驱动器,LED电流 驱动器,图像传感器,自动聚焦光学成像透镜聚焦驱动器进入低功耗待机或关机模式; 处理器芯片判断是否需要获取可见光成像图像,是转步骤④,否继续步骤③;④处理 器芯片通过光学滤波器控制驱动器改变可见光-红外光可变波长光学滤波器为可见光 成像波长;处理器芯片控制LED电流驱动器驱动LED照明光源产生可见光成像波长 连续或同步脉冲模式的辐射;处理器芯片控制图像传感器的成像阵列接收全局帧成像 模式或滚动行成像模式输出的原始图像RAWRGB像素数据I{Y};⑤处理器芯片根 据成像原始图像RAW像素数据I{Y}和像素单元光电转换关系,驱动图像传感器和 LED电流驱动器及自动聚焦光学成像透镜聚焦驱动器,实现反馈控制;⑥处理器芯 片分别对原始图像RAW像素数据I{Y}插值重建和图像处理;⑦处理器芯片输出内插 重建和图像处理后的图像I{r,g,b};⑧返回步骤②循环。

一种用于生物识别光电成像的成像方法,其特征是,包括以下步骤:1.处理器 芯片进行对光学滤波器控制驱动器,LED电流驱动器,图像传感器,自动聚焦光学 成像透镜聚焦驱动器初始化工作状态配置;2.处理器芯片控制光学滤波器控制驱动 器,LED电流驱动器,图像传感器,自动聚焦光学成像透镜聚焦驱动器进入低功耗 待机或关机模式;3.处理器芯片判断是否需要获取生物成像图像,是转步骤⑷,否继 续步骤⑶;4.处理器芯片通过光学滤波器控制驱动器改变可见光-红外光可变波长光学 滤波器为红外光成像波长;5.处理器芯片控制LED电流驱动器驱动LED照明光源产 生红外光成像波长连续或同步脉冲模式的辐射;6.处理器芯片控制图像传感器的成像 阵列接收全局帧成像模式或滚动行成像模式输出的原始图像RAWRGB像素数据 I{Y};7.处理器芯片根据成像原始图像RAW像素数据I{Y}和像素单元光电转换关系, 驱动图像传感器和LED电流驱动器及自动聚焦光学成像透镜聚焦驱动器,实现反馈 控制;8.处理器芯片输出图像I{Y};9.返回步骤⑵循环。

作为对本发明所述一种用于生物识别光电成像的成像方法的改进,所述图像传 感器初始化工作状态配置为RAWRGB像素输出格式,RGB通道补偿增益或RGB 通道平衡增益处理可通过初始化工作状态配置设置图像传感器的相应的RGB通道数 字和/或模拟增益简化实现;所述反馈控制包括如下的步骤:首先、处理器芯片可以 根据图像传感器输出的成像原始图像RAW像素数据I{Y}和对应的公式EQ1,反馈控 制图像传感器的复位积分时间,数字和/或模拟增益设置,反馈控制LED电流驱动器 驱动LED照明光源的辐射强度,和辐射时间,用于控制图像亮度,信噪比和运动模 糊程度提高成像质量;其次、处理器芯片可以根据图像传感器输出的成像原始图像 RAW像素数据I{Y}计算图像中镜面全反射干扰程度和相对照明亮度均衡程度,反馈 控制LED电流驱动器驱动LED照明光源用于控制辐射角度和位置以提高成像质量; 最后、处理器芯片可以根据计算成像图像原始RAW像素数据I{Y}的焦点质量值反馈 控制自动聚焦光学成像透镜聚焦驱动器驱动自动聚焦光学成像透镜实现生物识别光 电成像聚焦工作物距WD至少在10cm-30cm的范围内。

一种驱动自动聚焦方法,包括以下步骤:1.根据预定的聚焦工作物距范围,定 义待搜索的局部感兴趣区域和搜索参数;2.处理器芯片控制自动聚焦光学成像透镜聚 焦驱动器按照步骤1中定义待搜索的局部感兴趣区域和搜索参数,驱动自动聚焦光学 成像透镜执行在单调方向上连续性焦点位置搜索;3.处理器芯片控制图像传感器获取 步骤2中在单调方向上连续性焦点位置搜索输出的成像原始图像RAWRGB像素数 据;4.处理器芯片实时计算焦点位置搜索图像的焦点质量;5.处理器判断最佳焦点质 量对应的图像为最佳聚焦图像。

一种生物识别防伪造物活体检测方法:采用通过可见光-红外光成像波长辐射产 生的生物组织光谱学活性特性实时检测方法。

作为对本发明所述一种生物识别防伪造物活体检测方法的改进,所述的可见光- 红外光成像波长辐射产生的生物组织光谱学活性特性实时检测方法,包括以下步骤: 1)处理器芯片通过光学滤波器控制驱动器改变可见光-红外光可变波长光学滤波器为 可见光成像波长;处理器芯片驱动控制LED电流驱动器驱动LED照明光源产生可见 光成像波长辐射;处理器芯片获取图像传感器成像阵列的可见光成像波长图像Ivs; 2)处理器芯片通过光学滤波器控制驱动器改变可见光-红外光可变波长光学滤波器为 红外光成像波长;处理器芯片驱动控制LED电流驱动器驱动LED照明光源产生红外 光成像波长辐射;处理器芯片获取图像传感器成像阵列的红外光成像波长图像Iir; 3)处理器芯片计算步骤a、b中可见光成像波长图像Ivs和红外光成像波长图像Iir的 对比度C数据,分别为Ivs_C,和Iir_C;其中:

C为虹膜区域与虹膜外区域间的对比度;

C为静脉区域与静脉外区域间的对比度;

C=S(Yiris)/S(Youtiris);

C=S(Youtvein)/S(Yvein);

Yiris表示虹膜区域像素;Youtiris表示虹膜外区域像素;Yvein表示静脉区域像 素;

Youtvein表示静脉外区域像素;所述的函数S为相应区域像素统计评估函数, 所述像素统计评估函数采用的方法包括:直方图统计,频率统计,平均值统计,加权 平均值统计,中值统计,能量值统计,方差统计,梯度统计或空间-频率域滤波器; 4)处理器芯片分别实时计算可见光成像波长辐射和红外光成像波长辐射的图像对比 度Ivs_C和Iir_C活性变化率Δρ;

其中:

Δρ=Iir_C/Ivs_C*100%;

5)根据可见光-红外光成像波长辐射生物组织光谱学活性特性预设值,和步骤4 中数据值Δρ的活性对比度相应变化率,判断条件Δρ〉300%实现实时检测生物 活体状态;所述的上述步骤1和2顺序具有等价性,可以对换。

一种提高生物识别成功率的成像方法:包括以下步骤:Ⅰ、注册时采集至少两 个或以上的LED照明光源在不同辐射角度和位置时产生的红外光成像波长生物图像 Iir{Pψenroll};Ⅱ、使用生物图像Iir{Pψenroll}计算获得至少两个或以上的生物特征 模板Template{Pψenroll},进行特征模板间交叉比对成功后,保存为注册的生物特征 模板;Ⅲ、识别时采集一个或以上的LED照明光源在不同辐射角度和位置时产生的 红外光成像波长生物图像Iir{Pψrecogn};Ⅳ、使用一个或多个生物图像Iir{Pψrecogn} 计算产生的特征模板Template{Pψrecogn}与注册的生物特征模板Template{Pψenroll} 间进行交叉比对并获得识别结果。

一种提高生物识别成功率的成像方法,其特征是:包括以下步骤:ⅰ、注册时 采集至少两种或以上的LED照明光源在不同辐射强度时产生的红外光成像波长生物 图像Iir{Renroll};ⅱ、使用生物图像Iir{Renroll}计算获得至少两个或以上的生物特 征模板Template{Renroll},进行特征模板间交叉比对成功后,保存为注册的生物特征 模板;ⅲ、识别时采集一个或以上的LED照明光源在不同辐射强度时产生的红外光 成像波长生物图像Iir{Rrecogn};ⅳ、使用一个或多个生物图像Iir{Rrecogn}计算产生 的特征模板Template{Rrecogn}与注册的生物特征模板Template{Renroll}间进行交叉 比对并获得识别结果。

一种提高生物识别成功率的成像方法:包括以下步骤:a注册时采集至少两种 或以上的LED照明光源在不同辐射波长范围时产生的红外光成像波长生物图像 Iir{Wenroll};b使用生物图像Iir{Wenroll}计算获得至少两个或以上的生物特征模板 Template{Wenroll},进行特征模板间交叉比对成功后,保存为注册的生物特征模板; c识别时采集一个或以上的LED照明光源在不同辐射波长范围时产生的红外光成像 波长生物图像Iir{Wrecogn};d使用一个或多个生物图像Iir{Wrecogn}计算产生的特 征模板Template{Wrecogn}与注册的生物特征模板Template{Wenroll}间进行交叉比对 并获得识别结果。

总结上述描述,通过本发明实现了高安全性的移动终端可见光和生物识别组合 光电成像系统以及其方法:

1、移动终端应用中可见光和生物识别组合光电成像系统,实现满足自拍功能的 可见光光电成像和多种虹膜静脉生物识别光电成像组合,其体积控制在 8.5mm*8.5mm*6mm内,低功耗。

2、移动终端应用中可见光和生物识别组合光电成像系统,实现一整套高安全性 的防伪造物活体检测方法,保证生物识别本身的安全性。

3.移动终端应用中可见光和生物识别组合光电成像系统,实现获取高质量的图 像光电成像方法。

4、移动终端应用中可见光和生物识别组合光电成像系统,实现一套提高生物识 别成功率的成像方法。

5、移动终端应用中可见光和生物识别组合光电成像系统,实现极大降低成本, 成本降低至10美金以内能大规模得到应用。

附图说明

下面结合附图对本发明的具体实施方式作进一步详细说明。

图1为本发明的可见光和生物识别组合光电成像系统的总体结构图;

具体实施方式

实施例1、给出一种移动终端可见光和生物识别组合光电成像系统及方法。该 方法包括有可见光光电成像的成像方法、生物识别光电成像的成像方法、生物防伪造 物活体检测方法、提高生物识别成功率的成像方法。

如图1所示,该组合光电成像系统沿着成像系统光轴100从上至下依次设置可 见光-红外光可变波长光学滤波器(101或104)(用于过滤可见光或红外光成像波长,位 于自动聚焦光学成像透镜102前或后)、自动聚焦光学成像透镜102(用于物理折射聚 焦成像波长)、自动聚焦光学成像透镜的固定安装座103(用于固定安装自动聚焦光学 成像透镜)、图像传感器105(用于光电转换输出成像图像)、照明光源106(包括可见光 和红外光-LED照明光源,用于对可见光光电成像产生可见光成像波长辐射和用于对 生物识别光电成像产生红外光成像波长辐射)以及成像系统固定安装基板107(用于提 供可见光和生物识别光电成像固定安装载体),成像系统固定安装基板107连接移动 终端主板110(用于实现移动终端功能电路载体),在移动终端主板110上集成LED电 流驱动器108(用于驱动控制LED照明光源106辐射强度,辐射角度和位置,和辐射 时间),自动聚焦光学成像透镜聚焦驱动器111(用于驱动自动聚焦光学成像透镜102 自动聚焦),光学滤波器控制驱动器112(用于驱动可见光-红外光可变波长光学滤波器 改变波长范围),和处理器芯片109(用于驱动控制LED电流驱动器108,自动聚焦光 学成像透镜聚焦驱动器111,光学滤波器控制驱动器112和图像传感器105)。

本发明具体实施例1中可见光和生物识别组合光电成像系统包括用于可见光光 电成像的光学通路和生物识别光电成像的光学通路。

可见光光电成像的光学通路包括如下:

LED照明光源106辐射可见光成像波长,可见光-红外光可变波长光学滤波器 (101或104)切换为过滤红外光成像波长,自动聚焦光学成像透镜102物理折射聚焦 可见光成像波长,图像传感器105的成像阵列接收可见光波长。

生物识别光电成像的光学通路包括如下:

LED照明光源106辐射红外光成像波长,可见光-红外光可变波长光学滤波器 (101或104)切换为过滤可见光成像波长,自动聚焦光学成像透镜102物理折射聚焦 红外光成像波长,图像传感器105的成像阵列接收红外光波长。

本发明的具体实施例1中,图像传感器105的成像阵列被配置为单元像素具有 接收可见光-红外光宽带分布的成像波长光谱;LED照明光源106(可见光和红外光 LED照明光源)被配置为具有与图像传感器105的可见光-红外光宽带成像波长分布相 互匹配的辐射波长范围;可见光-红外光可变波长光学滤波器(101或104)被配置为具 有与图像传感器105可见光-红外光宽带成像波长分布相互匹配的过滤波长范围;自 动聚焦光学成像透镜102被配置为具有与图像传感器105的可见光-红外光宽带成像 波长分布相互匹配的聚焦波长范围。

可见光-红外光可变波长光学滤波器(101或104),自动聚焦光学成像透镜102, 图像传感器105的光学中心被配置为成像系统光学轴100的同轴(on-axis)光路位置。 同轴(on-axis)光路位置为可见光-红外光可变波长光学滤波器(101或104)、自动聚焦光 学成像透镜102和图像传感器105的光学中心线与成像系统光学轴100间夹角具有0 度角度。

LED照明光源106的光学中心被配置为成像系统光学轴100的离轴(off-axis)光 路位置。离轴(off-axis)光路位置为照明光源106的辐射光学中心线与成像系统光学轴 100间夹角具有5-30度角度。

[处理器芯片109具有如下的功能:

用于连接图像传感器105,控制图像传感器105成像阵列输出的图像像素值数 据;

连接LED电流驱动器108驱动控制LED照明光源106的辐射强度、辐射角度 和位置、辐射时间;

连接自动聚焦光学成像透镜聚焦驱动器111实现驱动自动聚焦光学成像透镜 102物理聚焦;

连接光学滤波器控制驱动器112实现驱动可见光-红外光可变波长光学滤波器波 长范围改变。

自动聚焦光学成像透镜102被配置为固定焦距,可以采用如液体驱动透镜、液 晶驱动透镜、VCM音圈驱动透镜、MEMS驱动透镜、EDOF波前相位调制透镜或者 晶圆级阵列微透镜中任意一种。

以上所述的可见光-红外光可变波长光学滤波器(101或104)控制驱动器112,可 以采用如VCM音圈电磁机械力驱动2片独立的(可见光和红外光)光学滤波器分别行 程位移控制实现波长范围改变。具体的,通过在音圈腔体施加不同大小的电流值实现 电磁力推动弹片机械传递机构行程位移2片独立滤波器分别(可见光或红外光)到成像 系统光学轴100的同轴光路位置以实现驱动波长范围改变。更近一步,以上所述的可 见光-红外光可变波长光学滤波器(101或104),可以采用电介质薄膜可调谐波长光学 滤波器。通过光学滤波器控制驱动器112施加不同大小的薄膜电介质值调谐实现光学 滤波器波长过滤范围改变。本发明所述的可见光-红外光可变波长光学滤波器不限于 上述举例,其他类型应被等同理解。

发明的成像波长包括可见光成像波长为400-650nm,红外光成像波长为 750-950nm;在具体实施例1中的成像波长包括可见光成像波长为400-650nm,红外 光成像波长为810-880nm。本发明具体实施例1作为举例,红外光成像波长范围,本 质上成像波长范围为带宽特性,其也可以等同理解为由成像波长中心(wavelength center)和半峰值带宽(FWHM)描述,如810-880nm范围可表达为,中心波长 850nm±30nm半峰值带宽。更进一步,作为成像波长范围变化举例,可以窄带为中 心波长850nm±15nm半峰值带宽。本发明的成像波长范围变化不限于上述举例,其 他范围应被等同理解。

可见光光电成像采用可见光成像波长,聚焦工作物距WD至少在30-100cm的 范围内,光电成像系统采用红外光成像波长,聚焦工作物距WD至少在10-30cm的 范围内。

生物识别光电成像具有以下光学成像要求:

生物识别光电成像的成像波长WI满足:750nm≤WI≤950nm;

生物识别光电成像的聚焦工作物距WD满足:10cm≤WD≤30cm;

生物识别光电成像的像素空间分辨率PSR(pixelspatialresolution)应该满足: PSR≥10pixel/mm;

生物识别光电成像的光学放大倍率OM(opticalmagnification),应该满足:OM= PS*PSR;

其中,以上所述的PS为图像传感器105每个成像像素单元的物理尺度;PSR 为生物识别光电成像的像素空间分辨率;

生物识别光电成像的光学空间分辨率 OSRI(opticalspatialresolutionofimageofplane)在像方平面应该满足:在调 制传递函数等于60%(MTF=0.6)时,1/(4*PS)≤OSRI≤1/(2*PS)lp/mm(线对每毫米)。

可见光光电成像具有以下光学成像要求:

可见光光电成像的成像波长WI满足:400nm≤WI≤650nm;

可见光光电成像的聚焦工作物距WD满足:30cm≤WD≤100cm;

可见光光电成像的像素空间分辨率PSR(pixelspatialresolution)应该满足: PSR≤3pixel/mm;

可见光光电成像的光学放大倍率OM(opticalmagnification),应该满足:OM= PS*PSR;

其中,以上所述的PS为图像传感器105每个成像像素单元的物理尺度;PSR 为可见光光电成像的像素空间分辨率;

可见光光电成像的光学空间分辨率 OSRI(opticalspatialresolutionofimageofplane)在像方平面应该满足:在调 制传递函数等于60%(MTF=0.6)时,1/(4*PS)≤OSRI≤1/(2*PS)lp/mm(线对每毫米)。

图像传感器105的成像阵列中接收可见光-红外光波长的成像像素单元的物理尺 度PS满足如下条件:1um/pixel≤PS≤3um/pixel(微米每像素);

图像传感器105成像阵列接收的波长像素单元光电转换的数值Y为:

Y=Q*GAIN*EXP*ADCG*E*PSUEQ1

其中:以上所述的

EXP为图像传感器105成像阵列的积分时间integrationTime或曝光时间 exposuretime,单位:S秒;EXP同步等于LED照明光源106辐射时间;

EXP≤33.3ms

GAIN为图像传感器105成像阵列的数字和模拟增益,无单位;

最大值GAIN满足图像传感器105的信噪比SNR,SNR≥36db分贝

ADCG为图像传感器105成像阵列的ADC电压模拟-数值转换量化分辨率,单 位:LSB/V,数值位每伏特;

E为图像传感器105成像阵列接收的辐射率或辐射照度,单位:lux(勒克斯)或 mw/cm2(每毫瓦每平方厘米);

E=C*β*I/WD2*cos2ψ*(1/FNO)2

其中:I为LED照明光源106辐射强度,单位毫瓦每球面度(mw/sr);

I最小值满足I≥100mw/sr;

ψ为LED照明光源106的辐射角度,即LED照明光源106的辐射光学中心线 与成像系统光轴100间的离轴夹角;

ψ满足:5度≤ψ≤30度;更近一步限制为7度≤ψ≤22.5度;

WD为光学成像系统的聚焦工作物距;

FNO为自动聚焦光学成像透镜102的数值光圈,即相对孔距倒数;

FNO满足:0.5*PS/(1.22*λ)≤FNO≤2.0*PS/(1.22*λ)

λ为成像波长;

β为成像物体(虹膜或静脉)的生物组织光学效应反射率(LED照明光源辐射的 波长经过虹膜或静脉生物组织的吸收,反射和散射产生生物组织光学效应反射率);

C为光学成像系统的光学系数;

C=1/16*cos4ω/(1+OM)2

其中:ω为入射光的物方视场角;

ω满足:0≤ω≤FOV/2,FOV为光电成像系统的全视场角;

OM为光电成像系统的光学放大倍率;

PSU为图像传感器105成像阵列的成像像素单元的物理尺度面积单位比;

PSU=(PS*PS)/cm2

Q为光电成像系统光电转换常数;单位为伏特每毫瓦每平方厘米每秒, V/(mw/cm2-sec)或ke-/(mw/cm2-sec);

图像传感器105成像阵列接收像素单元光电转换的数字值Y被进一步作为成像 图像原始RAW像素数据I{Y}输出。

图像传感器105的成像阵列被配置为全局帧成像模式(GlobalShutter)或滚动行 成像模式(RollingShutter)。

本发明具体实施例1所述的全局帧成像模式(GlobalShutter)包括全局帧积分和 全局帧读出的成像模式,或全局帧积分和滚动行读出的成像模式。

本发明具体实施例1所述的滚动行成像模式(RollingShutter)包括滚动行积分 和滚动行读出的成像模式。

图像传感器105被配置为RAWRGB像素输出格式,使用RGB通道补偿增益 或RGB通道平衡增益。

R=λlλhr(λ)f(λ)S(λ)L(λ)dλ

G=λlλhg(λ)f(λ)S(λ)L(λ)dλ

B=λlλhb(λ)f(λ)S(λ)L(λ)dλ

以G通道补偿或平衡增益为规范化标准,G_GC=1.0;

R通道补偿或平衡增益R_GC=G/R;

B通道补偿或平衡增益B_GC=G/B;

以上所述的[λl,λh]为成像波长范围,本发明具体实施例1中优选的举例可见 光成像波长为[400nm,650nm],红外成像波长为[800nm,900nm],作为等同理解, 更进一步也可以选择红外成像波长范围变化为[810nm,880nm]。

g(λ),r(λ),b(λ)分别为图像传感器105的RGB光谱的光电量子转换效率敏感度 波长分布函数,f(λ)为可见光-红外光可变波长光学滤波器(101或104)的透射率波长 分布函数,S(λ)为LED照明光源106的辐射率波长分布函数;L(λ)为自动聚焦光 学成像透镜102的透射率波长分布函数。

等同理解的,也可等价采用以R通道补偿增益或B通道补偿增益为归一标准。

特别的图像成像传感器105采用单色类型时RGB通道增益补偿或RGB通道增 益平衡可简化为G_CGC=R_CGC=B_CGC=1.0;

所述的图像传感器105的图像分辨率ROI被配置为:

ROI≥2560pixels*1280pixels。

所述的图像传感器105具有主光线入射角CRA(ChiefRayAngle)≥25度。

本发明具体实施例1所述的图像传感器105可采用BareDie(COB), ShellUTCSP,NeoPACCSP,TSVCSP等封装进一步减小体积。

本发明具体实施例1所述的LED照明光源106具有:独立或混合辐射的可见光 和红外光成像波长。更进一步,本发明具体实施例1所述的LED照明光源(106可见 光和红外光LED)具有:半峰值辐射视场角Ω。所述的半峰值辐射视场角Ω满足:

Ω≥FOV;

所述FOV为成像系统的全视场角;

FOV≥2*arctan((DI*PS)/(2*EFL));

其中:EFL为自动聚焦光学成像透镜102的等效焦距;DI为图像传感器105成 像阵列的像面对角线像素单元的数量;PS为图像传感器105成像阵列的像素单元的 物理尺度;

LED(即以上所述的LED照明光源)理论上是一种360度角度辐射光的朗伯点光 源,采用凸透镜或凹面反光镜能使LED点光源辐射的光线折射或反射起到汇聚光能 控制LED照明光源的半峰值辐射视场角的作用。凸透镜可由高折射和透射率光学塑 料等光学基质材料制造,凹面反光镜可由高光学反射率金属基质材料制造。更进一 步理想的,LED可采用折射和透射率高的环氧树脂基质材料,掺入吸收可见光透射 红外光波长的散射色料剂进行透镜功能封装,实现LED半峰值辐射视场角控制汇聚 光能,且呈现表面黑色,以达到视觉美感要求。

本发明具体实施例1所述的LED照明光源106具有:一个或多个不同辐射角度 和位置,用于优化光电成像系统的成像视场和成像质量效果。如采用位于成像系统 光轴100左侧和/或右侧的不同辐射位置和不同辐射角度(左侧Pl,右侧Pr,左右两 侧Pl&Pr,[5-30]辐射角度中任意一种或多种角度如5度,20度),作为不同辐射角 度和位置变化举例也可以采用(上侧Pt,下侧Pb,上下两侧Pt&Pb,[5-30]辐射角度 中任意一种或多种角度如10度,30度)。多种辐射角度可以优化镜面全反射光干扰 程度,提高光电成像系统的成像质量。多种辐射位置可以优化成像视场的相对照明 亮度均衡程度,提高光电成像系统的成像质量。本发明的不同辐射角度和位置变化 不限于上述举例,其他不同辐射角度和位置应被等同理解。

本发明具体实施例1所述的LED照明光源106具有:与图像传感器105成像同 步的连续或脉冲辐射时间和辐射强度,用于联合优化光电成像系统的成像质量效果。 LED照明光源106与图像传感器105成像同步的连续或脉冲辐射时间和辐射强度, 可以优化图像亮度,信噪比和运动模糊程度,提高光电成像系统的成像质量。LED 照明光源106可采用SMD表面贴片等封装进一步减小体积。

本发明具体实施例1所述的可见光-红外光可变波长光学滤波器(101或104)具 有:改变可见光和红外光成像波长范围。更进一步,本发明具体实施例1中所述的 可见光-红外光可变波长光学滤波器(101或104)具有:

当改变为可见光成像波长时:

可见光成像波长范围内的光截止率Fi≤10.0%,

可见光成像波长范围外的光截止率Fo≥99.0%,

或等价的

可见光成像波长范围内的光透射率Ti≥90.0%,

可见光成像波长范围外的光透射率To≤1.0%。

当改变为红外光成像波长时:

红外光成像波长范围内的光截止率Fi≤10.0%,

红外光成像波长范围外的光截止率Fo≥99.0%,

或等价的

[红外光成像波长范围内的光透射率Ti≥90.0%,

红外光成像波长范围外的光透射率To≤1.0%。

本发明具体实施例1所述的自动聚焦光学成像透镜102具有:物理折射聚焦可 见光和红外光成像波长。更进一步,本发明具体实施例1所述的自动聚焦光学成像 透镜102具有对可见光和红外光成像波长:

表面最大反射率Rmax≤1.0%,表面平均反射率Ravg≤0.3%;

或等价的

表面最小透射率Tmin≥99.0%,表面平均透射率Tavg≥99.7%。

以上所述的自动聚焦光学成像透镜102可在非球面光学塑料如光学级PMMA, 光学级PC等光学基质材料进行表面多层减反或增透镀膜实现;并可通过3-5P片非 球面光学塑料注塑工艺实现,TTL光学总长≤6mm。

所述的自动聚焦光学成像透镜具有:焦距EFL,数值光圈FNO满足:

2mm≤EFL≤5mm,1.4≤FNO≤2.8。

更进一步,以上所述的自动聚焦光学成像透镜102的光学畸变 DOL(distortionoflens)绝对值被配置为:

DOL绝对值≤1%。

以上所述的自动聚焦光学成像透镜102的相对照明率IOR被配置为:

IOR≥50%。

所述IOR=光学成像透镜的边缘视场亮度/光学成像透镜的中心视场亮度。

以上所述的自动聚焦光学成像透镜102和图像传感器105被配置为相互匹配主 光线入射角CRA,即,理论上CRA相等,实际应用中控制误差范围绝对值小于等 于3度。

自动聚焦光学成像透镜102被配置为固定焦距,包括液体驱动透镜、液晶驱动 透镜、VCM音圈驱动透镜、MEMS驱动透镜、EDOF波前相位调制透镜或者晶圆级 微阵列透镜中任意一种。以上所述的液体驱动透镜包括固定聚焦透镜,液体透镜, 用于控制液体透镜的电压驱动器111;以上所述的液晶驱动透镜包括固定聚焦透镜, 液晶透镜,用于控制液晶透镜的电压驱动器111;以上所述的液体驱动透镜和液晶 驱动透镜通过改变入射光的屈光度既光学功率调节以实现自动聚焦功能。以上所述 的VCM音圈驱动透镜包括固定聚焦透镜,VCM音圈,用于控制VCM音圈的电流 驱动器111;以上所述的VCM音圈驱动透镜通过改变光学后焦既光学像距调节以实 现自动聚焦功能。以上所述的MEMS(微电子机械系统)驱动透镜包括固定聚焦透镜, MEMS透镜,用于控制MEMS透镜的静电驱动器111。以上所述的MEMS驱动透 镜通过改变MEMS透镜的光学位置以实现自动聚焦功能。以上所述的晶圆级阵列微 透镜,通过微透镜阵列计算成像(ComputationalImaging)实现3D全景深重建功能。 以上所述的EDOF波前相位调制透镜包括透镜,波前相位调制光学元件;以上所述 的EDOF波前相位调制通过波前相位调制光学元件调制后,逆滤波解调重建实现扩 展景深功能。

本发明具体实施例1还包括对成像系统的OSI光学图像稳定驱动器,通过移动 终端集成的陀螺仪等传感器提供的移动矢量信息反馈光学图像稳定驱动器用于控制 补偿成像系统的光学运动模糊,能进一步优化光电成像系统的成像质量效果。

具体地,根据本发明具体实施例1的陀螺仪,线速度计等传感器提供的移动矢 量信息用于反馈光学图像稳定驱动器OIS控制补偿成像系统的光学运动模糊,或用于 反馈3轴移动矢量信息,即角速度和/或线速度小于预定门限控制成像系统的光学运 动模糊,能进一步优化光电成像系统的成像质量效果。

为去除镜面全反射光的成像干扰,本发明具体实施例1的LED照明光源106配 置光学线偏振器,和成像光路中(位于自动聚焦光学成像透镜102前或后)配置对应的 正交态90度光学线偏振器,通过发射和接收端形成正交态的线偏振,能完全去除镜 面全反射光的成像干扰。更进一步的,可在成像光路中(位于自动聚焦光学成像透镜 102前或后)配置可调谐偏振态的光学偏振器,通过控制可调谐光学偏振器的偏振态, 能完全去除镜面全反射光的成像干扰。

本发明具体实施例1,归因于生物识别光电成像和可见光光电成像具有不同光 学成像要求,成像波长,像素空间分辨率,光学放大倍率,光学空间分辨率,聚焦工 作物距范围。

以上所述的生物识别光电成像具有以下光学成像要求:

生物识别光电成像的成像波长WI满足:

750nm≤WI≤950;

生物识别光电成像的聚焦工作物距WD满足:

10cm≤WD≤30cm。

生物识别光电成像的像素空间分辨率PSR(pixelspatialresolution)应该满足: PSR≥10pixel/mm;

生物识别光电成像的光学放大倍率OM(opticalmagnification),应该满足:

OM=PS*PSR;

其中所述的:PS为图像传感器每个成像像素单元的物理尺度;PSR为生物识别 光电成像的像素空间分辨率;

生物识别光电成像的光学空间分辨率 OSRI(opticalspatialresolutionofimageofplane)在像方平面应该满足:在调 制传递函数等于60%(MTF=0.6)时,1/(4*PS)≤OSRI≤1/(2*PS)lp/mm(线对每毫米)。

本发明具体实施例1所述的生物识别光电成像的光学成像要求可实现高分辨率 的虹膜和静脉生物特征细节提取,提高组合生物识别性能。

所述的可见光光电成像具有以下光学成像要求:

可见光光电成像的成像波长WI满足:

400nm≤WI≤650nm;

可见光光电成像的聚焦工作物距WD满足:

30cm≤WD≤100cm。

可见光光电成像的像素空间分辨率PSR(pixelspatialresolution)应该满足: PSR≤3pixel/mm;

可见光光电成像的光学放大倍率OM(opticalmagnification),应该满足:

OM=PS*PSR;

其中所述的:PS为图像传感器每个成像像素单元的物理尺度;PSR为可见光光 电成像的像素空间分辨率;

可见光光电成像的光学空间分辨率 OSRI(opticalspatialresolutionofimageofplane)在像方平面应该满足:在调 制传递函数等于60%(MTF=0.6)时,1/(4*PS)≤OSRI≤1/(2*PS)lp/mm(线对每毫米)。

通过以上所述的移动终端可见光和生物识别组合光电成像系统,本发明给出一 种可见光光电成像的成像方法,包括以下步骤:

1.处理器芯片109配置所述光学滤波器、所述LED照明光源、所述图像传感器 和所述光学成像透镜为初始化工作状态,具体地,即进行对光学滤波器控制驱动器 112,LED电流驱动器108,图像传感器105,自动聚焦光学成像透镜聚焦驱动器111 初始化工作状态配置;

2.处理器芯片109控制控制所述光学滤波器、所述LED照明光源、所述图像传 感器和所述光学成像透镜进入低功耗待机或关机模式,光学滤波器控制驱动器112, LED电流驱动器108,图像传感器105,自动聚焦光学成像透镜聚焦驱动器111进入 低功耗待机或关机模式;

3.处理器芯片判断是否需要获取可见光成像图像,是转步骤4,否继续步骤3;

4.处理器芯片109通过光学滤波器控制驱动器112改变可见光-红外光可变波长 光学滤波器(101或104)为允许通过可见光成像波长;

5.处理器芯片109控制LED电流驱动器108驱动LED照明光源106产生可见 光成像波长连续或同步脉冲模式的辐射;

6.处理器芯片109控制图像传感器105的成像阵列接收全局帧成像模式或滚动 行成像模式输出的原始图像RAWRGB像素数据I{Y};

7.处理器芯片109根据成像原始图像RAW像素数据I{Y}和像素单元光电转换 关系,驱动图像传感器105和LED电流驱动器108及自动聚焦光学成像透镜聚焦驱 动器111,实现反馈控制;

8.处理器芯片109分别对原始图像RAW像素数据I{Y}插值重建和图像处理;

9.处理器芯片109输出内插重建和图像处理后的图像I{r,g,b};

10.返回步骤2循环。

以上所述可见光光电成像的成像方法的步骤7中反馈控制包括:

1.处理器芯片109可以根据图像传感器105输出的成像原始图像RAW像素数据 I{Y}和对应的公式EQ1,反馈控制图像传感器105的复位积分时间,数字和/或模拟 增益设置,反馈控制LED电流驱动器108驱动LED照明光源106的辐射强度,和 辐射时间用于提高成像质量。

2.处理器芯片109可以根据图像传感器105输出的成像原始图像RAW像素数据 I{Y}计算图像中镜面全反射干扰程度,反馈控制LED电流驱动器108驱动LED照 明光源106用于控制辐射角度和位置以提高成像质量。

3.处理器芯片109可以根据计算成像图像原始RAW像素数据I{Y}的焦点质量 值反馈控制自动聚焦光学成像透镜聚焦驱动器111驱动自动聚焦光学成像透镜102 实现可见光光电成像聚焦工作物距WD至少30cm-100cm。可采用传统公知的自动 对焦方法如焦点质量最大峰值模糊到精确的迭代搜索。

处理器芯片109可以通过光线传感器(根据使用的情况,可以在处理器芯片109 上设置这样单独附加的一个器件,其设置的方法为现在的公知技术,或者还可以通 过在市场上采购相应的处理器芯片实现这样的光线传感器功能)根据当前环境光亮 度,控制LED电流驱动器108驱动LED照明光源106可见光的辐射强度。更进一 步,本发明具体实施例1如果光线传感器根据当前环境光亮度判断大于500-1000lux 以上时,关闭LED电流驱动器驱动LED照明光源106可见光。

更进一步解释,以上所述可见光光电成像的成像方法的步骤8中所述的内插重 建可采用传统公知的内插值算法。

可见光光电成像的成像方法的步骤8中所述的图像处理包括图像光学黑电平校 正BLC,自动白平衡AWB,色彩矩阵校正CCM,透镜边缘阴影校正 lensshadingcorrection,自动曝光反馈控制AEC,自动增益反馈控制AGC等。

通过以上所述的移动终端可见光和生物识别组合光电成像系统,本发明给出一 种生物识别光电成像的成像方法,包括以下步骤:

1.处理器芯片109配置所述光学滤波器、所述LED照明光源、所述图像传感器 和所述光学成像透镜为初始化工作状态,具体地,即进行对光学滤波器控制驱动器 112,LED电流驱动器108,图像传感器105,自动聚焦光学成像透镜聚焦驱动器111 初始化工作状态配置;

2.处理器芯片109控制所述光学滤波器、所述LED照明光源、所述图像传感器 和所述光学成像透镜进入低功耗待机或关机模式,具体地,即光学滤波器控制驱动器 112,LED电流驱动器108,图像传感器105,自动聚焦光学成像透镜聚焦驱动器111 进入低功耗待机或关机模式;

3.处理器芯片判断是否需要获取生物成像图像,是转步骤4,否继续步骤3;

4.处理器芯片109通过光学滤波器控制驱动器112改变可见光-红外光可变波长 光学滤波器(101或104)为允许通过红外光成像波长;

5.处理器芯片109控制LED电流驱动器108驱动LED照明光源106产生红外 光成像波长连续或同步脉冲模式的辐射;

6.处理器芯片109控制图像传感器105的成像阵列接收全局帧成像模式或滚动 行成像模式输出的原始图像RAWRGB像素数据I{Y};

7.处理器芯片109根据成像原始图像RAW像素数据I{Y}和像素单元光电转换 关系,驱动图像传感器105和LED电流驱动器108及自动聚焦光学成像透镜聚焦驱 动器111,实现反馈控制;

8.处理器芯片109输出图像I{Y};

9.返回步骤2循环。

本发明具体实施例1步骤1中图像传感器105初始化工作状态被配置为 RAWRGB像素输出格式,RGB通道补偿增益或RGB通道平衡增益处理可通过初 始化工作状态配置设置图像传感器105的相应的RGB通道数字和/或模拟增益简化 实现。更进一步的图像成像传感器105,禁用色彩矩阵校正CCM,禁用内插 interpolation,禁用Gamma校正,禁用自动白平衡AWB,使用这些功能导致生物图 像对比度降低,特别纹理高频边缘部分,影响生物图像质量。

以上所述生物识别光电成像的成像方法的步骤7中反馈控制包括:

1.处理器芯片109可以根据图像传感器105输出的成像原始图像RAW像素数据 I{Y}和对应的公式EQ1,反馈控制图像传感器105的复位积分时间,数字和/或模拟 增益设置,反馈控制LED电流驱动器108驱动LED照明光源106的辐射强度,和 辐射时间,用于控制图像亮度,信噪比和运动模糊程度提高成像质量。

2.处理器芯片109可以根据图像传感器105输出的成像原始图像RAW像素数据 I{Y}计算图像中镜面全反射干扰程度和相对照明亮度均衡程度,反馈控制LED电流 驱动器108驱动LED照明光源106用于控制辐射角度和位置以提高成像质量。

3.处理器芯片109可以根据计算成像图像原始RAW像素数据I{Y}的焦点质量 值反馈控制自动聚焦光学成像透镜聚焦驱动器111驱动自动聚焦光学成像透镜102 实现生物识别光电成像聚焦工作物距WD至少10cm-30cm。可采用传统公知的自动 对焦方法如焦点质量最大峰值模糊到精确的迭代搜索。

更进一步,处理器芯片109可以通过图像传感器105输出的成像图像原始RAW 像素数据,执行图像传感器的光学黑电平校正BLC,自动曝光反馈控制AEC,自动 增益反馈控制AGC。

考虑到生物识别聚焦要求,高像素空间分辨率,大光学放大倍率,微距的聚焦 工作物距范围,传统公知的自动对焦方法如焦点质量最大峰值模糊到精确的迭代搜索 需要1s时间以上。

为实现100ms内的快速稳定自动聚焦,本发明具体实施例1通过以上所述的移 动终端可见光和生物识别组合光电成像系统,给出一种提供一种快速自动聚焦方法, 包括以下步骤:

1.根据预定的聚焦工作物距范围WD,定义待搜索的局部感兴趣区域ROI和搜 索参数;

定义待搜索的局部感兴趣区域ROI可由以下公式确定;

1/EFL=1/ROI+1/WD;

其中:所述的EFL为自动聚焦光学成像透镜固定焦距;

WD为预定的生物聚焦工作物距范围,10-30cm;

ROI为相应的待搜索的局部感兴趣区域范围;

定义搜索参数包括:

搜索步长SStep和搜索次数SNO可由以下公式确定:

SStep=k*PS;

SNO=ROI/SStep;

其中:所述的PS为图像传感器105的成像像素单元的物理尺度;

k为生物识别算法可接受的模糊圆直径尺度;

2.处理器芯片109控制自动聚焦光学成像透镜聚焦驱动器111按照步骤1中定 义待搜索的局部感兴趣区域ROI和搜索参数,驱动自动聚焦光学成像透镜102执行 在单调方向上连续性焦点位置搜索。即执行在单调方向上连续性焦点位置{Pi,i=1, SNO}搜索;

单调方向连续性焦点位置搜索,可以避免采用传统公知的自动对焦方法如焦点 质量最大峰值模糊到精确的迭代搜索导致正反方向反复,具有高效,稳定,聚焦速 度快。

3.处理器芯片109控制图像传感器105获取步骤2中在单调方向上连续性焦点 位置{Pi,i=1,SNO}搜索输出的成像原始图像RAWRGB像素数据I{Pi,i=1,NO};

4.处理器109芯片实时计算焦点位置搜索图像I{Pi,i=1,NO}的焦点质量 QS(I{Pi});所述的函数QS为焦点质量评估函数,所述焦点质量评估函数采用的方 法包括:梯度统计,频率统计,高通或带通空间滤波器,高频能量值统计,方差统 计,空间-频率域滤波器等方法;本发明的焦点质量评估函数QS不限于上述举例, 其他方法应被等同理解。

5.处理器109判断最佳焦点质量arg{QS(I{Pi})}对应的图像为最佳聚焦图像;

arg{QS(I{Pi})}=max{QS(I{Pi})}对应的焦点质量最大值图像为最佳聚焦图像;

更进一步,

arg{QS(I{Pi})}={QS(I{Pi-1})<QS(I{Pi})>QS(I{Pi+1})}对应的焦点质量最大值 图像为最佳聚焦图像;

也可采用

arg{QS(I{Pi})}={QS(I{Pi})>EI)}对应的焦点质量图像为最佳聚焦图像;

EI为生物识别算法可接受的图像焦点质量门限。

本发明的判断焦点质量方法不限于上述举例,其他方法应被等同理解。

本发明提供一种高安全性的生物识别防伪造物活体检测方法,具有对生物识别 伪造物具有实时检测能力,用于保证生物识别本身的安全性,采用以下方式:

通过可见光-红外光成像波长辐射产生的生物组织光谱学活性特性实时检测方 法。

通过以上所述的移动终端可见光和生物识别组合光电成像系统,本发明给出一 种可见光-红外光成像波长辐射产生的生物组织光谱学活性特性实时检测方法,包括 以下步骤:

1.处理器芯片109通过光学滤波器控制驱动器112改变可见光-红外光可变波长 光学滤波器(101或104)为可见光成像波长;

处理器芯片109驱动控制LED电流驱动器108驱动LED照明光源106产生可 见光成像波长辐射;

处理器芯片109获取图像传感器105成像阵列的可见光成像波长图像Ivs;

2.处理器芯片109通过光学滤波器控制驱动器112改变可见光-红外光可变波长 光学滤波器(101或104)为红外光成像波长;

处理器芯片109驱动控制LED电流驱动器108驱动LED照明光源106产生红 外光成像波长辐射;

处理器芯片109获取图像传感器105成像阵列的红外光成像波长图像Iir;

3.处理器芯片109计算步骤1,2中可见光成像波长图像Ivs和红外光成像波长 图像Iir的对比度C数据,分别为Ivs_C,和Iir_C;

其中:

C为虹膜区域与虹膜外区域间的对比度;

C为静脉区域与静脉外区域间的对比度;

C=S(Yiris)/S(Youtiris);

C=S(Youtvein)/S(Yvein);

Yiris表示虹膜区域像素;

Youtiris表示虹膜外区域像素;

Yvein表示静脉区域像素;

Youtvein表示静脉外区域像素;

所述的函数S为相应区域像素统计评估函数,所述像素统计评估函数采用的方 法包括:直方图统计,频率统计,平均值统计,加权平均值统计,中值统计,能量 值统计,方差统计,梯度统计,空间-频率域滤波器等;本发明的相应区域像素统计 评估函数S不限于上述举例,其他方法应被等同理解。

4.处理器芯片109分别实时计算可见光成像波长辐射和红外光成像波长辐射的 图像对比度Ivs_C和Iir_C活性变化率Δρ;

其中:

Δρ=Iir_C/Ivs_C*100%;

5.根据可见光-红外光成像波长辐射生物组织光谱学活性特性预设值,和步骤4 中数据值Δρ的活性对比度相应变化率,判断条件Δρ〉300%实现实时检测生物 活体状态。

等同理解的,上述可见光-红外光成像波长辐射产生的生物组织光谱学活性特性 实时检测方法中的步骤1和2顺序具有等价性,可以对换。

为实现提高生物识别成功率,本发明具体实施例1(根据移动终端可见光和生物 识别组合光电成像系统)提供一种用于提高生物识别成功率的成像方法,包括以下步 骤:

1.注册时采集至少两个或以上的LED照明光源106在不同辐射角度和位置时产 生的红外光成像波长生物图像Iir{Pψenroll};

本发明具体实施例1举例采用不同辐射角度和位置举例如左侧Pl,右侧Pr,左 右两侧Pl&Pr,上侧Pt,下侧Pb,上下两侧Pt&Pb,[5-30]辐射角度中任意一种或多 种角度如5度,10度,20度,30度)。

2.使用生物图像Iir{Pψenroll}计算获得至少两个或以上的生物特征模板 Template{Pψenroll},进行特征模板间交叉比对成功后,保存为注册的生物特征模板;

所述的交叉比对举例,如获得3个生物特征模板Template{1,2,3}进行交叉比对 分别为Template1-Template2,Template1-Template3,Template2-Template3;只有当上 述特征模板间交叉比对成功后,才能保证用于后续识别的注册的生物特征模板的稳 定性和识别率。

3.识别时采集一个或以上的LED照明光源106在不同辐射角度和位置时产生的 红外光成像波长生物图像Iir{Pψrecogn};

4.使用一个或多个生物图像Iir{Pψrecogn}计算产生的特征模板 Template{Pψrecogn}与注册的生物特征模板Template{Pψenroll}间进行交叉比对并 获得识别结果;

为实现提高生物识别成功率,本发明具体实施例1(根据移动终端可见光和生物 识别组合光电成像系统)再提供另外一种用于提高生物识别成功率的成像方法,包括 以下步骤:

1.注册时采集至少两种或以上的LED照明光源106在不同辐射强度时产生的红 外光成像波长生物图像Iir{Renroll};

本发明具体实施例1举例采用不同可见光和红外光辐射强度产生生物组织如瞳 孔刺激

活性的红外光成像波长生物图像,如产生1倍,2倍,4倍或以上的不同可见光 和/或红外光辐射强度;

2.使用生物图像Iir{Renroll}计算获得至少两个或以上的生物特征模板 Template{Renroll},进行特征模板间交叉比对成功后,保存为注册的生物特征模板;

所述的交叉比对举例,如获得3个生物特征模板Template{1,2,3}进行交叉比对 分别为Template1-Template2,Template1-Template3,Template2-Template3;只有当上 述特征模板间交叉比对成功后,才能保证用于后续识别的注册的生物特征模板的稳 定性和识别率。

3.识别时采集一个或以上的LED照明光源106在不同辐射强度时产生的红外光 成像波长生物图像Iir{Rrecogn};

4.使用一个或多个生物图像Iir{Rrecogn}计算产生的特征模板Template{Rrecogn} 与注册的生物特征模板Template{Renroll}间进行交叉比对并获得识别结果;

为实现提高生物识别成功率,本发明具体实施例1(根据移动终端可见光和生物 识别组合光电成像系统)还提供再另外一种用于提高生物识别成功率的成像方法,包 括以下步骤:

1.注册时采集至少两种或以上的LED照明光源106在不同辐射波长范围时产生 的红外光成像波长生物图像Iir{Wenroll};

本发明具体实施例1举例采用LED照明光源106产生不同辐射波长范围的红外 光成像波长生物图像,举例如分别产生750nm-800nm,800nm-850nm,850nm-900nm, 900nm-950nm,750nm-850nm,850nm-950nm等不同辐射波长范围或组合。

2.使用生物图像Iir{Wenroll}计算获得至少两个或以上的生物特征模板 Template{Wenroll},进行特征模板间交叉比对成功后,保存为注册的生物特征模板;

所述的交叉比对举例,如获得3个生物特征模板Template{1,2,3}进行交叉比对 分别为Template1-Template2,Template1-Template3,Template2-Template3;只有当上 述特征模板间交叉比对成功后,才能保证用于后续识别的注册的生物特征模板的稳 定性和识别率。

3.识别时采集一个或以上的LED照明光源106在不同辐射波长范围时产生的红 外光成像波长生物图像Iir{Wrecogn};

4.使用一个或多个生物图像Iir{Wrecogn}计算产生的特征模板 Template{Wrecogn}与注册的生物特征模板Template{Wenroll}间进行交叉比对并获 得识别结果;

本发明描述的具体实施例内容和技术特征,可以在相同或等同理解的范围内被 实施,如成像波长范围变化,图像传感器变化,LED照明光源变化,光学滤波器变 化,自动聚焦光学成像透镜变化,光路变换,器件替代也应被等同理解的。

作为举例,本发明描述的具体实施例的LED照明光源可见光波长辐射,也可利 用移动终端自身具备的显示屏代替,如LCD显示屏具有可调亮度的RGB背光光源, 或自身具有RGB辐射的有机物发光OLED。

更进一步的举例,光学滤波器控制驱动器可通过安装手动控制器如手动切换器 等同替代。

最后,还需要注意的是,以上列举的仅是本发明的若干个具体实施例。显然, 本发明不限于以上实施例,还可以有许多变形。本领域的普通技术人员能从本发明 公开的内容直接导出或联想到的所有变形,均应认为是本发明的保护范围。

去获取专利,查看全文>

相似文献

  • 专利
  • 中文文献
  • 外文文献
获取专利

客服邮箱:kefu@zhangqiaokeyan.com

京公网安备:11010802029741号 ICP备案号:京ICP备15016152号-6 六维联合信息科技 (北京) 有限公司©版权所有
  • 客服微信

  • 服务号