使用相位差方法进行焦点检测的焦点检测设备和摄像设备

摘要

本发明提供一种使用相位差方法进行焦点检测的焦点检测设备和摄像设备。该焦点检测设备能够通过进行运算以检测各分割PD的饱和，从而估计包括在分割PD的和信号中的、多个分割PD各自的信号。针对具有共享一个微透镜的多个PD的每一单位像素单元，检测以非破坏性方式从PD中的一个PD所读出的像素信号的饱和。基于第一亮度信号以及通过相加从PD输出的信号所获得的和像素信号，估计从PD中的另一PD所输出的另一像素信号。检测所估计出的像素信号的饱和，并且生成第二亮度信号。基于第一和第二亮度信号，计算光学单元的离焦量。

说明书

技术领域

本发明涉及一种通过使用具有共享微透镜的多个光电转换器的摄像装 置而获得光瞳分割图像，从而使用相位差方法进行焦点检测的焦点检测设备 和摄像设备，尤其涉及一种检测光电转换器的饱和的焦点检测设备和摄像设 备。

背景技术

作为用于摄像设备的焦点检测方法，已知一种将与一个微透镜相对应 的、构成固态摄像装置的一个像素的光电转换器(以下称为“PD”)分割成多个 PD的技术。例如，提出这样一种方法，在该方法中，共享一个微透镜的两个 PD(以下称为“分割PD”)获得通过光瞳分割所获得的各个图像信号以使用相 位差方法进行焦点检测处理，并且与此并行，将来自这两个分割PD的输出的 和作为一个像素输出进行处理，以获得用于摄像的图像信号(参考日本特开 2001-83407)。

还提出了这样一种技术，为了提高上述分割像素结构的感光度特性，该 技术以非破坏性方式读出分割PD中的一个分割PD的电荷，然后读出这两个 分割PD的输出的和，并且通过运算来估计分割PD中另一个分割PD的像素值 (参考日本专利4691930)。

在相位差运算中，可以通过使用亮度信号进行运算，获得与被摄体颜色 无关的相关运算结果。此外，使用日本专利4691930所述技术，可以提高感光 度特性。

然而，根据日本专利4691930所述技术，由于通过在以非破坏性方式对 一部分分割PD进行读出之后读取来自所有分割PD的输出的和来计算差值， 所以需要用于提供所读出的分割像素之间的输出信号的定时的延迟部件。在 这种情况下，针对各个颜色设置延迟部件，这将导致电路大小增大。在用于 避免该问题的方法之一中，考虑预先将来自各PD的信号转换成亮度成分信 号、然后将其输入至延迟部件的方法，并且该方法节省了延迟部件，而且提 高了焦点检测精度。

顺便提及，已知这样一个特性，当在日本特开2001-83407和日本专利 4691930所述的分割PD中发生饱和时，与饱和量相对应的电荷可能泄漏至相 邻的分割PD。由于该特性，位于与发生饱和的分割PD相同的微透镜下方的 分割PD的信号，因为由饱和所引起的电荷泄漏而导致相位对比度图像崩溃。

为了避免该问题，希望在焦点检测处理之前针对各分割PD检测饱和， 并且进行考虑饱和的焦点检测处理。然而，在这种情况下，在使用将各分割 PD的信号预先转换成亮度成分信号的上述结构时，通过其他亮度成分信号之 间的运算来计算亮度成分信号，因此难以获悉与所计算出的亮度成分信号相 对应的各分割PD的原始输出信号。

发明内容

本发明提供一种能够通过进行运算来估计包括在分割PD的和信号中 的、多个分割PD各自的信号，从而检测各分割PD的饱和的焦点检测设备和 摄像设备。

因此，本发明的第一方面，提供一种焦点检测设备，包括：固态摄像装 置，其具有多个单位像素单元的阵列，其中每个单位像素单元具有共享一个 微透镜的多个光电转换器；第一饱和检测单元，用于针对每个单位像素单元， 检测以非破坏性方式从所述多个光电转换器中的一个光电转换器所读出的像 素信号的饱和；第一亮度信号生成单元，用于根据来自所述第一饱和检测单 元的第一输出信号，生成第一亮度信号；估计单元，用于基于所述第一亮度 信号、以及通过从所述多个光电转换器相加读出信号而获得的和像素信号， 估计从所述多个光电转换器中的另一光电转换器所输出的另一像素信号；第 二饱和检测单元，用于检测所述估计单元所估计出的另一像素信号的饱和； 第二亮度信号生成单元，用于根据来自所述第二饱和检测单元的第二输出信 号，生成第二亮度信号；以及焦点检测处理单元，用于基于所述第一亮度信 号和所述第二亮度信号，计算对所述固态摄像装置所设置的光学系统的离焦 量。

因此，本发明的第二方面，提供一种摄像设备，包括：焦点检测设备， 其具有：固态摄像装置，其具有多个单位像素单元的阵列，其中每个单位像 素单元具有共享一个微透镜的多个光电转换器；第一饱和检测单元，用于针 对每个单位像素单元，检测以非破坏性方式从所述多个光电转换器中的一个 光电转换器所读出的像素信号的饱和；第一亮度信号生成单元，用于根据来 自所述第一饱和检测单元的第一输出信号，生成第一亮度信号；估计单元， 用于基于所述第一亮度信号、以及通过从所述多个光电转换器相加读出信号 而获得的和像素信号，估计从所述多个光电转换器中的另一光电转换器所输 出的另一像素信号；第二饱和检测单元，用于检测所述估计单元所估计出的 另一像素信号的饱和；第二亮度信号生成单元，用于根据来自所述第二饱和 检测单元的第二输出信号，生成第二亮度信号；以及焦点检测处理单元，用 于基于所述第一亮度信号和所述第二亮度信号，计算对所述固态摄像装置所 设置的光学系统的离焦量；透镜组，用于在所述焦点检测设备所具有的固态 摄像装置上形成光学图像；以及控制单元，用于基于从所述焦点检测设备所 具有的焦点检测处理单元所输出的离焦量，驱动控制所述透镜组。

根据本发明，通过进行运算来估计包括在分割PD的和信号中的、多个 分割PD各自的信号，从而检测各分割PD的饱和，并且这能够进行良好的焦 点检测。

通过(以下参考附图)对典型实施例的说明，本发明的其他特征将显而易 见。

附图说明

图1是示意性示出根据本发明实施例的主要与摄像设备中的焦点检测设 备有关的部分的框图。

图2是示意性示出构成图1中的固态摄像装置的单位像素单元的结构的 平面图。

图3是示意性示出图1中的A图像亮度信号生成单元的电路结构的框图。

图4是示出用于计算图1中的摄像设备中的B图像像素的亮度成分信号 的方法的时序图。

图5是示出图1中的B图像亮度信号计算单元的电路结构、并详细示出B 图像亮度信号计算单元所进行的信号处理的图。

图6是示出图1中的B图像信号估计单元的电路结构、并详细示出B图像 信号估计单元所进行的信号处理的图。

图7A～7C是示意性示出使用图2中的分割PD的像素值的调焦操作的 图。

图8是示出在图1中的摄像设备进行拍摄操作时CPU如何控制整个系统 的流程图。

图9是在图8中的步骤S801所进行的实时取景操作的流程图。

图10是示出图1中的摄像设备所具有的B图像信号估计单元的变形例的 电路结构、并详细示出B图像信号估计单元的变形例所进行的信号处理的图。

图11A～11C是示出通过图1中的摄像设备所具有的B图像信号估计单元 估计B图像信号的例子的第一图。

图12A～12D是示出通过图1中的摄像设备所具有的B图像信号估计单 元估计B图像信号的例子的第二图。

具体实施方式

参考示出本发明的实施例的附图，详细说明本发明。

图1是示意性示出根据本发明第一实施例的主要与摄像设备100中的焦 点检测设备有关的部分的框图。摄像设备100具有光学单元101，并且基于来 自稍后说明的驱动控制单元116的输出而驱动光学单元101，其中，由包括用 于调节焦点的调焦透镜的光学透镜、快门、光圈和透镜控制器等构成光学单 元101。通过光学单元101，在固态摄像装置102的表面上形成被摄体的光学图 像。固态摄像装置102具有稍后说明的单位像素单元的二维矩阵，并且通过光 学单元101所具有的快门来控制对固态摄像装置102的曝光量。

现参考图2，说明固态摄像装置102中的单位像素单元。图2是示意性示 出构成固态摄像装置102的单位像素单元的结构的平面图。构成固态摄像装置 102的单位像素单元1具有下面的结构：将未示出的颜色滤波器设置在一个微 透镜2下方，并且将分割PD1a和1b(两个光电转换器)设置在颜色滤波器下方。 分割PD1a和1b经由它们共享的同一微透镜2捕获入射光。根据它们的位置， 分割PD1a和1b可以作为通过光瞳分割所获得的A图像像素和B图像像素来被 处理。在固态摄像装置102的Bayer阵列中，重复配置单位像素单元1。

可以从共享同一微透镜2的分割PD1a和1b读出累积电荷并进行相加，并 且，还可以以非破坏性方式选择性地从各分割PD1a和1b读出累积电荷。在本 实施例中，首先进行来自固态摄像装置102的水平方向上的一个行的A图像像 素信号的非破坏性读出，即，来自分割PD1a的分割像素信号的非破坏性读出。 随后，进行来自固态摄像装置102的同一行上的A图像像素和B图像像素的和 信号，即，来自分割PD1a和1b的单位像素信号的读出。应该注意，通过图1 中的CPU115控制来自固态摄像装置102的这些信号的读出。

A/D转换单元103将作为从固态摄像装置102输出的电荷信号的模拟信 号转换成数字信号(以下称为“读出像素信号117”)，并且将读出像素信号117 输出至信号分割单元104。信号分割单元104判断读出像素信号117的类型。当 读出A图像像素时，信号分割单元104将作为A图像像素的像素信号的A图像 信号118，输出至作为第一饱和检测单元的A图像饱和检测单元105，并且当 读出摄像像素时，信号分割单元104将作为摄像像素的像素信号的A＋B图像 信号119输出至B图像亮度信号计算单元108。

A图像饱和检测单元105判断A图像信号118是否达到了预定饱和水平， 向A图像信号118添加饱和位，然后将A图像信号118输出至作为第一亮度信号 生成单元的A图像亮度信号生成单元106。此时，当输入像素达到了饱和水平 时，判断为输入像素是饱和像素，并且向像素信号的MSB(最高有效位)或 LSB(最低有效位)添加饱和位“1”。应该注意，通过处理像素信号的一部分作 为饱和位，可以代替添加饱和位，另外，极性没有限制。

A图像亮度信号生成单元106将从A图像饱和检测单元105所接收到的信 号转换成亮度信号Y的成分信号，并且将成分信号输出至延迟线107。这里参 考示出A图像亮度信号生成单元106的电路结构的图3的框图，说明输入构成 水平方向上的第一行的RA和GA的情况下的电路操作。应该注意，稍后说明 的RA、GA和BA表示各个分割像素信号，也就是说，从位于各自具有红色、 绿色和蓝色颜色滤波器的微透镜下方的A图像分割PD、以非破坏性方式所读 出的红色、绿色和蓝色的A图像像素信号。

在水平方向上向A图像亮度信号生成单元106连续输入RA和GA。这样输 入的RA和GA中的一个直接输出至乘法单元302，并且另一个经由用于提供定 时的触发器301输出至乘法单元303。乘法单元302和303将RA和GA乘以预定 系数K1和K2，并且将结果输出至加法单元304，其中，加法单元304对它们进 行相加以生成A图像像素的亮度成分信号，然后将该亮度成分信号输出至后 级的延迟线107。

此时，将来自加法单元304的输出输入至多路复用器305。

将来自加法单元304和后级的寄存器306的信号输入至多路复用器305。 另外，多路复用器305使用在水平方向像素计数器(未示出)表示偶数时所输出 的信号(Even)作为选择控制输入信号，并且基于选择控制输入信号，选择性 地输出输入信号中的一个。当Even信号有效时，多路复用器305选择来自加 法单元304的输出信号、并且输出该信号，并且当Even信号无效时，多路复 用器305选择来自寄存器306的输出信号，并且输出该信号。因此，当Even信 号有效时，更新寄存器306的值，并且当Even信号无效时，通过迭代寄存器 306的值(紧挨着的之前所更新的值)来保持数据。

应该注意，仅说明了水平方向上第一行上的像素信号的情况下的操作， 但是当在水平方向上的第二行上输入GA和BA时(参考图4)，尽管系数K1和K2 的值变化，但是进行相同处理。

延迟线107根据作为从信号分割单元104至B图像亮度信号计算单元108 的摄像像素信号的A＋B图像信号119的输入定时，将从A图像亮度信号生成 单元106输出的A图像亮度信号输出至B图像亮度信号计算单元108。以下将从 延迟线107输出的信号称为“YA成分信号120”。

B图像亮度信号计算单元108和B图像信号估计单元109是根据本实施例 的焦点检测设备的特征组件，并且基于从延迟线107所接收到的YA成分信号 120和从信号分割单元104所接收到的A＋B图像信号119，估计B图像像素信 号。接着，详细说明B图像亮度信号计算单元108和B图像信号估计单元109。

如图1所示，基于从延迟线107所接收到的YA成分信号120和从信号分割 单元104所接收到的A＋B图像信号119，B图像亮度信号计算单元108计算并 输出YB成分信号121和A＋B图像亮度成分信号122。应该注意，YB成分信号 121是B图像信号的亮度信号Y的成分信号，并且A＋B图像亮度成分信号122 是A图像像素的亮度成分信号和B图像像素的亮度成分信号的和信号。

现参考图4的时序图，说明摄像设备100的用于计算YB成分信号121的方 法。应该注意，在图4中，示出水平方向上的第一行和第二行，但是对于第三 行和随后的行同样进行相同的计算处理。

如RA、GA和BA一样，R(A＋B)、G(A＋B)和B(A＋B)表示红色、绿色 和蓝色等各个颜色的A图像像素和B图像像素的和像素信号。在图4的上部分， 示出从A/D转换单元103输出的读出像素信号117。如上所述，固态摄像装置 102具有共享同一微透镜2的、分别与A和B图像像素相对应的两个分割PD1a 和1b，并且每一微透镜2具有颜色滤波器，其中，该颜色滤波器具有Bayer图 案。对于YB成分信号121的计算，使用作为A和B图像像素的亮度信号的红色 -绿色成分和信号的Y(A+B)(R,G)、以及作为A和B图像像素的亮度信号的绿色 -蓝色成分和信号的Y(A+B)(G,B)。根据R(A+B)和G(A+B)获得Y(A+B)(R,G)， 并且根据G(A+B)和B(A+B)获得Y(A+B)(G,B)。

作为以上参考图3所述的A图像像素的亮度信号的、图4的中间部分所示 的YA成分信号120，包括作为红色-绿色成分和信号的YA(R,G)、以及作为绿 色-蓝色成分和信号的YA(G,B)。根据RA、GA(红色和绿色的A图像像素信号) 获得YA(R,G)，并且根据GA、BA(绿色和蓝色的A图像像素信号)获得YA(G,B)。

作为B图像像素的亮度信号的YB成分信号121，包括作为红色-绿色成分 和信号的YB(R,G)、以及作为绿色-蓝色成分和信号的YB(G,B)。通过从 Y(A+B)(R,G)减去YA(R,G)获得YB(R,G)，并且通过从Y(A+B)(G,B)减去 YA(G,B)获得YB(G,B)。

具体说明计算YB成分信号121的处理。特别地，通过固态摄像装置102 的水平方向上的第一行的非破坏性读出，读出RA和GA。将这样读出的RA和 GA转换成亮度信号Y的成分信号，以用于焦点检测从而生成YA(R,G)。当完 成非破坏性读出时，读出R(A＋B)和G(A＋B)，作为来自构成固态摄像装置102 的分割PD1a和1b的输出的和，然后作为R(A+B)和G(A+B)的和的结果，获得 Y(A+B)(R,G)。此时，为了通过进行运算而获得YB(R,G)，仅在一个行延迟之 后，从Y(A+B)(R,G)减去YA(R,G)。同样，将颜色滤波器从R、G改变成G、B， 并且针对水平方向上的第二行进行处理。

接着参考示出B图像亮度信号计算单元108的电路结构的图5，说明通过 B图像亮度信号计算单元108所进行的信号处理。在下面的说明中，假定输入 构成水平方向上的第一行的RA和GA。

将从延迟线107输出的YA成分信号120的YA(R,G)、以及从信号分割单元 104输出的A＋B图像信号119的R(A+B)和G(A+B)，输入至B图像亮度信号计 算单元108。YA(R,G)分支至被直接输出至后级的路径和被输入至加法单元 501的路径。R(A+B)和G(A+B)分支至被直接输出至后级的路径和被输入至A ＋B图像亮度信号生成单元502的路径。

A＋B图像亮度信号生成单元502具有与以上参考图3所述的A图像亮度 信号生成单元106相同的电路结构，并且生成并输出作为在水平方向上连续输 入的R(A+B)和G(A+B)的亮度成分信号的Y(A+B)(R,G)。A＋B图像亮度信号 生成单元502所输出的Y(A+B)(R,G)分支至被直接输出至后级的B图像信号估 计单元109的路径和被输入至加法单元501的路径。加法单元501根据下面的 [公式1]计算作为YB成分信号121的一部分的YB(R,G)，并且将所计算出的 YB(R,G)输出至后级的B图像信号估计单元109。

YB(R,G)=Y(A+B)(R,G)-YA(R,G)…[公式1]

因此，将包括通过A＋B图像亮度信号生成单元502所生成的 Y(A+B)(R,G)的A＋B图像亮度成分信号122、以及包括通过加法单元501所计 算出的YB(R,G)的YB成分信号121，输出至后级的B图像信号估计单元109。

应该注意，省略对将水平方向上的第二行上的YB(G,B)、G(A+B)和 B(A+B)输入至B图像亮度信号计算单元108的情况的详细说明，但是在这种情 况下，以与用于水平方向上的第一行相同的处理，计算Y(A+B)(G,B)和 YB(G,B)。

B图像信号估计单元109通过进行预定运算，估计B图像像素的像素值。 现参考示出B图像信号估计单元109的电路结构的图6，说明通过B图像信号估 计单元109所进行的信号处理。这里假定将图5所示的水平方向上的第一行上 的Y(A+B)(R,G)和YB(R,G)输入至B图像信号估计单元109。

将YB成分信号121的YB(R,G)、A＋B图像亮度成分信号122的 Y(A+B)(R,G)、以及作为摄像信号的A＋B图像信号119的R(A+B)和G(A+B)， 输入至B图像信号估计单元109。将Y(A+B)(R,G)、R(A+B)和G(A+B)输入至比 计算单元602。比计算单元602基于下面的[公式2]和[公式3]计算比K3和比K4， 并且输出它们。

K3=R(A+B)/Y(A+B)(R,G)…[公式2]

K4=G(A+B)/Y(A+B)(R,G)…[公式3]

比K3是R像素信号与构成A＋B图像亮度成分信号122的R像素(红色颜 色滤波器下方的像素)和G像素(绿色颜色滤波器下方的像素)的信号成分的 比。同样，比K4是G像素信号与构成A＋B图像亮度成分信号122的R像素和G 像素的信号成分的比。

将所计算出的比K3和K4输出至乘法单元601，并且根据下面的[公式4] 和[公式5]，将YB(R,G)乘以比K3和K4，从而估计分割PD中的B图像的非破坏 性读出像素，即作为红色和绿色B图像像素信号的RB和GB。将包括根据[公 式4]和[公式5]所计算出的RB和GB的B图像信号123，输出至作为第二饱和检 测单元的B图像饱和检测单元110。

YB(R,G)×K3=RB…[公式4]

YB(R,G)×K4=GB…[公式5]

应该注意，以相同方式，根据YB成分信号121的YB(G,B)、A＋B图像亮 度成分信号122的Y(A＋B)(G,B)、以及A＋B图像信号119的G(A+B)和B(A+B)， 估计作为绿色和蓝色B图像像素信号的GB和BB。

现参考图11A～11C和图12A～12D，说明估计B图像信号123的例子。在 图11A～11C和图12A～12D中，水平轴表示空间位置，并且垂直轴表示信号 输出值。图11A是示出存在固态摄像装置102的水平方向上的第一行的区域中 的各种信号的原始信号值的图。各种信号的详细情况如图11A所示。

图11B是示出从图11A所提取的、包括A图像成分的信号的图，并且“d1” 表示GA(绿色A图像像素信号)达到了饱和水平(分割PD1a中累积的电荷已饱 和)的区间(饱和区间)。图11C是示出从图11A所提取的、包括B图像成分的信 号的图，并且“d2”表示GB(绿色B图像像素信号)达到了饱和水平(分割PD1b 中累积的电荷已饱和)的区间(饱和区间)。

图12A是相互叠加根据摄像设备100的结构可以获得的信号和与饱和区 间d1及d2有关的信息的图。根据摄像设备100的结构，可以通过A图像饱和检 测单元105确定作为A图像像素信号的GA的饱和区间d1。然而，对于B图像， 计算作为亮度成分信号的YB成分信号121，因此对于作为B图像像素信号的 GB的饱和区间d2，不能获得作为B图像像素信号的RB和GB。另外，由于YB 成分信号121没有达到摄像像素饱和水平，所以同样不能检测到RB和GB的饱 和。

图12B是示出从图11A所提取的Y(A+B)、R(A+B)和G(A+B)、并且分别 通过K3(x)和K4(x)表示特定点x处R(A+B)和G(A+B)与Y(A+B)的比的图。应该 注意，可以分别使用上述[公式2]和[公式3]获得K3(x)和K4(x)。

图12C是绘制如上所述分别使用[公式4]和[公式5]所计算出的、B图像的 来自分割PD1b的估计信号RB’和GB’的图。在图12C中，“d3”表示RB’或GB’ 达到了分割像素饱和水平的区间(饱和区间)。通过将分割PD1b的饱和水平应 用于稍后说明的B图像饱和检测单元110的阈值，可以检测到饱和区间d3。

图12D是相互叠加图11A～11C和图12A～12D中的各种信号和饱和区间 的图。饱和区间d3是与原始GB信号的饱和区间d2相同的区间，并且这意味着 可以获得满意的饱和检测结果。

将通过B图像信号估计单元109所计算出的B图像信号123输入至B图像 饱和检测单元110。B图像饱和检测单元110判断所接收到的B图像信号123是 否达到了预先确定的预定饱和水平。当所接收到的B图像信号123达到了该饱 和水平时，B图像饱和检测单元110判断为这是饱和像素，向像素信号的MSB 或LSB添加作为饱和位的1，然后将作为结果的像素信号输出至作为第二亮度 信号生成单元的B图像亮度信号生成单元111。应该注意，通过处理像素信号 的一部分作为饱和位，可以代替添加饱和位，另外，极性没有限制。

B图像亮度信号生成单元111将从B图像饱和检测单元110所接收到的信 号转换成作为B图像像素的亮度成分信号的YB成分信号124。应该注意，B图 像亮度信号生成单元111的电路结构和由B图像亮度信号生成单元111所进行 的处理的详细情况，与以上参考图3所述的A图像亮度信号生成单元106的电 路结构和由A图像亮度信号生成单元106所进行的处理的详细情况相同，因此 这里省略对其的详细说明。

将通过B图像亮度信号计算单元108输出的YA成分信号120和从B图像 亮度信号生成单元111输出的YB成分信号，输入至焦点检测处理单元112。焦 点检测处理单元112根据由与共享一个微透镜2的分割PD1a和1b相对应的A 图像像素和B图像像素所构成的A图像和B图像的亮度信号，获得离焦量，并 且将所获得的离焦量输出至CPU115(参考图1)。

现参考图7A～7C，说明使用A图像和B图像的示例性距离测量信息获得 操作。图7A～7C是示意性示出使用分割PD1a和1b的像素值的调焦操作的图。 固态摄像装置102由多个单位像素单元P的阵列构成，并且各单位像素单元P 的结构如以上参考图2所述。也就是说，每一单位像素单元P(图7A～7C示出 13个像素单元P1～P13)均由与共享一个微透镜的分割PD1a和1b相对应的分 割像素a和b构成。众所周知，一对分割像素a和b是通过使用微透镜作为出射 光瞳的光瞳分割所获得的像素。

对于距离测量，在列方向(或行方向)上将来自像素a和b的A像素输出和B 像素输出组合在一起以生成A图像和B图像，作为来自相同颜色的单位像素单 元的输出，并且获得它们作为数据。通过使用下面的[公式6]的相关运算，获 得相应点之间的偏移量C。

C=Σ|YAn-YBn|…[公式6]

这里，(n)表示水平方向上配置的微透镜的数量。对在相应像素相对于 YBn偏移时所获得的值进行标绘，并且在获得最小偏移量C时，获得调焦位 置。

图7A示出来自被摄体图像的光束以角度α(a)会聚的聚焦状态，并且摄像 光学系统在单位像素单元P7中共享微透镜的分割PD上形成图像，从而使得A 图像像素组和B图像像素组大体相互相对应。此时，通过相关运算所获得的A 图像像素组和B图像像素组之间的图像偏移量d(a)大体为0。

图7B示出来自被摄体图像的光束以大于角度α(a)的角度α(b)会聚、因此 焦点在被摄体后面(所谓的后焦点)的状态。此时，摄像光学系统在例如A图像 像素的单位像素单元P5的分割像素和B图像像素的单位像素单元P9的分割像 素上形成图像。在这种情况下，在通过相关运算所获得的A图像像素组和B 图像像素组之间存在图像偏移d(b)。

图7C示出来自被摄体图像的光束以小于角度α(a)的角度α(c)会聚、因此 焦点在被摄体前面(所谓的前焦点)的状态。此时，摄像光学系统在例如针对A 图像像素的单位像素单元P9的分割像素和针对B图像像素的单位像素单元P5 的分割像素上形成图像。在这种情况下，在与图7B所示的后焦点的情况下的 图像偏移方向相反的方向上，存在图像偏移，并且通过相关运算所获得的A 图像像素组和B图像像素组之间的图像偏移量d(c)的绝对值，与后焦点情况下 的图像偏移量d(b)的绝对值大体相等。也就是说，在聚焦状态下A图像像素组 和B图像像素组看见相同被摄体，但是在后焦点的状态下和在前焦点的状态 下，它们看见偏移特定图像偏移量的被摄体。

因此，为了实际进行摄像光学系统的调焦操作，基于所获得的图像偏移 量和基线长度，使用众所周知的技术获得离焦量，从而驱动摄像系统以聚焦 于被摄体。应该注意，在进行众所周知的相关运算时，例如，可以使用在获 得调焦量时不使用根据设置了饱和位的像素值所计算出的值的方法、以及分 配权重以降低可靠性的方法，但是本发明不局限于这些方法。

基于从焦点检测处理单元112输出的离焦量，CPU115获得与光学单元 101中所包括的调焦透镜有关的驱动信息，并且如图1所示，将该驱动信息输 出至驱动控制单元116。应该注意，CPU115控制摄像设备100的整个系统。 基于从CPU115输出的控制信号，驱动控制单元116输出与包括在光学单元 101中的调焦透镜和快门等的有关的驱动信息。该驱动信息是基于通过焦点检 测处理单元112所计算出的离焦量的移动量。

如图1所示，图像处理单元113对作为从B图像信号估计单元109所输入 的摄像信号的A＋B图像信号119进行预定数字信号处理，并且经由DRAM(未 示出)将作为结果的信号输出至显示单元114。应该注意，预定数字处理的例 子包括缺陷像素校正、AE(自动曝光)、AF(自动调焦)、白平衡调整、伽马调 整、降噪处理和同步化处理。显示单元114经由DRAM(未示出)将通过图像处 理单元113所创建的图像数据(正拍摄的图像)显示在液晶面板等上。

接着参考图8的流程图，说明在摄像设备100正进行拍摄操作时CPU115 如何控制整个系统。首先，CPU115检测用于接通系统电源的未示出的主开 关(SW)的状态(步骤S800)。当主SW处于ON(接通)时(步骤S800为“是”)，CPU 115进入步骤S801的处理，并且当主SW处于OFF(断开)时(步骤S800为“否”)， CPU115在步骤S800处于待机。

在步骤S801，CPU115进行实时取景操作，并且在此后，检测作为处于 释放开关的第一阶段的开关的开关SW1的状态(步骤S802)。应该注意，开关 SW1是所谓的用于聚焦于被摄体的开关。稍后参考图9详细说明实时取景操 作。

当开关SW1处于ON时(步骤S802为“是”)，CPU115进入步骤S803的处 理，以进行主拍摄之前的拍摄待机操作，并且当开关SW1处于OFF时(步骤 S802为“否”)，CPU115返回至步骤S800的处理。

在步骤S803，CPU115基于通过实时取景操作所获得的图像信息，根据 通过曝光设置单元(未示出)预先设置的曝光校正值来确定曝光条件，并且向 驱动控制单元116输出光圈值和快门速度(曝光时间)。然后，CPU115通过基 于通过实时取景操作所获得的离焦量而偏移驱动控制单元116的调焦透镜的 位置，聚焦于被摄体(AF操作)(步骤S804)。此后，CPU115检测作为处于释放 开关的第二阶段的开关的开关SW2的状态(步骤S805)。应该注意，开关SW2 是用于通过驱动快门等进行拍摄操作的开关。

当开关SW2处于ON时(步骤S805为“是”)，CPU115进入步骤S806的处理 以进行主拍摄，并且当开关SW2处于OFF时(步骤S805为“否”)，CPU115返回 至步骤S801的处理。在步骤S806，CPU115通过控制摄像设备100的整个系统， 进行主拍摄操作，此后，返回至步骤S805的处理。

应该注意，在主拍摄操作中，首先，进行固态摄像装置102的电荷清除 操作和电荷累积开始操作，并且基于在步骤S803所确定的曝光条件，经由驱 动控制单元116控制光学单元101以打开快门。然后，开始固态摄像装置102 的主拍摄图像的曝光，并且以在步骤S803所确定的快门速度进行曝光。当关 闭快门以完成固态摄像装置102中的电荷累积时，从分割PD读出电荷的和。 经由A/D转换单元103、信号分割单元104和图像处理单元113，将从固态摄像 装置102读出的电荷输出至以SD卡等为代表的存储卡(未示出)。

接着参考图9的流程图，说明步骤S801的实时取景操作。在实时取景操 作中，首先，CPU115提供用于固态摄像装置102的电荷清除控制(步骤S900)， 此后，通过提供用于固态摄像装置102的实时取景图像曝光控制，开始电荷累 积(步骤S901)。然后，CPU115判断是否经过了所设置的曝光时间(步骤S902)， 并且当没有经过曝光时间时(步骤S902为“否”)，CPU115返回至进行曝光的步 骤S901的处理。

当经过了曝光时间时(步骤S902为“是”)，CPU115使用固态摄像装置102 的电子快门进行电荷累积终止处理(步骤S903)。在完成步骤S903之后，CPU 115从固态摄像装置102读出电荷，并且进行预定信号处理以执行以上参考图1 和3～6所述的信号处理(步骤S904)。然后，CPU115读出焦点检测处理单元112 在步骤S904所计算出的离焦量(步骤S905)，并且基于来自图像处理单元113的 输出，将用于实时取景的图像输出至诸如液晶面板等的显示单元114(步骤 S906)。

如上所述，根据本实施例，通过使用利用运算所获得的像素值检测各分 割PD的饱和，获得离焦量。这使得能够考虑相位对比度图像的崩溃来进行焦 点检测。

在上述第一实施例中，基于各颜色成分与作为A和B图像像素的亮度信 号的和的Y(A＋B)的比，估计分割PD的B图像像素信号。另一方面，在第二 实施例中，基于A图像信号和B图像信号与Y(A＋B)的含量比，估计从分割PD 输出的B图像像素信号。应该注意，下面仅说明作为与第一实施例的不同点 的B图像信号估计单元，并且省略对重复部分的说明。

图10是示出B图像信号估计单元109A的电路结构、并示出由B图像信号 估计单元109A所进行的信号处理的详细情况的图。这里假定将水平方向上的 第一行上的Y(A+B)(R,G)和YB(R,G)输入至B图像信号估计单元109A。将作为 B图像的亮度信号中的红色和绿色成分信号的和信号的YB(R,G)、作为A和B 图像像素的亮度信号中的红色和绿色成分信号的和信号的Y(A+B)(R,G)、以 及作为A和B图像像素的用于以红色和绿色进行摄像的和像素信号的R(A+B) 和G(A+B)，输入至B图像信号估计单元109A。

将YB(R,G)和Y(A+B)(R,G)输入至比计算单元1001，并且比计算单元 1001根据下面的[公式7]获得YB(R,G)与Y(A+B)(R,G)的比K5，并且将比K5输 出至乘法单元1002。

K5=YB(R,G)/Y(A+B)(R,G)…[公式7]

根据下面的[公式8]和[公式9]，乘法单元1002将R(A＋B)和G(A＋B)各自 乘以比K5以估计并输出RB和GB。

RB=R(A+B)×K5…[公式8]

GB=G(A+B)×K5…[公式9]

将使用[公式8]和[公式9]所估计出的RB和GB输出至后级的B图像饱和 检测单元110，并且进行与第一实施例中相同的处理。因此，在第二实施例中， 同样可以获得与第一实施例的相同的效果。

在上述实施例中，在共享一个微透镜2的分割PD的数量是2(分割PD1a 和1b)的情况下，检测B图像像素信号的饱和。然而，共享一个微透镜的分割 PD的数量没有限制，而且即使当共享一个微透镜的分割PD的数量是3个以上 时，也可以进行相同处理。此外，上述实施例中所使用的运算方法仅是示例 性的，而且例如，当固态摄像装置102具有不同结构时，根据结构改变运算方 法，并且可以进行相同处理。

其他实施例

还可以利用读出并执行记录在存储器装置中的程序以进行上述实施例 的功能的系统和设备的计算机(或者CPU或MPU等装置)或者通过下面的方法 实现本发明的各方面，其中，通过系统或设备的计算机例如读出并执行记录 在存储器装置上的程序来进行上述实施例的功能，以进行上述方法的步骤。 为此，例如，可以通过网络或者通过用作存储器装置的各种类型的记录介质 (例如计算机可读介质)将该程序提供给计算机。

尽管参考典型实施例说明了本发明，但是应该理解，本发明不局限于所 公开的典型实施例。所附权利要求书的范围符合最宽的解释，以包含所有这 类修改、等同结构和功能。

本申请要求2012年5月7日提交的日本申请2012-105990的优先权，其全 部内容通过引用包含于此。