皮肤分析方法、皮肤分析装置以及皮肤分析装置的控制方法

摘要

本发明提供一种控制皮肤分析装置的控制方法，对具有获取被验人的脸部图像的相机、显示所述被验人的脸部图像的显示器、以及计算机的皮肤分析装置进行控制，使所述皮肤分析装置的所述计算机获取所述被验人的脸部图像，根据所述脸部图像上的位置，分别决定所述脸部图像的多个皮肤区域中的目标的提取基准，从所述脸部图像中提取满足所决定的所述提取基准的所述目标，使所提取到的所述目标显示于所述皮肤分析装置的显示器。

说明书

技术领域

本发明涉及皮肤分析方法、皮肤分析装置以及皮肤分析装置的控制方 法。

背景技术

当前，进行着根据拍摄皮肤的图像，对皮肤的状态进行分析，并对分 析结果进行可视化以及定量化。因此，需要根据皮肤图像来提取皮肤表面 存在的分析对象。

专利文献1公开有以下技术：通过对所得到的皮肤图像进行包括十字 二值化处理以及/或者短直线匹配处理的图像处理，进行肌理以及/或者皱 纹的提取。

专利文献2公开有以下技术：变换各像素的亮度值，以使所拍摄到的 图像的亮度值的偏差成为给定值以上，并对各像素进行二值化，通过对二 值化后的黑像素和给定的短直线进行匹配来提取皮沟。

非专利文献1公开有以下技术：根据局部特征而预先确定皮肤的边缘 方向，通过使用具有预先确定的方位的Gabor滤波器来进行过滤处理，以 提取皱纹。

现行技术文献

专利文献1：国际公开第09/142069号

专利文献2：专利第4909686号

非专利文献

非专利文献1：Culaetal.，“Assessingfacialwrinkles：automatic detectionandquantification”，SkinResearchandTechnology2013

发明内容

所要解决的技术问题

然而，为了分析皮肤表面，需要繁琐的操作或大规模的装置，且为了 根据任意的脸部图像进行分析，而需要进一步的研究。

本申请所公开的控制皮肤分析装置的控制方法，是对具有获取被验人 的脸部图像的相机、显示所述被验人的脸部图像的显示器以及计算机的皮 肤分析装置进行控制的控制方法，使所述皮肤分析装置的所述计算机，获 取所述被验人的脸部图像；根据所述脸部图像上的位置，分别决定所述脸 部图像的多个皮肤区域中的目标的提取基准；从所述脸部图像中提取满足 所决定的所述提取基准的所述目标；使提取到的所述目标显示于所述皮肤 分析装置的显示器。

发明效果

根据本申请所公开的皮肤分析方法以及皮肤分析装置，能够对脸部整 体自动执行与用户的要求相匹配的任意的皮肤皱纹检测。

附图说明

图1是示意性表示皮肤的内部的结构的图。

图2是表示本申请的实施方式1中的皮肤分析装置的整体像的图。

图3(a)是表示控制装置302的结构的图，图3(b)是表示云服务 器307的结构的图。

图4是本申请的实施方式1中的皮肤分析装置的功能方框图。

图5是表示在本申请的实施方式1中，通过皮肤分析装置，进行皮肤 的评价的步骤的流程图。

图6(a)是表示在皮肤分析之前在显示器中显示的显示画面例的一 例的图。图6(b)是表示图像的拍摄时在显示器中显示的显示画面的一 例的图。

图7(a)、(b)、(c)是分别示意性表示根据图像上的位置来决定并提 取目标特征的途中经过的图。

图8(a)、(b)是分别表示皮肤分析之后在显示器中显示的显示画面 的一例的图。

图9(a)、(b)是分别表示显示器中显示的显示画面的一例的图。

图10(a)、(b)是分别表示显示器中显示的显示画面的一例的图。

图11本申请的实施方式2中的皮肤分析装置的功能方框图。

图12是表示在本申请的实施方式2中，通过皮肤分析装置进行皮肤 的评价的步骤的流程图。

图13(a)、(b)、(c)是分别示意性表示根据脸部的特征点来决定并 提取目标特征的途中经过的图。

图14是表示本申请的实施方式3的皮肤分析装置的整体像的图。

图15是表示本申请的实施方式3中的云服务器以及皮肤分析装置的 结构的图。

图16是本申请的实施方式3中的云服务器以及皮肤分析装置的功能 方框图。

图17表示在本申请的实施方式3中，通过皮肤分析装置进行皮肤的 评价的步骤的流程图。

图18(a)是实施方式4中的信息提供系统的整体像，图18(b)以 及图18(c)表示数据中心的结构。

图19是表示服务的类型1(自公司数据中心型云服务器)中的信息 管理系统提供的服务的整体像的图。

图20是表示服务的类型2(IaaS利用型云服务器)中的信息管理系 统提供的服务的整体像的图。

图21是表示服务的类型3(PaaS利用型云服务器)中的信息管理系 统提供的服务的整体像的图。

图22是表示服务的类型4(SaaS利用型云服务器)中的信息管理系 统提供的服务的整体像的图。

具体实施方式

(成为本发明的基础的见解)

非专利文献1所公开的技术，使用Gabor滤波器来提取用户的皮肤图 像中的皱纹(皮沟)，并根据所提取的皱纹来评价皮肤状态。在此，Gabor 滤波器，决定特定的方位，且提取向着所决定的方位刻有的皱纹。

然而，在非专利文献1所公开的技术中，从脸部图像截取给定部分， 并对所截取的图像进行评价。该图像的截取是专家进行的，因此，用户自 身无法轻松地根据脸部图像进行皮肤状态的评价。此外，在非专利文献1 所公开的技术中，是根据用户的皮肤向哪个方向显著地刻有皱纹(皮沟) 的图像的局部的特征，来决定Gabor滤波器的方位的。因此，例如，会有 如下问题：在脸部图像中用户希望评价鼻翼的皱纹时，却从脸部图像检测 出明显的法令纹等，所检测的皱纹的种类与用户希望评价的皱纹的种类不 一致。

特别是，并未研究用于满足想要根据评价皮肤状态的脸部图像上的位 置而按照每个用户来评价不同种类的皱纹这样的技术上的解决方案。

本申请发明人，想到鉴于这样的问题的新的皮肤分析方法、皮肤分析 装置以及皮肤分析装置的控制方法。本申请的皮肤分析方法、皮肤分析装 置以及皮肤分析装置的控制方法的概要如下。

控制本申请所公开的皮肤分析装置的控制方法的一个方式，是对具有 获取被验人的脸部图像的相机、显示所述被验人的脸部图像的显示器以及 计算机的皮肤分析装置进行控制的控制方法，使所述皮肤分析装置的所述 计算机，获取所述被验人的脸部图像；根据所述脸部图像上的位置，分别 决定所述脸部图像的多个皮肤区域中的目标的提取基准；从所述脸部图像 提取满足所决定的所述提取基准的所述目标；使所提取到的所述目标显示 于所述皮肤分析装置的显示器。

在本方式中，使皮肤分析装置的计算机，根据脸部图像上的位置，分 别决定脸部图像的多个皮肤区域中的目标的提取基准。因此，为了分析提 取目标的皮肤区域，不需要专家的操作(截取脸部图像)，用户仅准备脸 部图像，就能够分析以及评价皮肤区域。

此外，使计算机检测所获取到的所述脸部图像中所包含的脸部部位， 根据针对所检测到的所述脸部部位的在所述脸部图像上的相对位置来决 定所述多个皮肤区域，且决定所决定的所述多个皮肤区域中的所述目标的 提取基准。即，根据是脸部图像内的哪个位置的皮肤区域，来决定目标的 提取基准。因此，例如，通过利用脸部图像中的眼睛周围的目标、嘴周围 的目标来改变提取基准等，能够按照皮肤区域的每处以不同的提取基准来 提取目标。

在所述方式中，例如，能够根据所述相对位置，使所述多个皮肤区域 的一者中的目标的多个提取基准可选择地显示于所述显示器，在判断为选 择了所述多个提取基准之中的1个提取基准的情况下，提取满足所选择的 所述1个提取基准的所述目标，使所提取到的所述目标显示于所述显示 器。

根据所述方式，能够根据用于评价皮肤状态的脸部图像上的皮肤区域 的位置，按照每个用户来评价不同种类的皱纹。

此外，例如，在脸部图像中，即使在用户希望评价鼻翼的皱纹时，也 不会出现根据脸部图像来检测显著的法令纹等所检测的皱纹的种类与用 户希望评价的皱纹的种类不一致的情形。

在所述方式中，例如，所述目标可以是皮沟以及/或者体毛。

在所述方式中，例如，所述提取基准可以是表示所述目标的角度、粗 度、长度之中至少一者的值。

在所述方式中，例如，与所述脸部部位的相对位置，可以是眉间、眼 睛之下、外眼角、内眼角、鼻侧面、嘴角以及额头的任一者，或者也可以 是它们的组合。

在所述方式中，例如，所提取的所述目标可以与所述脸部图像重叠地 显示于所述显示器。

在所述方式中，例如，可以通过滤波处理来提取满足所决定的所述提 取基准的所述目标，且所述提取基准是在所述滤波处理中使用的滤波器的 性质。

在所述方式中，例如，可以根据与所述脸部部位和所述多个皮肤区域 的相对位置对应地存储的给定的提取基准，提取所述目标。

在所述方式中，例如，所述给定的提取基准可以存储在所述皮肤分析 装置的存储器中。

在所述方式中，例如，所述给定的提取基准可以经由网络而存储在能 够从所述皮肤分析装置进行访问的服务器中。

在所述方式中，例如，可以将选择了所述多个提取基准之中的一者的 次数，经由网络而存储在能够从所述皮肤分析装置进行访问的服务器中， 且所述给定的提取基准是根据所选择的频度来决定的。

此外，本申请所公开的皮肤评价方法的一个方式，获取被验人的脸部 图像，并根据所述脸部图像上的位置，分别决定所述脸部图像的多个皮肤 区域中的目标的提取基准，从所述脸部图像提取满足所决定的所述提取基 准的所述目标，且将所提取到的所述目标显示于显示器。

在所述方式中，例如，根据所述相对位置，使所述多个皮肤区域的一 者中的目标的多个提取基准可选择地显示于所述显示器，在判断为选择了 所述多个提取基准之中的1个提取基准的情况下，提取满足所述1个提取 基准的所述目标，将所提取到的所述目标显示于所述显示器。

在所述方式中，例如，所述目标可以是皮沟以及/或者体毛。

在所述方式中，例如，所述提取基准可以是表示所述目标的角度、粗 度、长度的任一者的值。

在所述方式中，例如，与所述脸部部位的相对位置可以是眉间、眼睛 之下、外眼角、内眼角、鼻侧面、嘴角以及额头的任一者，或者是它们的 组合。

在所述方式中，例如，可以通过滤波处理来提取满足所决定的所述提 取基准的所述目标，且所述提取基准是在所述滤波处理中使用的滤波器的 性质。

本申请所公开的控制皮肤分析装置的计算机程序的一个方式，是对具 有获取被验人的脸部图像的相机、显示所述被验人的图像的显示器、以及 计算机的皮肤分析装置进行控制的计算机程序，使所述皮肤分析装置的计 算机，获取所述被验人的脸部图像；根据所述脸部图像上的位置，分别决 定所述脸部图像的多个皮肤区域中的目标的提取基准；从所述脸部图像提 取满足所决定的所述提取基准的所述目标；使所述提取到的目标显示于所 述皮肤分析装置的显示器。

由此，例如，在按照所决定的引导而拍摄到的脸部图像中，能够根据 图像内的位置来提取不同的皮肤状态。

此外，在所述方式中，检测所获取到的所述脸部图像中包含的脸部部 位，根据针对所检测到的所述脸部部位的在所述脸部图像上的相对位置， 决定所述多个皮肤区域，且决定所决定的所述多个皮肤区域中的所述目标 的提取基准。由此，即使在用户不特别在意位置地拍摄到的脸部图像中， 也能够根据图像内所包含的脸部部位的位置来提取不同的皮肤状态。

此外，提取基准是基于按照与脸部部位的相对位置而预先确定的可更 新的数据库来决定的。由此，能够根据皮肤分析装置的大多用户所希望的 皮肤状态的倾向来进行提取。

此外，基于用户根据图像内的位置而选择的提取基准来提取目标。由 此，能够提取当前正在操作的用户所希望的皮肤状态。

因此，根据本申请的所述实施方式，能够针对脸部整体自动执行与用 户的要求相符的任意的皮肤皱纹检测。

本申请所公开的皮肤分析装置的一个方式，具有：相机，其获取被验 人的脸部图像；提取基准决定部，其根据所述脸部图像上的位置，分别决 定所述脸部图像的多个皮肤区域中的目标的提取基准；目标提取部，其从 所述脸部图像中提取满足所决定的提取基准的所述目标；和显示器，其显 示所提取的所述目标。

在所述方式中，皮肤分析装置还具有：脸部检测部，其检测所述脸部 图像中所包含的脸部部位，并根据针对所检测到的脸部部位的在所述脸部 图像上的相对位置，决定所述多个皮肤区域。

在所述方式中，皮肤分析装置还具有：提取基准选择部，其在显示器 中显示与所述多个皮肤区域分别相关的多个提取基准，并接受1个选择； 提取结果评价部，其对按照多个皮肤区域中的每个皮肤区域所提取的目标 进行评分；和通信部，其将所述提取基准选择部中的选择结果以及所述评 分发送给外部服务器。

以下说明的实施方式，都表示本发明的一个具体例。以下实施方式所 示的数值、形状、结构要素、步骤、步骤的顺序等，是一个示例，并不是 限定本发明的意思。此外，针对在以下的实施方式中的结构要素之中，表 示最上位概念的独立权利要求中未记载的结构要素，作为任意的结构要素 来说明。此外，在所有实施方式中，也能够组合各个内容。

(实施方式1)

以下，参照附图来说明本实施方式的皮肤分析装置及其控制方法。本 申请说明书的各实施方式的皮肤分析装置，拍摄被验人的脸部，提取皮肤 区域所存在的皮沟以及体毛进行显示。皮沟是指包括法令纹的各种长度、 粗度以及深度的皱纹(褶)。此外，体毛包括眉毛、睫毛、鼻下胡须以及 下巴胡须。将皮沟以及体毛统称为目标。皮肤区域，是从包括上述体毛所 覆盖的部分的皮肤整体选择的一部分。

首先，对用于拍摄被验人的脸且高精度地提取皮肤区域所存在的皮沟 以及体毛的拍摄方法进行说明。图1示意性表示人皮肤的剖面。皮肤图像 包括皮肤的斑点、皱纹、毛穴、法令纹等各种信息。如图1所示，皮肤 200包括从皮肤200的表面200S向内部0.06mm以上且0.2mm左右深度 的范围的表皮200A、以及比它更靠内部存在的真皮200B。皮肤的斑点、 皱纹、毛穴，皮肤的形状以及它们在皮肤200中存在的深度位置是不同的。 因此，若获取来自皮肤的不同深度的图像，进行基于形状的识别，则能够 选择性地提取皮沟。

来自皮肤的不同深度的图像的信息，通过使用偏振光或颜色分量来得 到。例如，在将与给定的方向平行的直线偏振光作为光源来拍摄皮肤时， 直线偏振光会在皮肤的表面200S维持偏振方向地进行反射。另一方面， 在表皮200A的内部反射的直线偏振光，由于散射而偏振方向散乱地从表 皮200A射出。因此，若使用射出直线偏振光的光源，检测与光源平行的 偏振光(平行偏振条件)，则能够获取皮肤的表面的信息较多而内部信息 较少的图像。此外，若使用射出直线偏振光的光源，检测与光源正交的偏 振光(正交偏振条件)，则能够获取皮肤的内部信息较多而表面的信息较 少的图像。也就是说，通过使用偏振光作为光源，能够获取选择性地包含 皮肤的内部信息或表面的信息的图像。

此外，来自光源的光，波长越长越射入到表皮200A的内部，且在内 部进行反射。因此，在拍摄了皮肤的图像之中，蓝色(B)分量更多包含 皮肤的表面的信息，红色(R)或红外分量更多包含表皮200A的内部的 信息。

此外，作为目标的皮沟，有时具有易于吸收特定的波长区域的光等的 性质。在这种情况下，能够通过利用该特定的波长区域的光的分量来高精 度地提取皮沟。

皱纹存在于皮肤200的表面200S附近。若在能够更多获取表面的信 息的平行偏振的条件下进行拍摄，且求出图像的各像素中的蓝色与红色的 像素值的差分，则能够抑制基于皮肤表面的光的反射的影响，并得到较多 包含皱纹的信息的图像。此外，通过使用Gabor滤波器等的线检测滤波器 来处理图像，能够获取较多包含皱纹以及法令纹的信息的图像。在想要以 高精度区别皱纹与法令纹的情况下，也可以进一步进行基于检测到的部分 的长度、粗度等的阈值处理。

此外，为了获取较多包括皱纹的信息的图像，在此虽然叙述了求出蓝 色与红色的像素值的差分，但也可以仅求出蓝色的像素值，或者例如，也 可以使用绿色等其它颜色的像素值，不局限于仅求出蓝色与红色的像素值 的差分。

眉毛、睫毛、鼻下胡须、下巴胡须比一般的皮肤彩度以及色度低。因 此，根据拍摄到的图像，通过图像处理能够提取眉毛、睫毛、胡须、胡须。

图2是表示本实施方式的皮肤分析装置305的整体像的图。皮肤分析 装置305具有：相机300；照明装置301；控制装置302；和显示器303。 在此，显示器303优选具有触摸面板，可以设为能够通过用户用手指等触 碰显示器303所显示的按钮来操作皮肤分析装置305。

从相机300输入的被验人即用户304的脸部图像，通过控制装置302 而获取，由云服务器307进行评价。之后，将皮肤状态或定量评价了皮肤 状态的指标提示在显示器303上。

图3(a)是表示控制装置302的结构的图。控制装置302具有：微 型计算机302A；存储器302B；和通信部302C。微型计算机302A对包 括以下说明的动作的皮肤分析装置305整体的动作进行控制。此外，微型 计算机302A执行图像处理等以下说明的各种处理。例如，在存储器302B 中存储有用于控制皮肤分析装置305的各动作的计算机程序。微型计算机 302A根据该存储的计算机程序来控制相机300、照明装置301等皮肤分 析装置305的各结构要素的动作，或执行图像处理等的各种处理。

相机300拍摄用户304的脸部，并获取脸部图像数据。如上所述，为 了从用户的脸部图像中正确地提取作为目标的皱纹、体毛等，也可以在照 明装置301以及相机300中设置有偏振滤波器，以获取偏振图像。此外， 皮肤分析装置305也可以不包括照明装置301。

图3(b)是表示云服务器307的结构的图。云服务器307具有：微 型计算机307A；存储器307B；通信部307C；和数据库307D。云服务器 307经由通信部307C，从多个皮肤分析装置305接收所拍摄的图像、图 像的特征指标、皮肤的评价值等。云服务器307存储从多个皮肤分析装置 305接收到的各数据，生成统计数据，或求出数据彼此间的相关关系。此 外，经由通信部307C，将这些统计数据或相关关系发送给各皮肤分析装 置305。

此外，用户304的脸部图像的图像处理等的各种处理也可以由云服务 器307进行。此外，用户304的脸部图像的评价也可以由控制装置302 进行。

图4是表示本实施方式中的皮肤分析装置305的结构的方框图。皮肤 分析装置305具有：相机300；图像取得部1102；提取基准决定部1103； 目标提取部1104；以及显示器303。此外，可以用未图示的通信部与云服 务器307进行通信，脸部图像的评价自身也可以由云服务器307处理。此 外，也可以在云服务器307存储评价结果。

以下，参照附图，对本发明的皮肤分析装置305的动作进行说明。

本实施方式中的皮肤分析装置305，在用户304位于皮肤分析装置305 所具有的相机300之前的状态下，开始动作。

首先，相机300拍摄用户304的脸，并获取脸部图像。图像获取部 1102从相机300接收脸部图像数据，生成左右翻转的脸部图像数据。生 成的脸部图像数据输出到显示器303，显示器303显示左右翻转的脸部图 像。这是作为电子镜的功能。

用户观察显示器303所显示的脸部图像，来调整显示器303上的脸部 图像的位置。在显示器303的大致中央未显示自己的脸部图像的情况下， 当脸部图像过大或过小时，在显示器303中，相对于相机300移动脸部的 位置，以使脸部图像以恰当大小以及位置进行显示。也可以在显示器303 中显示表示优选的脸部的位置的引导标识，以使用户易于调整脸部的位 置。根据用户的拍摄开始指示，皮肤分析装置305开始所拍摄到的脸部图 像的分析动作。

图5是表示皮肤分析装置305的动作流程的流程图。

(S1201)

控制装置302使相机300动作，使相机300拍摄用户的脸部。图像获 取部1102从相机300接收用户的脸部图像数据，并生成左右翻转的脸部 图像。此时，优选使照明装置301动作，且在照明条件下拍摄用户的脸部 图像。如上所述，根据应提取的目标的种类，选择偏振条件以及使用的光 的波长。在目标为皮沟以及体毛的情况下，通过在能够更多获取表面的信 息的平行偏振的条件下进行拍摄，并求出图像的各像素中的蓝色与红色的 像素值的差分，能够得到较多包含皮沟或体毛的信息的图像。

(S1202)

提取基准决定部1103从图像获取部1102接收左右翻转的脸部图像数 据，并基于脸部图像上的位置来决定目标的提取基准。在此，所谓目标的 提取基准，如以下要进行的详细说明那样，是指表示目标的特征的值。

(S1203)

目标提取部1104根据由S1202决定的目标的提取基准，从用户的脸 部图像提取目标。

(S1204)

显示器303显示由S1203提取的目标。此时，所显示的目标，优选 与用户的脸部图像重叠显示。

以下，参照显示器303所显示的例示的图像，更详细地说明皮肤分析 装置305的动作。图6(a)表示在用户的脸部图像拍摄之前皮肤分析装 置305的显示器303所显示的初始画面的一例。显示器303的显示区域， 例如，包括面积较大的主画面70和位于主画面70的下侧的面积较小的子 画面72。在初始画面中，在主画面70中实时显示从相机300输入的图像， 作为数字镜来发挥功能。在子画面72中，例如，可以显示时钟或天气预 报等的信息。

图6(b)表示拍摄刚开始前的画面。如上所述，在显示器303的表 面设置有触摸面板，通过用户用手指等触碰触摸面板，在子画面72的上 部80以及左侧部78显示操作菜单、功能的切换菜单。在主画面70中， 例如，可以显示用于引导用户的脸的位置的引导35。此外，也可以显示 有表示拍摄的时刻的标记、倒计时的数字74等。

此外，例如，在子画面72的右侧72R，实时显示从相机300输入的 用户的脸部图像31，在左侧72L，显示日历。在日历中，例如，可以显 示表示在过去使用皮肤分析装置305进行了拍摄的情况的标记等。图6(b) 所示的显示之后，如上所述，进行用户的脸部图像的拍摄。

以下，记载了根据用户的脸部图像来决定目标的提取基准的方法以及 根据所决定的提取基准来提取目标的方法。

从图7(a)至(c)是示意性表示根据用户的脸部图像上的位置来决 定提取皮肤状态的目标的特征，并根据所决定的目标的特征来提取目标的 处理的中途过程的图。由于根据脸部图像上的位置来决定目标的提取基 准，因此，在本实施方式中，将脸部图像进行4分割，按照各象限来决定 提取基准。图7(a)表示了将用户的脸部图像进行4分割的状态，在图7 (b)中，示意性地以线段表示在图像的第3象限以及第4象限中分别决 定了目标的提取基准时的目标特征。在此所示的提取基准，表示了目标的 皱纹以及体毛的朝向。在图7(c)中，示意性表示了根据所决定的目标 特征而从脸部图像提取的皱纹。

在目标提取基准决定步骤S1202中，图像取得部1102获取到的用户 的脸部图像被输出给提取基准决定部1103。目标的提取基准，如图7(a)、 (b)中所例示，根据图像上的位置来决定。提取基准是表示目标的角度、 粗度、长度(尺寸)之中至少一者的值。例如，在图7(b)所示的示例 中，在脸部图像上，在4分割为上下以及左右的4个象限之中，在第1 以及第2象限中未设置提取基准。在第3以及第4象限中，设置了目标的 角度作为提取基准。更具体而言，将第1象限与第4象限的边界作为基准， 在第3象限设置45度的角度基准，在第4象限设置-45度(135度)的角 度基准。此时，例如，在相对于设定的角度基准呈±10度的范围内决定提 取基准。

在目标提取步骤S1203中，将图像获取部1102获取到的用户的脸部 图像和由提取基准决定部1103决定的提取基准输出给目标提取部1104。 目标提取部根据用户的脸部图像和目标的提取基准来提取目标。具体而 言，在脸部图像之中，由于在第1以及第2象限中未设置提取基准，因此 不提取满足提取基准的目标。另一方面，在第3以及第4象限中，提取满 足上述提取基准的皱纹。因此，如图7(c)所示，例如，提取法令纹以 及在与眼睛之下的法令纹相同方向上延伸的皱纹。

在从脸部图像提取皮沟等线形状的目标时，若作为目标的提取基准之 一的方向不一致，则无法正确提取目标。例如，位于脸部图像的第3象限 的法令纹与第4象限的法令纹，由于方向不同，因此在采用了适合于一方 的提取的提取条件时，另一方可能就无法正确提取。根据本实施方式，由 于根据脸部图像上的位置来决定脸部图像的多个皮肤区域中的目标的提 取基准，因此，能够正确提取包括两个法令纹在内的不同方向的皱纹。

在图7(c)所示的示例中，虽然提取眼睛下的皱纹以及法令纹，但 作为提取条件，也可以设定目标的粗度。此时，能够选择性地提取任一方。

目标的提取能够通过使用专利文献1、2所公开的图案匹配的方法、 使用非专利文献1所公开的Gabor滤波器的方法、使用Hough变换的方 法等来进行。此外，可以使用Sobel滤波器，也可以使用其他线段提取方 法或滤波器。

例如，在使用Gabor滤波器时，根据上述第3象限以及第4象限所设 定的角度基准，来决定滤波器的x方向空间频率、y方向空间频率或滤波 器尺寸等参数。

在提取结果显示步骤S1204中，向显示器1105输出图像获取部1102 所获取到的用户的脸部图像和目标提取部1104所提取到的目标的提取结 果。显示器1105将如图8(a)以及图8(b)所例示的结果画面显示于显 示器303。

在图8(a)所示的显示例中，在主画面70中显示作为目标皱纹的提 取所使用的用户的脸部图像，并且显示与脸部图像重叠而提取的目标81。 此外，在子画面72的左侧72L也显示用户的脸部图像。在子画面72的 上部80，显示指定脸部的位置的菜单，在左侧部78显示切换显示的内容 或功能的菜单。用户例如能够通过触碰子画面72的上部80以及左侧部 78，来显示脸部的特定的皮肤区域，或变更显示的内容。

图8(b)表示在子画面72的右侧72R，放大显示了用户所指定的区 域83即皮肤区域的图像的一部分的示例。作为目标的皱纹也被显示在右 侧72R。目标的显示，例如，可以用红色的区域(线)来显示相当于皮肤 区域中的目标的部分。

此外，不仅显示所提取到的目标，还可以评价所提取到的目标，并提 示结果。例如，在通过上述步骤从脸部图像中提取了目标的情况下，如图 8(a)的子画面72的右侧72R那样，例如通过雷达图表示了针对目标所 计算出的评价结果。例如，也可以求出目标的皱纹的密度，并显示评价的 结果。

此外，与所提取到的目标相关的信息以及雷达图所示的评分的履历， 也可以保存在控制装置302或云服务器307中。由此，用户能够随时参照 评价结果的履历，能够有助于随时间的保养。

例如，如图9(a)所示，可以在子画面72显示日历。在日历中，显 示有表示按照每个日期是否进行了评价的信息。例如，若用户选择日历的 日期，则在显示器303中显示如图9(b)的显示例所示那样的过去的评 价结果。此时，在主画面70中，将在所选择的日期中进行了评价的用户 的脸部图像与所提取的目标一起显示，在子画面72中，在显示日历的同 时，还将对所提取到的目标进行了评分后得到的结果显示为雷达图。

此外，也可以根据评价结果以及履历，提示与最适合于个人的皮肤状 态的保养相关的建议信息或所推荐的保养用品及化妆品。如图10(a)所 示，也可以显示基于评价结果的与皮肤的护理等美容相关的建议。此外， 如图10(b)所示，也可以详细显示对于改善皮肤状态有用的化妆品或美 容设备的信息。

(实施方式2)

在本实施方式中，检测脸部图像所包含的脸部部位，并根据相对于检 测到的脸部部位的相对位置来决定皮肤区域，设定目标的提取基准。

图11是表示本实施方式的皮肤分析装置305的结构的方框图。除了 实施方式1中的结构，还具有脸部检测部1401。脸部检测部1401检测用 户的脸部图像中的眼睛、鼻子、嘴、轮廓等的脸部部位，并根据与检测到 的脸部部位的相对位置，决定脸部图像的多个皮肤区域的坐标。

图12是表示本实施方式的皮肤分析装置305的动作流程的流程图。 除了实施方式1中的动作流程，还有脸部检测步骤S1501。

图13表示根据脸部检测位置来决定目标特征时的示意图。图13(a) 表示根据用户的脸部图像而检测到眼睛、鼻、嘴、轮廓等脸部部位的状态。 这样的脸部部位的检测，能够利用公知的数字相机等所使用的脸部认证技 术。图13(b)表示根据与所检测到的脸部部位的相对位置关系，按照每 个皮肤区域决定目标的提取基准的情形。根据与脸部部位的相对位置关系 而确定的皮肤区域，可以是：例如，眉间、眼睛之下、外眼角、内眼角、 鼻子侧面、嘴角以及额头的任一处。此外，也可以是它们的组合。

在此，表示了：例如，使用Gabor滤波器来提取目标时的Gabor滤波 器的方位。例如，在皮肤区域A中，在脸部的纵向上设定了Gabor滤波 器的方位，并提取沿着该方位的目标。同样，在皮肤区域B中，在向左 下降低的斜向上设定了方位，在皮肤区域C中，在脸部的横向上设定了 方位。分别提取沿着各个所设定的方位的目标。图13(c)示意性表示了 根据所决定的目标特征而提取的目标(皱纹)。

使用图12来说明本实施方式中的皮肤分析装置305的动作流程。

(S1201)

控制装置302使相机300动作，使相机300拍摄用户的脸部。图像获 取部1102从相机300接收用户的脸部图像数据，生成左右翻转的脸部图 像。此时，优选使照明装置301动作，在照明条件下获取用户的脸部图像。 与实施方式1相同，在目标为皮沟以及体毛的情况下，通过在能够更多获 取表面的信息的平行偏振的条件下进行拍摄，并求出图像的各像素中的蓝 色与红色的像素值的差分，能够获取较多包含皮沟或体毛的信息的图像。

(S1501)

脸部检测部1401检测用户的脸部图像中的眼睛、鼻子、嘴、轮廓等 的脸部部位。此外，根据与检测到的脸部部位的相对位置，来决定脸部图 像的多个皮肤区域的坐标。

(S1202)

提取基准决定部1103从图像获取部1102接收左右翻转的脸部图像数 据，并决定多个皮肤区域中的目标的提取基准。

(S1203)

目标提取部1104根据由S1202决定的目标的提取基准，从用户的脸 部图像中提取目标。

(S1204)

显示器303显示由S1203所提取的目标。此时，所显示的目标优选 与用户的脸部图像重叠显示。

根据本实施方式，即使用户的脸部的位置相对于相机多少有些偏差， 但也能够正确地提取脸部图像中的目标。此外，如图13(b)所示，通过 按照每个皮肤区域使提取基准不同，能够进行以下区别：在皮肤区域A 即眉间提取纵皱纹，在皮肤区域B即鼻子旁边提取法令纹。

此外，可以按照每个皮肤区域向用户提示多个提取基准，用户也可以 按照每个皮肤区域分别选择提取基准。根据用户所选择的目标的提取基准 来提取目标。在此，提示给用户的多个提取基准是按照根据与在脸部检测 步骤S1501中所检测到的脸部部位的相对位置所决定的每个皮肤区域来 提示的。例如，在法令纹附近的皮肤区域中，可以提示将沿着法令纹的方 向(图像斜向)设为Gabor滤波器的方位的目标特征、以及将能够提取鼻 子的小褶的方向设为Gabor滤波器的方位的目标特征。

(实施方式3)

在本实施方式中，根据用户的选择，使提取基准变化，通过选择履历 和基于所提取的目标进行的皮肤的评价结果来更新云服务器上的数据 库，使选择方法和皮肤的评价方法变更。

图14是表示本实施方式中的皮肤分析装置的整体像的图。与实施方 式1的云服务器111的结构不同。

图15是表示控制装置302以及云服务器111的结构的图。控制装置 302具有：存储器1801；运算部1802；以及通信部1803。云服务器111 具有：数据库1811；存储器1812；运算部1813；以及通信部1814。

图16是表示本实施方式中的皮肤分析装置305以及云服务器111的 结构的方框图。皮肤分析装置305除了实施方式1以及2的结构，还具有 提取基准选择部1901、提取结果评价部1902以及通信部1803。此外，云 服务器111具有用户选择数据库1911以及评价结果数据库1912。

用户选择数据库1911积蓄用户的选择结果，评价结果数据库1912 积蓄基于提取到的目标的皮肤状态的评价结果。

图17是表示本实施方式中的皮肤分析装置305的动作流程的流程图。

(S2001)

由用户选择数据库1911更新的选择项目，从云服务器111侧的通信 部1814向皮肤分析装置305的通信部1803发送，以更新提取基准选择部 1901的选择项目。

(S1201)

控制装置302使相机300动作，使相机300拍摄用户的脸部。图像取 得部1102从相机300中接收用户的脸部图像数据，生成左右翻转的脸部 图像。此时，优选使照明装置301动作，在照明条件下获取用户的脸部图 像。与实施方式1相同，在目标为皮沟以及体毛的情况下，通过在能够获 取更多表面信息的平行偏振的条件下进行拍摄，并求出图像的各像素中的 蓝色与红色的像素值的差分，能够获取更多包含皮沟或体毛的信息的图 像。

(S1501)

脸部检测部1401检测用户的脸部图像中的眼睛、鼻子、嘴、轮廓等 脸部部位。此外，根据与检测到的脸部部位的相对位置来决定脸部图像的 多个皮肤区域的坐标。

(S2002)

在显示器303中提示与提取基准选择部1901所积蓄的多个皮肤区域 分别相关的多个提取基准即选择项目。根据所提示的选择项目，针对所分 割的多个皮肤区域分别使用户选择提取基准。此时，对于用户，优选针对 多个皮肤区域，分别从显示器303中所显示的多个选择支之中选择提取基 准。

(S1202)

提取基准决定部1103从图像获取部1102接收左右翻转的脸部图像数 据，并决定多个皮肤区域中的目标的提取基准。

(S1203)

目标提取部1104根据由S1202所决定的目标的提取基准，从用户的 脸部图像中提取目标。

(S2003)

提取结果评价部1902，对按照多个皮肤区域的每个皮肤区域所提取 出的目标进行评分。以下表示评分s1的计算方法。使用在所选择的部位 的范围内所提取的平均值a1、给定的评分系数b1、c1由下式算出。a1的 计算，使用例如与所提取的皱纹的位置对应的像素的亮度值。

【式1】

$s1=\frac{a1-b1}{c1}$

(S1204)

显示器303显示由S1203所提取的目标。此时，所显示的目标优选 与用户的脸部图像重叠显示。此外，也可以在显示器303中显示在提取结 果评价步骤S2003中计算出的评分。

(S2004)

目标选择步骤中的用户的选择结果，从提取基准选择部1901经由皮 肤分析装置305的通信部1803发送给云服务器111，云服务器111的通 信部1814对其进行接收。此外，评分s1从提取结果评价部1902经由皮 肤分析装置305的通信部1803发送给云服务器111，云服务器111侧的 通信部1814对其进行接收。

云服务器111将从多个皮肤分析装置305接收到的用户的提取基准的 选择结果积蓄到用户选择数据库1911中。此外，根据所积蓄的多个用户 的选择结果的倾向，来更新目标的提取基准的选择项目。而且，根据从多 个皮肤分析装置305接收到的用户的评分s1和用户的选择结果，将分析 范围、提取基准以及评分s1积蓄到评价结果数据库1912中，并根据多个 用户的评价结果，来计算各分析范围中的目标特征的评价结果的平均b2 以及评价结果的方差c2。

在数据接收步骤2001中，根据用户选择数据库1911而更新的选择项 目，从云服务器111侧的通信部1814发送给皮肤分析装置305的通信部 1803，以更新提取基准选择部1901的选择项目。而且，根据评价结果数 据库1912而更新的评价结果的平均b2以及评价结果的方差c2，从云服 务器111的通信部1814发送给皮肤分析装置305的通信部1803，并根据 评价结果的平均b2以及评价结果的方差c2，来更新提取结果评价部的评 分系数b1、c1。

通过所述方法而变化的对象，不限定于提取基准的选择项目以及评价 结果的平均以及方差，可例举出：例如，建议、推荐等。此外，为了更新 选择项目以及评价结果的平均以及分析等的系数，而可以根据基于所有用 户的数据，也可以根据用户的属性而基于一部分数据，也可以仅基于1 人用户的数据。

此外，选择每个皮肤区域的多个提取基准之中的一个提取基准的次 数，也可以经由网络从皮肤分析装置305发送给云服务器111，并存储到 用户选择数据库1911中。云服务器111也可以通过使多个皮肤分析装置 305接收该数据，并求出选择各提取基准的次数的合计，而将选择次数较 多的提取基准发送给各皮肤分析装置305。由此，皮肤分析装置305能够 将根据所选择的频度而决定的提取基准作为选择支提示给用户。

(实施方式4)

对实施方式1至3中所说明的皮肤分析装置以及包括云服务器的信息 管理系统的服务的整体像进行说明。

图18(a)是表示本实施方式中的信息管理系统提供的服务的整体像 的图。信息管理系统具有：组100；数据中心运营公司110；以及服务供 应商120。

组100例如是企业、团体或家庭等，不限制其规模。组100具有包括 第1设备以及第2设备的多个设备101以及家庭网关102。多个设备101 包括：能与互联网连接的设备(例如，智能手机、个人计算机(PC)或 电视机等)、以及其自身不能与互联网连接的设备(例如，照明、洗衣机 或电冰箱等)。多个设备101可以包括即使其自身不能与互联网连接，但 经由家庭网关102能与互联网连接的设备。此外，用户10使用组100内 的多个设备101。设备101包括实施方式1至3的皮肤分析装置305。

数据中心运营公司110具有云服务器111。云服务器111是经由互联 网而与各种设备协作的虚拟服务器。云服务器111主要管理由通常的数据 库管理工具等处理较困难的庞大的数据(大数据)等。数据中心运营公司 110进行着数据的管理、云服务器111的管理、以及对它们进行的数据中 心的运营等。对数据中心运营公司110所进行的业务的细节在后面描述。

在此，数据中心运营公司110不局限于仅进行数据的管理或云服务器 111的管理的公司。例如，如图18(b)所示，在开发或制造了多个设备 101之中的一个设备的设备制造商进行了数据的管理或云服务器111的管 理等的情况下，设备制造商相当于数据中心运营公司110。此外，数据中 心运营公司110不局限于一个公司。例如，如图18(c)所示，在设备制 造商以及管理公司共同或分担地进行数据的管理或云服务器111的管理 的情况下，二者或任一方相当于数据中心运营公司110。

服务供应商120具有服务器121。在此所说的服务器121，与其規模 无关，例如，也包括个人用PC内的存储器等。此外，有时，服务供应商 120也不具有服务器121。

此外，在所述的信息管理系统中，家庭网关102并非必需。例如，云 服务器111在进行了所有数据管理等的情况下，不需要家庭网关102。此 外，如在家庭内的所有设备与互联网连接的情况那样，有时，其自身中也 不存在不能与互联网连接的设备。

接着，对所述的信息管理系统中的信息的流程进行说明。

首先，组100的第1设备或第2设备，将各日志信息分别发送给数据 中心运营公司110的云服务器111。云服务器111汇集第1设备或第2设 备的日志信息(图18(a)的箭头131)。在此，日志信息是指表示多个设 备101的例如运转状况或动作日期时间等的信息。例如，日志信息包括： 电视机的视听履历、录像机的录像预约信息、洗衣机的运转时刻、要洗的 衣物的量、电冰箱的开关日期时间、或电冰箱的开关次数等。此外，在多 个设备101为实施方式1至3所说明的皮肤分析装置305的情况下，皮肤 分析装置305，除了动作时刻，还包括实施方式1至3所说明的提取基准 等信息。此外，并不局限于这些信息，还可以包括能够从各种设备获取的 各种信息。此外，日志信息也可以经由互联网从多个设备101自身直接提 供给云服务器111。此外，日志信息也可以从多个设备101暂时汇集于家 庭网关102，且从家庭网关102提供给云服务器111。

接着，数据中心运营公司110的云服务器111将所汇集的日志信息以 固定的单位提供给服务供应商120。在此，固定的单位可以是能够通过整 理数据中心运营公司110所汇集的信息并提供给服务服务商120的单位， 也可以是服务供应商120要求的单位。此外，虽然设为以固定的单位来提 供，但也可以不是固定的单位，也可以根据状况而改变提供的信息量。日 志信息根据需要而被保存在服务供应商120所保有的服务器121中(图 18(a)的箭头132)。

然后，服务提供商120，将日志信息整理为适合于提供给用户的服务 的信息，并提供给用户。被提供信息的用户，可以是使用多个设备101 的用户10，也可以是外部的用户20。作为对用户10、20的信息提供方法， 例如，可以从服务供应商120直接向用户10、20提供信息(图18(a) 的箭头133、134)。此外，作为对用户10的信息提供方法，例如，可以 再次经由数据中心运营公司110的云服务器111，向用户10提供信息(图 18(a)的箭头135、136)。此外，数据中心运营公司110的云服务器111 也可以将日志信息整理为适合于提供给用户的服务的信息，并提供给服务 供应商120。

此外，用户10可以与用户20不同，也可以相同。此外，在所述方式 中所说明的技术，例如，在以下的云服务器的类型中均能实现。然而，实 现在所述方式中所说明的技术的云服务器的类型并不限定于这些。

(服务的类型1：自公司数据中心型云服务)

图19是表示服务的类型1(自公司数据中心型云服务)中的信息管 理系统提供的服务的整体像的图。在本类型中，服务供应商120从组100 中提取信息，对用户提供服务。在本类型中，服务供应商120具有数据中 心运营公司的功能。即，服务供应商120保有管理大数据的云服务器111。 因此，不存在数据中心运营公司。

在本类型中，服务供应商120运营及管理着数据中心(云服务器)203。 此外，服务供应商120管理操作系统(OS)202及应用201。服务供应商 120使用服务供应商120管理的OS202及应用201来提供服务(箭头204)。

(服务的类型2：IaaS利用型云服务)

图20是表示服务的类型2(IaaS利用型云服务)中的信息管理系统 提供的服务的整体像的图。在此，IaaS是指基础设施即服务(Infrastucture asaService)的简称，是将用于使计算机系统构筑及工作的基础其自身作 为经由互联网的服务来进行提供的云服务器提供模型。

在本类型中，数据中心运营公司110运营以及管理着数据中心(云服 务器)203。此外，服务供应商120管理OS202以及应用201。服务供应 商120使用服务供应商120管理的OS202以及应用201来提供服务(箭 头204)。

(服务的类型3：PaaS利用型云服务)

图21是表示服务的类型3(PaaS利用型云服务)中的信息管理系统 提供的服务的整体像的图。在此，PaaS是平台即服务(Platformasa Service)的简称，是将成为用于使软件构筑及工作的基础的平台作为经由 互联网的服务来进行提供的云服务器提供模型。

在本类型中，数据中心运营公司110管理OS202，并运营以及管理着 数据中心(云服务器)203。此外，服务供应商120管理应用201。服务 供应商120使用数据中心运营公司110管理的OS202以及服务供应商120 管理的应用201来提供服务(箭头204)。

(服务的类型4：SaaS利用型云服务)

图22是表示服务的类型4(SaaS利用型云服务)中的信息管理系统 提供的服务的整体像的图。在此，SaaS是软件即服务(Softwareasa Service)的简称。SaaS利用型云服务，是例如具有如下功能的云服务器 提供模型：使未保有数据中心(云服务器)的公司或个人等利用者能够经 由互联网等网络来使用保有数据中心(云服务器)的平台提供者所提供的 应用。

在本类型中，数据中心运营公司110管理应用201，并管理OS202， 且运营以及管理数据中心(云服务器)203。此外，服务供应商120使用 数据中心运营公司110管理的OS202以及应用201来提供服务(箭头 204)。

以上，在任一种云服务器的类型中，服务供应商120提供服务。此外， 例如，服务供应商或数据中心运营公司可以自行开发OS、应用或大数据 的数据库等，此外，也可以向第三方购买。

产业上的利用可能性

本申请所公开的皮肤分析方法、皮肤分析装置以及控制皮肤分析装置 的控制方法，适合用于基于皮肤分析装置的皮肤区域的分析、评价。

标号说明：

10、20用户

31脸部图像

35引导

70主画面

72子画面

72L左侧

72R右侧

74数字

78左侧部

80上部

81目标

83区域

100组

101设备

102家庭网关

105显示器

110数据中心运营公司

111云服务器

120服务供应商

121服务器

200皮肤

200A表皮

200B真皮

200S表面

201应用

204箭头

300相机

301照明装置

302控制装置

302A微型计算机

302B存储器

302C通信部

303显示器

304用户

305皮肤分析装置

307云服务器

307A微型计算机

307B存储器

307C通信部

307D数据库

330显示器

1102图像取得部

1103提取基准决定部

1104目标提取部

1105显示器

1401脸部检测部

1801存储器

1802运算部

1803通信部

1811数据库

1812存储器

1813运算部

1814通信部

1901提取基准选择部

1902提取结果评价部

1911用户选择数据库

1912评价结果数据库

2001数据接收步骤