一种汽车美妆镜系统、方法、美妆镜以及存储介质

摘要

本发明方法提供一种汽车美妆镜系统、方法、美妆镜以及存储介质，包括采集模块，用于采集用户的人脸图像以及环境光线参数，并将人脸图像以及环境光线传送至主控单元；主控单元，用于根据人脸图像进行妆容处理，获得推荐妆容以及化妆视频，并将推荐妆容以及化妆视频传送至显示模块；显示模块，用于呈现推荐妆容以及化妆视频给用户，并根据环境光线参数调节亮度，实现对用户的妆容推荐，用户通过触摸选择菜单功能来协助化妆，显示模块采用一体银技术，保证了美妆镜在具有智能化的功能时，也不丢失原有的使用价值。本发明能够解决车内传统化妆镜不灵活以及不够智能化的问题，提高化妆效率以及化妆效果。

说明书

技术领域

本发明涉及智能美妆镜技术领域，具体而言，涉及一种汽车美妆镜系统、方法、美妆镜以及存储介质。

背景技术

如今汽车内部显示屏多样化已经成为了一种趋势，并且随着生活水平的提高，用户对妆容也越来越重视，借助车内显示屏智能化的优势增设化妆镜，不仅能为用户在车内化妆带来便捷，同时依靠相关的技术指导，能够让用户选择更加适合自己的妆容。

美妆镜又称化妆镜，是诸多镜子类型中专门制造出来便于化妆的镜子；现有的汽车化妆镜主要有两种：第一种将玻璃面板放置在遮阳板上通过镜面反射来协助化妆，光线较强或者较弱的情况下都会影响自身的化妆效果，位置比较机械，缺少智能技术的支持等因素需要花费在化妆上的时间会比较多。；二种将led灯条和触摸镜面屏结合，利用机械设计灵敏性可以放置在遮阳板或者前排靠枕上给后排乘客使用。解决了第一种光线的影响，触摸屏调光显得智能化。但在化妆时不能提供合适的化妆指导，不能做到镜屏一体。可以捕获到的人脸范围也比较局限。

发明内容

有鉴于此，本发明的目的在于提供一种汽车美妆镜系统、方法、美妆镜以及存储介质，其能够解决车内传统化妆镜不灵活以及不够智能化的问题，提高化妆效率以及化妆效果。

本发明提供一种汽车美妆镜系统，至少包括：

分别与采集模块和显示模块通讯连接并提供电源的主控单元。

所述采集模块，用于采集用户的人脸图像以及环境光线参数，并将所述人脸图像以及环境光线传送至所述主控单元。

所述主控单元，用于根据所述人脸图像进行妆容处理，获得推荐妆容以及化妆视频，并将所述推荐妆容以及化妆视频传送至显示模块。

所述显示模块，用于呈现推荐妆容以及化妆视频给用户，并根据所述环境光线参数调节亮度，实现对用户的妆容推荐。

上述技术方案中，主控单元是整个化妆镜的控制“大脑”，其中，MCU可为32位微控制器，32bit的数据总线宽带，接收来自车机端的CAN信号，管理各个电源模块上电时序，与SOC进行信息交互，SOC可为ARM Cortex-A7 32位核心，负责以太网，AI算法实现，视频信号处理等功能；使用时，车机端通过Can唤醒主板上MCU工作之后根据时序的设计要求打开SOC相关供电后去开启采集模块工作；采集模块将捕获到的人脸信息通过摄像头端的串行器压缩之后通过同轴线传输到解串器解压后传输到SOC去裁剪完成后到MIPI转LVDS转换器转化为LVDS信号后将信息在显示模块显示，其中采集模块上设计有光敏器件，会收集外部环境光线的强弱将信息通过IIC协议传输到SOC上进而控制显示模块背光的亮度；显示模块外部内嵌LED灯条，外置按键通过SOC上的PWM调节外部灯带的亮度，在光线较弱的情况下协助补光。

进一步的，所述采集模块至少包括：

摄像头端，用于采集用户的人脸图像，并通过MIPI信号将所述人脸图像传送至所述主控单元。

以及光传感器，用于实时采集环境光线参数，并通过IIC协议将所述环境光线参数传送至所述主控单元。

在上述技术方案中，摄像头端设置于显示模块顶部，用于获取用户的面部信息，将采集到视频信号，并行输出到图像处理器，传输到串行器，进行图像的压缩后输出；示例性的，光传感器可使用VEML6030，16位分辨率的光传感器，将实时收集到的环境亮度通过IIC协议传递到SOC，进而控制屏端背光的亮度，减少了使用过程由于光线因素带来的不便。

进一步的，所述摄像头端的上下视角范围为0°至42°，左右视角范围为0°至64°。

在上述技术方案中，摄像头端设置于显示模块顶部，用于获取用户的面部信息，将采集到视频信号，并行输出到图像处理器，传输到串行器，串行器将多个信号合并在一起通过同轴线传输后在解串器解开，通过MIPI信号传输到SOC进行处理，整理成为视频信号，进行图像的压缩后输出；示例性的，光传感器可使用VEML6030，16位分辨率的光传感器，将实时收集到的环境亮度通过IIC协议传递到SOC，进而控制屏端背光的亮度，减少了使用过程由于光线因素带来的不便。

进一步的，所述主控单元通过妆容处理模型对所述人脸图像进行妆容处理；所述主控单元通过连接云服务器，根据所述推荐妆容获取相应的化妆指导视频推送给用户；

所述妆容处理模型至少包括：

特征提取层，用于通过提取所述人脸图像的脸部特征，并将所述脸部特征送至特征分类层；所述脸部特征至少包括：脸型、眼型和唇形；

特征分类层，用于通过妆容数据集对所述脸部特征进行分类，获得每个脸部特征对应的推荐妆容和概率；

妆容融合层，用于将概率最高的推荐妆容迁移到所述人脸图像上，并呈现于所述显示模块。

在上述技术方案中，妆容处理模型通过多种人脸轮廓算法的综合计算，在化妆集中找到合适的妆容推荐给用户；减少用户在妆容上的选择时间；通过以太网连接云服务器提供专业的化妆或护肤指导，示例性的，也可以连接测肤平台或饮食平台，获取专业的脸部皮肤检测并由专业顾问给出化妆建议，饮食计划及运动计划。

进一步的，所述妆容处理模型为卷积神经网络、深度神经网络以及BP神经网络中的任一种。

在上述技术方案中，妆容处理模型为神经网络，属于有监督学习的一种，有监督学习的特点是训练样本集中每个样本有对应的标签，也即每个样本有自己对应的类别，神经网络的激活函数得到的结果实际是特征数据属于哪个类别的概率，例如训练样本集有两个类别：脸型和妆容，将脸部特征输入神经网络后，得到的结果类别和类别对应概率分别脸型的概率和某种妆容的概率，示例性的，妆容处理模型可为BP神经网络和AlexNet神经网络模型训练人脸局部特征分类器和VGGNet神经网路模型训练妆容风格分类器中的任一种。

进一步的，所述显示模块至少包括：TP触屏模组、背光模组、LC镜和FOG模组。

所述显示模块的显示区域镀设有银膜以及边框区域设有银色油墨。

所述显示模块的外侧设有LED灯条。

所述TP触屏模组用于实现显示模块的触屏功能。

所述背光模组响应于所述主控单元的所述环境光线参数，根据所述环境光线参数调节亮度。

上述技术方案中，显示模块的显示区域即显示屏，显示区域镀了一层银膜，边框区域使用了银色油墨进行处理，使得显示屏具有半透半反的特点，在显示屏电源关闭时，显示区域和边框整体呈现银色，呈现出镜子的效果，保证了美妆镜在具有智能化功能的同时，也不丢失原有的使用价值，提高了产品的实用性，同时，整个显示区域和边框区域在不存在色差的情况下，反射率可以达到50%。即使显示屏电源启动时，仍然能将相关的画面进行显示；显示屏模组通过一体银技术，在化妆镜电源关闭时用户能够通过化妆镜来整理自己的妆容，在化妆镜电源开启时，能使用智能化妆镜功能做到镜屏一体，在传统化妆镜利用镜面发射难以控制光线强弱的缺点上使用光敏器件来智能的调节光线，让用户体验更加便捷。通过设置TP触屏模组，用户可以通过触屏方式选择需要的菜单功能来协助化妆，将整个系统变得更加智能化和便捷；背光模组与主控单元连接，光传感器将实时收集到的环境光线参数通过IIC协议传递到SOC，在光线过强或者不足的时候进行智能化处理，减少了使用过程由于光线因素带来的不便，外置按键通过SOC上的PWM控制背光的亮度，在光线较弱的情况下手动协助补光，同时显示模块外部周围内嵌LED灯条，可以通过触摸控制或按键控制的方式在环境亮度不足的情况下外部补光，更具备智能化的特点。

作为另一种优选，本发明还提供一种美妆镜方法，所述方法具体包括：

S1：采集用户的人脸图像以及环境光线参数。

S2：根据所述人脸图像通过妆容处理模型进行妆容处理，获得推荐妆容以及化妆视频。

S3：将推荐妆容以及化妆视频推荐给用户，并根据所述环境光线调节亮度，实现对用户的妆容推荐。

进一步的，所述步骤S2,具体包括：

S21：提取所述人脸图像的脸部特征；所述脸部特征至少包括：脸型、眼型和唇形。

S22：通过妆容数据集对所述脸部特征进行分类，获得每个脸部特征对应的推荐妆容和概率。

S23：将概率最高的推荐妆容迁移到所述人脸图像上，根据所述推荐妆容获取相应的化妆指导视频。

作为另一种优选，本发明还提供一种所述美妆镜应用如上所述的汽车美妆镜系统以实现对用户的妆容推荐。

作为另一种优选，本发明还提供一种存储介质，位于任一处理系统，所述存储介质包括可被处理器执行的计算机程序，所述计算机程序用于执行如上所述的美妆镜方法。

与现有技术相比，本发明的有益效果是：

本发明通过妆容处理模型通过多种人脸轮廓算法的综合计算，在化妆集中找到合适的妆容推荐给用户，减少用户在妆容上的选择时间；通过连接云服务器可以获取化妆视频的指导，有助于帮助用户提高化妆速度；使用宽角度的摄像头，高清屏模组上带有TP部件，可以获取更宽角度的环境，同时TP触摸代替了手动按键的不便捷，更加具备智能化；该装置放置在副驾驶的前方位置，相对于传统化妆镜放置在遮光板的位置，用户不需要抬头就能化妆，体验更佳；显示屏模组通过一体银技术，在化妆镜电源关闭时用户能够通过化妆镜来整理自己的妆容，在化妆镜电源开启时，能使用智能化妆镜功能做到镜屏一体，在传统化妆镜利用镜面发射难以控制光线强弱的缺点上使用光敏器件来智能的调节光线，让用户体验更加便捷。

附图说明

图1为本发明汽车美妆镜系统的示意图。

图2为本发明妆容处理模型的示意图。

图3为本发明汽车美妆镜方法的流程图。

具体实施方式

为了便于理解本发明，下面将参照相关附图对本发明进行更全面的描述。附图中给出了本发明的较佳实施方式。但是，本发明可以以许多不同的形式来实现，并不限于本文所描述的实施方式。

请参考图1，一较佳实施例中，本发明提供一种汽车美妆镜系统，至少包括：

分别与采集模块和显示模块通讯连接并提供电源的主控单元。

所述采集模块，用于采集用户的人脸图像以及环境光线参数，并将所述人脸图像以及环境光线传送至所述主控单元。

所述主控单元，用于根据所述人脸图像进行妆容处理，获得推荐妆容以及化妆视频，并将所述推荐妆容以及化妆视频传送至显示模块。

所述显示模块，用于呈现推荐妆容以及化妆视频给用户，并根据所述环境光线参数调节亮度，实现对用户的妆容推荐。

具体实施过程中，主控单元是整个化妆镜的控制“大脑”，其中，MCU可为32位微控制器，32bit的数据总线宽带，接收来自车机端的CAN信号，管理各个电源模块上电时序，与SOC进行信息交互，SOC可为ARM Cortex-A7 32位核心，负责以太网，AI算法实现，视频信号处理等功能；使用时，车机端通过Can唤醒主板上MCU工作之后根据时序的设计要求打开SOC相关供电后去开启采集模块工作；采集模块将捕获到的人脸信息通过摄像头端的串行器压缩之后通过同轴线传输到解串器解压后传输到SOC去裁剪完成后到MIPI转LVDS转换器转化为LVDS信号后将信息在显示模块显示，其中采集模块上设计有光敏器件，会收集外部环境光线的强弱将信息通过IIC协议传输到SOC上进而控制显示模块背光的亮度；显示模块外部内嵌LED灯条，外置按键通过SOC上的PWM调节外部灯带的亮度，在光线较弱的情况下协助补光。

在本实施例中，所述采集模块至少包括：

摄像头端，用于采集用户的人脸图像，并通过MIPI信号将所述人脸图像传送至所述主控单元。

以及光传感器，用于实时采集环境光线参数，并通过IIC协议将所述环境光线参数传送至所述主控单元。

在具体实施过程中，摄像头端设置于显示模块顶部，用于获取用户的面部信息，将采集到视频信号，并行输出到图像处理器，传输到串行器，串行器将多个信号合并在一起通过同轴线传输后在解串器解开，通过MIPI信号传输到SOC进行处理，整理成为视频信号，进行图像的压缩后输出；示例性的，光传感器可使用VEML6030，16位分辨率的光传感器，将实时收集到的环境亮度通过IIC协议传递到SOC，进而控制屏端背光的亮度，减少了使用过程由于光线因素带来的不便。

在本实施例中，所述摄像头端的上下视角范围为0°至42°，左右视角范围为0°至64°。

在具体实施过程中，摄像头端设置于显示模块顶部，用于获取用户的面部信息，将采集到视频信号，并行输出到图像处理器，传输到串行器，进行图像的压缩后输出；示例性的，光传感器可使用VEML6030，16位分辨率的光传感器，将实时收集到的环境亮度通过IIC协议传递到SOC，进而控制屏端背光的亮度，减少了使用过程由于光线因素带来的不便。

应当理解的是，摄像头在人离摄像头1m是，可以覆盖到4m*1.8m的一个面积范围；随着离摄像头距离增大或者缩小覆盖范围会随着变化；因为覆盖的面积比较大，如果正常显示人脸在屏幕上会显得比较小，所以一般都会用AI算法识别到面部，在化妆镜上放大显示，方便用户观察的；同时，摄像头的视野范围会因为安装位置而影响；

在本实施例中，所述主控单元通过妆容处理模型对所述人脸图像进行妆容处理；所述主控单元通过连接云服务器，根据所述推荐妆容获取相应的化妆指导视频推送给用户；

请参考图2，所述妆容处理模型至少包括：

特征提取层，用于通过提取所述人脸图像的脸部特征，并将所述脸部特征送至特征分类层；所述脸部特征至少包括：脸型、眼型和唇形；

特征分类层，用于通过妆容数据集对所述脸部特征进行分类，获得每个脸部特征对应的推荐妆容和概率；

妆容融合层，用于将概率最高的推荐妆容迁移到所述人脸图像上，并呈现于所述显示模块。

在具体实施过程中，妆容处理模型通过多种人脸轮廓算法的综合计算，在化妆集中找到合适的妆容推荐给用户；减少用户在妆容上的选择时间；通过以太网连接云服务器提供专业的化妆或护肤指导，示例性的，也可以连接测肤平台或饮食平台，获取专业的脸部皮肤检测并由专业顾问给出化妆建议，饮食计划及运动计划。

在本实施例中，所述妆容处理模型为卷积神经网络、深度神经网络以及BP神经网络中的任一种。

在具体实施过程中，妆容处理模型为神经网络，属于有监督学习的一种，有监督学习的特点是训练样本集中每个样本有对应的标签，也即每个样本有自己对应的类别，神经网络的激活函数得到的结果实际是特征数据属于哪个类别的概率，例如训练样本集有两个类别：脸型和妆容，将脸部特征输入神经网络后，得到的结果类别和类别对应概率分别脸型的概率和某种妆容的概率，示例性的，妆容处理模型可为BP神经网络和AlexNet神经网络模型训练人脸局部特征分类器和VGGNet神经网路模型训练妆容风格分类器中的任一种。

示例性的，局部妆容推荐流程是训练人脸局部特征分类器，识别人脸图片的局部特征，根据收集的局部妆容推荐数据集进行局部妆容的推荐。对于圆形脸、瓜子脸、方形脸、长形脸在识别出脸型之后分别推荐对应的底妆以及眉妆；对于细长眼、圆眼、标注眼在识别出眼型之后分别推荐对应的眼妆；对于薄唇、厚唇、标准唇在识别出唇形之后分别推荐对应的唇妆，之后利用化妆软件将推荐的妆容迁移到人脸图片上，其中，妆容融合模块为化妆软件。

在本实施例中，所述显示模块至少包括：TP触屏模组、背光模组、LC镜和FOG模组。

所述显示模块的显示区域镀设有银膜以及边框区域设有银色油墨。

所述显示模块的外侧设有LED灯条。

所述TP触屏模组用于实现显示模块的触屏功能。

所述背光模组响应于所述主控单元的所述环境光线参数，根据所述环境光线参数调节亮度。

具体实施过程中，显示模块的显示区域即显示屏，显示区域镀了一层银膜，边框区域使用了银色油墨进行处理，使得显示屏具有半透半反的特点，在显示屏电源关闭时，显示区域和边框整体呈现银色，呈现出镜子的效果，保证了美妆镜在具有智能化功能的同时，也不丢失原有的使用价值，提高了产品的实用性，同时，整个显示区域和边框区域在不存在色差的情况下，反射率可以达到50%。即使显示屏电源启动时，仍然能将相关的画面进行显示。

应当理解的是，显示屏模组通过一体银技术，在化妆镜电源关闭时用户能够通过化妆镜来整理自己的妆容，在化妆镜电源开启时，能使用智能化妆镜功能做到镜屏一体，在传统化妆镜利用镜面发射难以控制光线强弱的缺点上使用光敏器件来智能的调节光线，让用户体验更加便捷。

其中，通过设置TP触屏模组，用户可以通过触屏方式选择需要的菜单功能来协助化妆，将整个系统变得更加智能化和便捷；背光模组与主控单元连接，光传感器将实时收集到的环境光线参数通过IIC协议传递到SOC，在光线过强或者不足的时候进行智能化处理，减少了使用过程由于光线因素带来的不便，外置按键通过SOC上的PWM控制背光的亮度，在光线较弱的情况下手动协助补光，同时显示模块外部周围内嵌LED灯条，可以通过触摸控制或按键控制的方式在环境亮度不足的情况下外部补光，更具备智能化的特点。

请参考图3，作为另一种优选，本发明还提供一种美妆镜方法，所述方法具体包括：

S1：采集用户的人脸图像以及环境光线参数。

S2：根据所述人脸图像通过妆容处理模型进行妆容处理，获得推荐妆容以及化妆视频。

S3：将推荐妆容以及化妆视频推荐给用户，并根据所述环境光线调节亮度，实现对用户的妆容推荐。

在本实施例中，所述步骤S2,具体包括：

S21：提取所述人脸图像的脸部特征；所述脸部特征至少包括：脸型、眼型和唇形。

S22：通过妆容数据集对所述脸部特征进行分类，获得每个脸部特征对应的推荐妆容和概率。

S23：将概率最高的推荐妆容迁移到所述人脸图像上，根据所述推荐妆容获取相应的化妆指导视频。

作为另一种优选，本发明还提供一种所述美妆镜应用如上所述的汽车美妆镜系统以实现对用户的妆容推荐。

作为另一种优选，本发明还提供一种存储介质，位于任一处理系统，所述存储介质包括可被处理器执行的计算机程序，所述计算机程序用于执行如上所述的美妆镜方法。

综上所述，本发明通过妆容处理模型通过多种人脸轮廓算法的综合计算，在化妆集中找到合适的妆容推荐给用户，减少用户在妆容上的选择时间；通过连接连接云服务器可以获取化妆视频的指导，有助于帮助用户提高化妆速度；使用宽角度的摄像头，高清屏模组上带有TP部件，可以获取更宽角度的环境，同时TP触摸代替了手动按键的不便捷，更加具备智能化；该装置放置在副驾驶的前方位置，相对于传统化妆镜放置在遮光板的位置，用户不需要抬头就能化妆，体验更佳；做到镜屏一体，在传统化妆镜利用镜面发射难以控制光线强弱的缺点上使用光敏器件来智能的调节光线，让用户体验更加便捷。

尽管这里已经参考附图描述了示例实施例，应理解上述示例实施例仅仅是示例性的，并且不意图将本发明的范围限制于此。本领域普通技术人员可以在其中进行各种改变和修改，而不偏离本发明的范围和精神。所有这些改变和修改意在被包括在所附权利要求所要求的本发明的范围之内。

本领域普通技术人员可以意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本发明的范围。

本发明的各个系统及方法实施例可以以硬件实现，或者以在一个或者多个处理器上运行的软件模块实现，或者以它们的组合实现。本领域的技术人员应当理解，可以在实践中使用微处理器或者数字信号处理器(DSP)来实现根据本发明实施例的一些模块的一些或者全部功能。本发明还可以实现为用于执行这里所描述的方法的一部分或者全部的装置程序(例如，计算机程序和计算机程序产品)。这样的实现本发明的程序可以存储在计算机可读介质上，或者可以具有一个或者多个信号的形式。这样的信号可以从因特网网站上下载得到，或者在载体信号上提供，或者以任何其他形式提供。

在本申请所提供的几个实施例中，应该理解到，所揭露的系统和方法，可以通过其它的方式实现。例如，以上所描述的系统实施例仅仅是示意性的，例如，所述功能的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个工具或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。

此外，术语“第一”、“第二”仅用于描述目的，而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此，限定有“第一”、“第二”的特征可以明示或者隐含地包括一个或者更多个该特征。在本发明的描述中，“多个”的含义是两个或两个以上，除非另有明确具体的限定。

虽然对本发明的描述是结合以上具体实施例进行的，但是，熟悉本技术领域的人员能够根据上述的内容进行许多替换、修改和变化是显而易见的。因此，所有这样的替代、改进和变化都包括在附后的权利要求的精神和范围内。