电子相框的智能显示方法、电子相框及可读存储介质

摘要

本发明公开了一种电子相框的智能显示方法，该方法包括：获取电子相框所在环境的环境信息，环境信息包括语音信息及图像信息中至少一种；根据环境信息获取待输出信息，待输出信息包括语音信息、表情信息及动作信息中至少两种输出信息；控制电子相框显示的目标人物图像输出待输出信息，以使得待输出信息中各个输出信息对应一致输出。本发明还提供一种电子相框及可读存储介质。本发明通过依据电子相框所处环境的环境信息如语音信息和/或图像信息，以实现电子相框主动与环境信息交互，提高电子相框的智能化，且控制显示的目标人物图像输出语音信息、表情信息及动作信息中至少两种输出信息对应一致输出，增加电子相框显示的多样性及功能的多样化。

说明书

技术领域

本发明涉及智能电子技术领域，尤其涉及一种电子相框的智能显示方法、电子相框及可读存储介质。

背景技术

相框用于放置相片，通常摆放在家里。传统情况下，相框通常用于装饰，且只能放置固定图片或者简单播放存储好的一张张相片的方式进行浏览，使用单一。

上述内容仅用于辅助理解本发明的技术方案，并不代表承认上述内容是现有技术。

发明内容

本发明的主要目的在于提供一种电子相框的智能显示方法、电子相框及可读存储介质，旨在解决相框只能放置固定图片或者简单播放存储好的一张张相片的方式进行浏览，使用单一的问题。

为实现上述目的，本发明提供一种电子相框的智能显示方法，所述电子相框的智能显示方法包括：

获取电子相框所在环境的环境信息，所述环境信息包括语音信息以及图像信息中的至少一种；

根据所述环境信息获取待输出信息，所述待输出信息包括语音信息、表情信息以及动作信息中至少两种输出信息；

控制所述电子相框显示的目标人物图像输出所述待输出信息，以使得所述待输出信息中各个所述输出信息对应一致输出。

可选地，获取终端设备所在环境的环境信息的步骤之前，包括：

接收到图像切换指令时，获取所述图像切换指令对应的所述目标人物图像；

将所述电子相框当前显示的人物图像切换为所述目标人物图像。

可选地，将所述电子相框显示的人物图像切换为所述目标人物图像的步骤包括：

获取所述目标人物图像的第一脸部特征点；

获取所述电子相框显示的人物图像的第二脸部特征点；

根据所述第一脸部特征点对所述第二脸部特征点进行修正，并确定修正后的所述终端设备显示的人物图像的显示位置；

输出所述目标人物图像至所述显示位置。

可选地，电子相框的智能显示方法还包括：

获取所述电子相框当前的显示模式；

所述显示模式为交互式显示模式时，执行获取电子相框所在环境的环境信息的步骤；或者，

在所述显示模式为非交互显示模式时，识别所述电子相框显示的所述目标人物图像的身份信息；

根据所述身份信息获取所述目标人物图像的人物信息；

控制所述电子相框显示的目标人物图像输出所述人物信息。

可选地，电子相框的智能显示方法还包括：

接收到图像驱动指令时，获取参考视频信息的播放数据信息；

根据所述播放数据信息控制所述电子相框显示的所述目标人物图像输出。

可选地，根据所述环境信息获取待输出信息的步骤包括：

识别所述环境信息中的人物身份信息；

若所述人物身份信息与授权的身份信息匹配，则获取与授权的身份信息关联的所述待输出信息。

可选地，识别所述环境信息中的人物身份信息的步骤之后，包括：

若所述人物身份信息与授权的身份信息不匹配，则保存所述环境信息。

此外，为实现上述目的，本发明还提供一种电子相框，所述电子相框包括所述电子相框包括：存储器、处理器以及存储在所述存储器里并可在所述处理器上运行的电子相框的智能显示程序，所述电子相框的智能显示程序被所述处理器执行时实现如以上所述的电子相框的智能显示方法的各个步骤。

此外，为实现上述目的，本发明还提供一种可读存储介质，所述可读存储介质存储有电子相框的智能显示程序，所述电子相框的智能显示程序被所述处理器执行时实现如以上所述的电子相框的智能显示方法的各个步骤。

本发明提出的电子相框的智能显示方法，通过依据电子相框所处环境的语音信息和/或图像信息，以实现电子相框通过语音信息和/或图像信息进行的主动交互，提高电子相框的智能化，且通过控制显示于电子相框的目标人物图像输出语音信息、表情信息以及动作信息中至少两种输出信息对应一致输出，不仅实现了电子相框中目标人物动态显示，增加了电子相框显示的多样性的同时，增加了电子相框功能的多样化。

附图说明

图1为本发明的电子相框的智能显示方法各个实施例涉及的电子相框的结构框图；

图2为本发明的电子相框的智能显示方法第一实施例的流程示意图；

图3为本发明的电子相框的智能显示方法第二实施例的流程示意图；

图4为本发明的电子相框的智能显示方法第三实施例的流程示意图；

图5为本发明的电子相框的智能显示方法第四实施例的流程示意图。

本发明目的的实现、功能特点及优点将结合实施例，参照附图做进一步说明。

具体实施方式

应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。

在后续的描述中，使用用于表示元件的诸如“模块”、“部件”或者“单元”的后缀仅为了有利于本发明的说明，其本身没有特定的意义。因此，“模块”、“部件”或者“单元”可以混合地使用。

请参考图1，图1为本发明的电子相框的智能显示方法各个实施例涉及的电子相框的结构框图，该电子相框可以包括：存储器101、处理器102、显示单元103以及通信单元104。本领域技术人员可以理解，图1示出的电子相框的结构框图并不构成对电子相框的限定，电子相框可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。其中，存储器101中存储有操作系统以及电子相框的智能显示程序。处理器102是电子相框的控制中心，处理器102执行存储在存储器101内的电子相框的智能显示程序，以实现本发明的电子相框的智能显示方法各实施例的步骤。显示单元103包括显示面板，可采用液晶显示器(Liquid Crystal Display，LCD)、有机发光二极管(Organic Light-Emitting Diode,OLED)等形式来配置显示面板，用于显示人物图像。可选地，显示单元103可集成触控面板，当触控面板检测到在其上或附近的手指的触摸操作后，传送给处理器102以确定触摸事件的类型，随后处理器102根据触摸事件的类型对应实现的功能。通信单元104通过网络协议与其他终端设备如手机、电脑或者服务器建立数据通信(该数据通信可为IP通信或者蓝牙通道)，以实现其他终端设备向电子相框发送数据，如通过用户的终端设备如手机或者穿戴设备直接发送包含有参考视频信息的图像驱动指令至电子相框，或者通过用户的终端设备如手机或者穿戴设备直接发送包含有目标人物图像的图像切换指令至电子相框。

基于上面电子相框的结构框图，提出本发明的电子相框的智能显示方法的各个实施例。

本发明提供一种电子相框的智能显示方法，请参考图2，图2为本发明的电子相框的智能显示方法第一实施例的流程示意图。在该实施例中，电子相框的智能显示方法包括以下步骤：

步骤S10，获取电子相框所在环境的环境信息，所述环境信息包括语音信息以及图像信息中的至少一种；

环境信息包括语音信息以及图像信息中的至少一种。获取电子相框所在环境的环境信息可通过设置于电子相框的语音收集装置如麦克风获取得到，和/或，通过设置于电子相框的摄像装置获取得到，本实施例对此不做限定。

步骤S20，根据所述环境信息获取待输出信息，所述待输出信息包括语音信息、表情信息以及动作信息中至少两种输出信息；

步骤S30，控制所述电子相框显示的目标人物图像输出所述待输出信息，以使得所述待输出信息中各个所述输出信息对应一致输出。

待输出信息包括语音信息、表情信息以及动作信息中至少两种输出信息。根据环境信息获取待输出信息，可通过在将环境信息转换成环境信息对应的语义描述，例如，当得到所述图像信息中存在人体时及人体的特征后，通过得到对应的语义描述：“人”、年龄、性别等；转换成语义描述“人”、年龄、性别后，则表明当前环境中有人及人的特征，进而根据环境信息对应的语义描述得到待输出信息，例如，在得到“人”、年龄、性别等的语义描述后，可将“人”、年龄、性别等作为条件，进行处理，得到待输出语言，例如，可得到打招呼语句“你好”。

基于依据环境信息获取的待输出信息如语音信息、表情信息以及动作信息中的至少两种，可对应于待输出信息获取特征数据如表情特征数据以及动作特征数据，以及对应于语音信息的口型特征数据，进而通过面部/肢体动态变换软件或者算法按照特征数据中的表情特征数据以及动作特征数据使电子相框显示的目标人物图像输出与待输出信息相对应的动作和/或姿态，且控制目标人物图像按照特征数据中的口型特征数据输出相对应的口型以及语音信息，进而达到待输出信息中各个输出信息对应一致输出的目的。可选地，在获知目标人物图像对应的语音数据的情况下，可通过声音转换软件控制目标人物图像对外输出的语音信息符合目标人物图像对应的人的声音特征。

作为一种可选的实施方式，电子相框的智能显示方法还包括：

接收到图像驱动指令时，获取参考视频信息的播放数据信息；

根据所述播放数据信息控制所述电子相框显示的所述目标人物图像输出。

在实际应用过程中，为进一步增加电子相框功能的多样化，可通过视频驱动控制电子相框动态显示目标人物图像，以增强电子相框所显示的目标人物图像的动态显示多样化以及趣味性。参考视频信息为用于获取控制电子相框显示的目标人物图像进行动态显示的播放数据信息，以使得目标人物图像按照播放数据信息动态显示。其中，播放数据信息包括参考视频信息按照视频播放顺序由各个图像帧中参考人物图像的表情特征数据、口型特征数据、语音数据以及动作特征数据中至少一种。需要说明的是，参考人物图像与电子相框显示的目标人物图像不相同，参考人物图像为参考视频信息中各个图像帧显示的人物图像，可选地，参考视频信息显示一个人物。

图像驱动指令的触发可通过直接检测到与图像驱动指令对应的触摸操作手势触发，或者，直接通过触发图像驱动指令对应的按键或者按钮触发；也可通过接收其他终端设备发送的图像驱动指令触发，如通过用户的终端设备如手机或者穿戴设备直接发送包含有参考视频信息的图像驱动指令至电子相框，本实施例对此不做限定。

获取参考视频信息的播放数据信息，可先通过获取参考视频信息中按照视频播放顺序的每个图像帧中参考人物图像的数据信息如表情特征数据、口型特征数据、语音数据以及动作特征数据，进而按照视频播放顺序由各个图像帧的数据信息生成参考视频信息的播放数据信息，其中，参考视频信息可预先存储于电子相框内直接获取；也可通过接收其他终端设备发送而获取得到。

根据播放数据信息控制电子相框显示的目标人物图像输出，也即按照播放数据信息中表情特征数据、口型特征数据、语音数据以及动作特征数据中至少一个，对应于电子相框所显示的目标人物图像，获取该目标人物图像的所对应的表情特征、口型特征以及动作特征，并按照播放数据信息对应控制显示目标人物图像的表情特征、口型特征以及动作特征，且对应于口型特征输出相应的语音数据，进而达到电子相框显示的目标人物图像可按照参考视频信息中的参考人物图像中的表情、口型、语音以及动作进行动态输出，增强了电子相框所显示的目标人物图像的动态显示多样化以及趣味性。

在本实施例公开的技术方案中，通过依据电子相框所处环境的语音信息和/或图像信息，以实现电子相框通过语音信息和/或图像信息进行的主动交互，提高电子相框的智能化，且通过控制显示于电子相框的目标人物图像输出语音信息、表情信息以及动作信息中至少两种输出信息对应一致输出，不仅实现了电子相框中目标人物动态显示，增加了电子相框显示的多样性的同时，增加了电子相框功能的多样化。

基于上述第一实施例提出本发明的电子相框的智能显示方法的第二实施例，请参考图3，图3为本发明的电子相框的智能显示方法第二实施例的流程示意图。在该实施例中，步骤S10也即获取电子相框所在环境的环境信息之前，包括：

步骤S40，接收到图像切换指令时，获取所述图像切换指令对应的所述目标人物图像；

步骤S50，将所述电子相框当前显示的人物图像切换为所述目标人物图像。

目标人物图像为电子相框接收到图像切换指令后，电子相框最终显示的人物图像。图像切换指令的触发可通过由用户的终端设备如手机或者穿戴设备直接发送包含有目标人物图像的图像切换指令至电子相框；也可由用户的终端设备间接通过服务器向电子相框发送包含有目标人物图像的图像切换指令；还可通过限定触发图像切换指令的操作人的方式以避免任何人随意切换电子相框显示的人物图像，对此不做限定。

将电子相框当前显示的人物图像切换为目标人物图像可通过换脸技术将电子相框当前显示的人物图像切换为目标人物图像，进而达到快速切换电子相框显示的人物图像的目的，在实际应用过程红中，可便捷且快速获取即将生命终结的人的图像，或者，重现生命已经终结的人如伟大著名的人或者先辈的图像，以表纪念。

可选地，步骤S50将所述电子相框当前显示的人物图像切换为所述目标人物图像包括：

获取所述目标人物图像的第一脸部特征点；

获取所述电子相框显示的人物图像的第二脸部特征点；

根据所述第一脸部特征点对所述第二脸部特征点进行修正，并确定修正后的所述终端设备显示的人物图像的显示位置；

输出所述目标人物图像至所述显示位置。

第一脸部特征点指的是电子相框图像切换后显示的目标人物图像的人脸特征信息，如五官特征数据信息以及脸部轮廓数据信息。第二脸部特征点指的是电子相框图像切换前显示的人物图像的人脸特征信息。其中，目标人物图像的第一脸部特征点或者电子相框显示的人物图像的第二脸部特征点可通过人脸识别工具或者软件识别获取得到。

在实际应用过程中，对电子相框中当前显示的人物图像进行切换时，为使得目标人物图像可适应于电子相框显示的人物图像进行显示，提高目标人物图像显示的真实性以及根据第一脸部特征点对第二脸部特征点进行修正，可直接基于第一脸部特征点对应于第二脸部特征点进行全部修正，也可比对第一脸部特征点以及第二脸部特征点，获取得到不匹配的目标脸部特征点，通过与该目标脸部特征点对应的第一脸部特征修正第二脸部特征点，本实施例对此步骤不做具体限定。最后，确定修正后的终端设备显示的人物图像的显示位置，输出目标人物图像至显示位置以实现电子相框的人物图像切换，达到显示目标人物图像的目的。

在本实施例公开的技术方案中，通过图像切换指令确定切换显示后的目标人物图像，进而实现用户可选择性将电子相框当前显示的人物图像切换为目标人物图像，实现电子相框动态显示人物图像的目的，且采用图像切换指令以实现图像切换实现了实时更换用户所需要显示的人物图像的目的，提高电子相框更换图片的便捷性。

基于任意一个实施例提出本发明的电子相框的智能显示方法的第三实施例，请参考图4，图4为本发明的电子相框的智能显示方法第三实施例的流程示意图。在该实施例中，电子相框的智能显示方法还包括：

步骤S60，获取所述电子相框当前的显示模式；

步骤S70，所述显示模式为交互式显示模式时，执行步骤S10获取电子相框所在环境的环境信息；或者，

步骤S80，所述显示模式为非交互显示模式时，识别所述电子相框显示的所述目标人物图像的身份信息；

步骤S90，根据所述身份信息获取所述目标人物图像的人物信息；

步骤S100，控制所述电子相框显示的目标人物图像输出所述人物信息。

显示模式可简单理解为电子相框显示的方式，容易理解的是，不同的显示模式，电子相框显示的方式不同。可选地，显示模式包括交互式模式和/或非交互式模式。其中，在电子相框的显示模式处于交互式模式时，显示于电子相框中的目标人物图像可主动与环境信息进行交互，如，通过环境信息如语音信息和/或图像信息识别到人时，可主动与人进行交互，在实际应用过程中，将电子相框放置于私人室内的环境下时，当通过电子相框识别所在室内有人且识别到人为屋主时可输出“欢迎回家”；在电子相框的显示模式处于非交互式模式时，可通过控制电子相框显示的目标人物图像输出与人物图像对应的人物信息，以便于用户获知电子相框显示的目标人物图像的人物信息，增加电子相框的功能的多样性。

获取电子相框当前的显示模式，可预先设置显示标识以确认电子相框的显示模式，并且通过获取显示标识的标识值以确认电子相框的显示模式处于交互式模式还是非交互式模式，举例来说，可预先设置显示标识的标识值为“1”时，确定电子相框的显示模式处于交互式模式，设置显示标识的标识值为“0”时，确定电子相框的显示模式处于非交互式模式。

在显示模式为交互式显示模式，也即电子相框主动与环境信息进行交互时，可执行步骤S10获取电子相框所在环境的环境信息，具体实现可参考上述第一实施例，在本实施例中不做具体说明。在显示模式为非交互式模式，也即电子相框与环境信息不进行交互时，为增加电子相框功能的多样化，可通过控制电子相框显示的目标人物图像输出与人物图像对应的人物信息，以便于用户获知电子相框显示的目标人物图像的人物信息的目的。

目标人物图像的身份信息是用于确定人的身份的唯一标识，目标人物图像的身份信息包括目标人物图像的人物标识、名称以及人脸特征中的至少一个。人物信息包括目标人物图像的简介、事迹经历以及成就中的至少一种。

识别电子相框显示的目标人物图像的身份信息，可直接由电子相框通过网络将目标人物图像发送至其他终端如服务器，进而通过服务器识别目标人物图像的身份信息，同时，获取目标人物图像的身份信息所对应的人物信息，并将目标人物图像的身份信息以及人物信息发送至电子相框，达到控制电子相框显示的目标人物图像输出人物信息的目的；也可预先在电子相框内存储一个或者多个人物图像的身份信息以及与该身份信息对应的人物信息，识别电子相框显示的目标人物图像的身份信息后，比对目标人物图像的身份信息以及预存的人物图像的身份信息，在目标人物图像的身份信息与预存的身份信息匹配时，可直接获取与预存的身份信息对应的人物信息，进而控制电子相框显示的目标人物图像输出人物信息；在目标人物图像的身份信息与预存的身份信息不匹配时，执行上述通过网络将目标人物图像发送至其他终端如服务器的步骤，本实施例对此步骤的具体实现不做限定。

进一步地，控制电子相框显示的目标人物图像输出人物信息的方式，可直接控制显示的目标人物图像通过语音方式输出人物信息；也可控制显示的目标人物图像通过语音方式对应结合其他的输出方式输出人物信息，其中，其他的输出方式包括动作以及表情中的至少一种，进而以增加电子相框中目标人物图像的动态显示的多样性，且便于在控制电子相框输出目标人物图像的人物信息时，吸引听者或者观看者的注意力，如通过电子相框输出与目标人物图像的人物信息，了解目标人物图像的成就以及经历进行学习时，提高学习效果。

在本实施例公开的技术方案中，通过明确电子相框的显示模式，以实现电子相框通过不同的显示模式以不同方式动态显示目标人物图像，实现了电子相框动态显示目标人物图像，增加了电子相框显示的多样性。此外，确定电子相框的显示模式为交互式显示模式时，可通过依据电子相框所处环境的语音信息和/或图像信息，以实现电子相框通过语音信息和/或图像信息进行的主动交互，提高电子相框的智能化；确定电子相框为非交互显示模式时，可通过控制电子相框显示的目标人物图像输出与人物图像对应的人物信息，以便于用户获知电子相框显示的目标人物图像的人物信息，增加了电子相框的功能的多样性。

基于任意一个实施例提出本发明的电子相框的智能显示方法的第四实施例，请参考图5，图5为本发明的电子相框的智能显示方法第四实施例的流程示意图。在该实施例中，步骤S20根据所述环境信息获取待输出信息包括：

步骤S21，识别所述环境信息中的人物身份信息；

步骤S22，若所述人物身份信息与授权的身份信息匹配，则获取与授权的身份信息关联的所述待输出信息。

环境信息包括语音信息和/或图像信息。人物身份信息指的是可用于唯一确定人物的身份的信息，如人物的声纹信息、指纹信息以及人脸特征等。授权的身份信息指的是预先存储于电子相框的合法的身份信息，其中，合法的身份信息表明进入电子相框所在的环境范围内的安全用户。

识别环境信息中的人物身份信息可通过识别语音信息中的声纹信息，进而根据声纹信息以识别并确定人物的身份信息；也可通过识别图像信息中的人脸特征，进而根据人脸特征确定人物的身份信息；还可同时识别语音信息以及图像信息，进而通过语音信息以及图像信息作为识别人物身份信息的参考信息，提高人物身份信息识别的准确性，避免仅通过语音信息或者图像信息识别人物身份信息存在的假冒身份行为，本实施例对此步骤的具体实现不做限定。

若人物身份信息与授权的身份信息匹配，也即表明人物为合法的用户时，获取与授权的身份信息关联的待输出信息，进而控制电子相框显示的目标人物图像输出待输出信息，以对应于该授权的身份信息的人进行针对性交互。其中，获取与授权的身份信息关联的待输出信息可通过预先设置授权的身份信息与待输出信息的对应关系，进而基于该对应关系获取与授权的身份信息对应的待输出信息。

可以理解的是，步骤S21识别所述环境信息中的人物身份信息之后，包括：若所述人物身份信息与授权的身份信息不匹配，则保存所述环境信息。

若人物身份信息与授权的身份信息不匹配，也即表明人物为非法的用户时，通过保存环境信息可便于留取证据实现对非法的用户的可追溯。举例来说，当电子相框所在环境放置于用户室内时，可在识别到环境信息中的人物的人物身份信息与授权的身份信息不匹配的情况下，为避免存在室内盗窃无法追溯的情况，通过保存环境信息如语音信息和/或图像信息，以实现对非法进入室内的人物进行取证追溯，进一步增加了电子相框功能的多样性。

在本实施例公开的技术方案中，通过识别环境信息中的人物身份信息是否为授权的身份信息，以判定进入电子相框所在环境中的人是否是合法用户，在人物身份信息为授权的身份信息，也即进入电子相框所在环境中的人是合法用户时，以适应于环境中的人获取待输出信息如语音信息、表情信息和/或动作信息，主动与授权的身份信息进行交互，提高电子相框的智能化，且增加电子相框功能的多样性。

本发明还提供一种电子相框，电子相框包括存储器、处理器以及存储在存储器里并可在处理器上运行的电子相框的智能显示程序，电子相框的智能显示程序被处理器执行时实现上述任一实施例中的电子相框的智能显示方法的步骤。

本发明还提供一种可读存储介质，可读存储介质上存储有电子相框的智能显示程序，电子相框的智能显示程序被处理器执行时实现上述任一实施例中的电子相框的智能显示方法的步骤。

在本发明提供的终端和可读存储介质的实施例中，包含了上述电子相框的智能显示方法各实施例的全部技术特征，说明书拓展和解释内容与上述电子相框的智能显示方法的各实施例基本相同，在此不做再赘述。

需要说明的是，在本文中，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者系统不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者系统所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括该要素的过程、方法、物品或者系统中还存在另外的相同要素。

上述本发明实施例序号仅仅为了描述，不代表实施例的优劣。

通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在如上的一个存储介质(如ROM/RAM、磁碟、光盘)中，包括若干指令用以使得一台移动终端(可以是手机，计算机，服务器，被控终端，或者网络设备等)执行本发明每个实施例的方法。

以上仅为本发明的优选实施例，并非因此限制本发明的专利范围，凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换，或直接或间接运用在其他相关的技术领域，均同理包括在本发明的专利保护范围内。