口腔健康管理相关系统、方法、装置及设备

摘要

本申请公开了口腔健康管理相关系统、方法、装置和设备。其中，所述口腔健康管理系统通过客户端采集用户的口腔影像数据，向服务端发送针对该口腔影像数据的口腔健康预测请求；服务端根据所述影像数据，确定所述口腔健康信息；客户端显示服务端回送的口腔健康信息。采用这种处理方式，使得结合用户随拍的口腔影像、及用户描述的口腔健康相关信息，通过基于人工智能技术实现的口腔健康预测模型进行口腔健康的识别处理；因此，可以有效提升口腔健康识别的准确率和用户使用便利度，从而提升用户体验。

说明书

技术领域

本申请涉及数据处理技术领域，具体涉及口腔健康管理系统、方法和装置，口腔健康预测模型构建方法和装置，口腔健康知识库构建方法和装置，口腔健康信息推荐系统、方法和装置，牙齿形态发展预测系统、方法和装置，未来牙齿形态图像确定模型构建方法和装置，以及电子设备。

背景技术

口腔疾病(比如龋齿、牙龈疾病等)属于当今最普遍的人类疾病，然而由于口腔医疗资源严重缺乏且分布不均，因此导致很多患者都无法得到及时的诊疗。为了解决这个问题，互联网与口腔医疗健康的深度融合成为研究热点，该技术致力于将深度学习和口腔医疗影像相结合，革新口腔疾病筛查和诊断方式，以提高医疗服务效率。

目前，自助口腔检查技术集中在以图片识别为主的口腔服务。一种典型的自助口腔检查系统是，由用户通过客户端拍摄口腔图像，由后台通过简单图片分类算法，基于拍摄的口腔图像对牙齿进行一些简单的分类。该技术没有使用人工智能网络算法，而是通过对光学仪器的拍摄图片的亮度标注差，平均值，变化系数等验证图片识别的准确性，可检测出如良性恶性口腔癌，白斑，口腔扁平苔藓,鳞状细胞癌等疾病。另一种典型的自助口腔检查系统是，基于有创的X光图片，并非自然图像，通过人工智能的目标检测Region-CNN(R-CNN)方法，对牙尖周膜中的牙齿进行检测和编号，可识别出牙龈萎缩，牙龈暗沉，牙龈弹性三种疾病，其性能接近初级牙医的水平。

然而，在实现本发明过程中，发明人发现现有技术方案至少存在如下问题：上述方案只是基于口腔图像实现口腔健康识别，但是口腔图像只包括有限的口腔信息，特别是自然图像包括的口腔信息更少，仅仅通过口腔图像并不能完全体现患者的口腔健康情况，这种根据有限口腔信息进行口腔健康识别的方式就会导致漏诊、误诊等情况的频繁发生。综上所述，如何提升口腔健康识别准确率，以提升用户体验，成为本领域技术人员需要迫切解决的问题。

发明内容

本申请提供口腔健康管理系统，以解决现有技术存在的口腔健康识别准确率较低的问题。本申请另外提供口腔健康管理方法和装置，口腔健康预测模型构建方法和装置，口腔健康知识库构建方法和装置，口腔健康信息推荐系统、方法和装置，牙齿形态发展预测系统、方法和装置，未来牙齿形态图像确定模型构建方法和装置，以及电子设备。

本申请提供一种口腔健康管理系统，包括：

客户端，用于采集用户的口腔影像数据，向服务端发送针对所述口腔影像数据的口腔健康预测请求；以及，显示服务端回送的所述用户的口腔健康信息；

服务端，用于接收所述请求；通过口腔健康预测模型，根据所述影像数据和所述用户的非影像形式的口腔健康预测相关信息，确定所述口腔健康信息。

本申请还提供一种口腔健康管理方法，包括：

采集用户的口腔影像数据；

向服务端发送针对所述口腔影像数据的口腔健康预测请求；

显示服务端回送的所述用户的口腔健康信息。

可选的，还包括：

采集用户的非影像形式的口腔健康预测相关信息；

向服务端发送所述非影像形式的口腔健康预测相关信息。

可选的，所述非影像形式的口腔健康预测相关信息包括：文本形式的口腔健康预测相关信息，语音形式的口腔健康预测相关信息。

可选的，还包括：

接收服务端发送的与口腔健康预测相关的询问信息；

根据所述询问信息，采集所述非影像形式的口腔健康预测相关信息。

本申请还提供一种口腔健康管理方法，包括：

接收针对目标用户的口腔影像数据的口腔健康预测请求；

通过口腔健康预测模型，根据所述影像数据和所述用户的非影像形式的口腔健康预测相关信息，确定目标用户的口腔健康信息；

向请求方回送所述口腔健康信息。

可选的，所述非影像形式的口腔健康预测相关信息包括：病情描述信息，用户信息。

可选的，所述通过口腔健康预测模型，根据所述影像数据和所述用户的非影像形式的口腔健康预测相关信息，确定目标用户的口腔健康信息，包括：

通过口腔健康预测模型包括的第一预测网络，根据所述影像数据，确定第一口腔健康信息；以及，确定与口腔健康预测相关的询问信息；

向请求方发送所述询问信息，接收请求方发送的针对所述询问信息的答复信息提交请求，将所述答复信息作为所述非影像形式的口腔健康预测相关信息；

通过口腔健康预测模型包括的第二预测网络，根据所述第一口腔健康信息和所述非影像形式的口腔健康预测相关信息，确定第二口腔健康信息，作为所述目标用户的口腔健康信息。

可选的，根据所述第一口腔健康信息，确定与口腔健康预测相关的询问信息。

可选的，根据口腔健康知识库和所述第一口腔健康信息，确定与口腔健康预测相关的询问信息。

可选的，所述目标用户为儿童用户；

所述第一口腔健康信息包括：牙齿类型；

所述非影像形式的口腔健康预测相关信息，包括：儿童年龄，多种牙齿类型的换牙规律；

所述口腔健康信息包括：儿童换牙期的牙齿健康恢复方案信息。

可选的，所述通过口腔健康预测模型包括的第一预测网络，根据所述影像数据，确定第一口腔健康信息，包括：

通过所述第一预测网络包括的第一口腔健康特征提取子网络，从所述影像数据中提取第一口腔健康特征；

通过所述第一预测网络包括的第一口腔健康预测子网络，根据所述第一口腔健康特征，确定所述第一口腔健康信息；

所述通过口腔健康预测模型包括的第二预测网络，根据所述第一口腔健康信息和所述非影像形式的口腔健康预测相关信息，确定第二口腔健康信息，包括：

通过所述第二预测网络包括的第二口腔健康特征提取子网络，根据所述第一口腔健康信息和所述非影像形式的口腔健康预测相关信息，确定第二口腔健康特征；

通过所述第二预测网络包括的口腔健康预测子网络，根据所述第二口腔健康特征，确定所述第二口腔健康信息。

可选的，还包括：

从第一训练数据集中学习得到所述第一预测网络的网络参数；

将第一预测网络的卷积层网络参数作为第二预测网络中卷积层的初始网络参数；

从第二训练数据集中学习得到所述第二预测网络的网络参数。

可选的，还包括：

从用户信息数据库中查询所述用户信息。

可选的，还包括：

根据所述口腔健康信息，生成口腔健康报告；

向请求方回送所述口腔健康报告。

可选的，所述口腔健康信息包括：牙齿健康恢复方案信息，恢复方案导致的后遗症信息。

本申请还提供一种口腔健康预测模型构建方法，包括：

确定训练数据集；所述训练数据包括口腔影像数据、非影像形式的口腔健康预测相关信息、及口腔健康标注信息；

构建口腔健康预测模型的网络结构；

根据所述训练数据集对所述模型的网络参数进行训练，得到所述模型。

可选的，所述口腔健康预测模型包括第一预测网络，用于根据所述影像数据，确定第一口腔健康信息；

所述口腔健康预测模型包括第二预测网络，用于根据所述第一口腔健康信息和所述非影像形式的口腔健康预测相关信息，确定第二口腔健康信息，作为所述目标用户的口腔健康信息。

可选的，所述第一预测网络包括第一口腔健康特征提取子网络，用于从所述影像数据中提取第一口腔健康特征；

所述第一预测网络包括第一口腔健康预测子网络，用于根据所述第一口腔健康特征，确定所述第一口腔健康信息；

所述第二预测网络包括第二口腔健康特征提取子网络，用于根据所述第一口腔健康信息和所述非影像形式的口腔健康预测相关信息，确定第二口腔健康特征；

所述第二预测网络包括口腔健康预测子网络，用于根据第二口腔健康特征，确定所述第二口腔健康信息。

可选的，从第一训练数据集中学习得到所述第一预测网络的网络参数；

将第一预测网络的卷积层网络参数作为第二预测网络中卷积层的初始网络参数；

从第二训练数据集中学习得到所述第二预测网络的网络参数。

本申请还提供一种口腔健康知识库构建方法，包括：

确定口腔健康问答知识信息；

根据口腔健康问答知识信息，构建所述知识库。

本申请还提供一种口腔健康管理装置，包括：

影像采集单元，用于采集用户的口腔影像数据；

请求发送单元，用于向服务端发送针对所述口腔影像数据的口腔健康预测请求；

信息显示单元，用于显示服务端回送的所述用户的口腔健康信息。

本申请还提供一种电子设备，包括：

处理器；以及

存储器，用于存储实现口腔健康管理方法的程序，该设备通电并通过所述处理器运行该方法的程序后，执行下述步骤：采集用户的口腔影像数据；向服务端发送针对所述口腔影像数据的口腔健康预测请求；显示服务端回送的所述用户的口腔健康信息。

本申请还提供一种口腔健康管理装置，包括：

请求接收单元，用于接收针对目标用户的口腔影像数据的口腔健康预测请求；

健康预测单元，用于通过口腔健康预测模型，根据所述影像数据和所述用户的非影像形式的口腔健康预测相关信息，确定目标用户的口腔健康信息；

信息发送单元，用于向请求方回送所述口腔健康信息。

本申请还提供一种电子设备，包括：

处理器；以及

存储器，用于存储实现口腔健康管理方法的程序，该设备通电并通过所述处理器运行该方法的程序后，执行下述步骤：接收针对目标用户的口腔影像数据的口腔健康预测请求；通过口腔健康预测模型，根据所述影像数据和所述用户的非影像形式的口腔健康预测相关信息，确定目标用户的口腔健康信息；向请求方回送所述口腔健康信息。

可选的，所述设备包括：智能手机，智能音箱，平板电脑，个人电脑。

本申请还提供一种口腔健康预测模型构建装置，包括：

训练数据确定单元，用于确定训练数据集；所述训练数据包括口腔影像数据、非影像形式的口腔健康预测相关信息、及口腔健康标注信息；

网络构建单元，用于构建口腔健康预测模型的网络结构；

网络训练单元，用于根据所述训练数据集对所述模型的网络参数进行训练，得到所述模型。

本申请还提供一种电子设备，包括：

处理器；以及

存储器，用于存储实现口腔健康预测模型构建方法的程序，该设备通电并通过所述处理器运行该方法的程序后，执行下述步骤：确定训练数据集；所述训练数据包括口腔影像数据、非影像形式的口腔健康预测相关信息、及口腔健康标注信息；构建口腔健康预测模型的网络结构；根据所述训练数据集对所述模型的网络参数进行训练，得到所述模型。

本申请还提供一种口腔健康知识库构建装置，包括：

知识确定单元，用于确定口腔健康问答知识信息；

知识库构建单元，用于根据口腔健康问答知识信息，构建所述知识库。

本申请还提供一种电子设备，包括：

处理器；以及

存储器，用于存储实现口腔健康知识库构建方法的程序，该设备通电并通过所述处理器运行该方法的程序后，执行下述步骤：确定口腔健康问答知识信息；根据口腔健康问答知识信息，构建所述知识库。

本申请还提供一种口腔健康信息推荐系统，包括：

客户端，用于采集用户的口腔影像数据，向服务端发送针对所述口腔影像数据的个性化口腔健康信息推荐请求；以及，显示服务端回送的所述用户的口腔健康恢复相关信息；

服务端，用于接收所述请求；根据所述影像数据，确定所述用户的口腔健康信息；根据所述口腔健康信息，确定所述口腔健康恢复相关信息。

本申请还提供一种口腔健康信息推荐方法，包括：

采集用户的口腔影像数据；

向服务端发送针对所述口腔影像数据的个性化口腔健康信息推荐请求；

显示服务端回送的所述用户的口腔健康恢复相关信息。

本申请还提供一种口腔健康信息推荐方法，包括：

接收针对目标用户的口腔影像数据的个性化口腔健康信息推荐请求；

根据所述影像数据，确定目标用户的口腔健康信息；

根据所述口腔健康信息，确定所述目标用户的口腔健康恢复相关信息；

向请求方回送所述口腔健康恢复相关信息。

可选的，通过口腔健康预测模型，根据所述影像数据和所述目标用户的非影像形式的口腔健康预测相关信息，确定目标用户的口腔健康信息。

可选的，所述口腔健康恢复相关信息包括：口腔清洁相关信息，口腔健康科普信息，口腔治疗资源信息。

可选的，还包括：

确定所述目标用户的个人信息；

根据所述口腔健康信息和所述个人信息，确定所述口腔健康恢复相关信息。

可选的，所述目标用户为儿童；

所述根据所述口腔健康信息和所述个人信息，确定所述口腔健康恢复相关信息，可采用如下方式的至少一种：

根据用户年龄及患病牙齿的换牙规律信息，确定要暂时保留的、对未来牙齿生长有影响的患病牙齿；

根据用户年龄及患病牙齿的换牙规律信息，确定要拔掉、对未来牙齿生长无影响的患病牙齿。

可选的，根据所述口腔健康信息，确定所述目标用户的口腔健康类型；

根据所述口腔健康类型，确定所述口腔健康恢复相关信息。

可选的，所述口腔健康恢复相关信息包括：口腔医美服务信息，口腔医院信息；

所述方法还包括：

确定所述目标用户的位置信息；

根据所述口腔健康信息和所述位置信息，确定所述口腔健康恢复相关信息。

可选的，所述口腔健康恢复相关信息包括：在线口腔医生信息；

所述方法还包括：

接收请求方针对所述在线口腔医生的在线诊疗服务请求；

为所述目标用户和所述在线口腔医生提供在线诊疗信息交流服务。

可选的，所述口腔健康恢复相关信息包括：口腔清洁用品信息；

所述根据所述口腔健康信息，确定所述目标用户的口腔健康恢复相关信息，采用如下方式的至少一种：

若所述口腔健康信息包括用户牙齿变色的信息，则将具有牙齿美白功效的牙膏信息作为口腔清洁用品信息；

若所述口腔健康信息包括用户刷牙易出血的信息，则将具有止血功效的牙膏信息作为口腔清洁用品信息；

若所述口腔健康信息包括用户刷牙易出血的信息，则将牙刷刷毛达到预设柔软度阈值的牙刷信息作为口腔清洁用品信息；

若所述口腔健康信息包括用户换有牙周炎的信息，则将具有消炎功效的牙膏作为口腔清洁用品信息；

若所述口腔健康信息包括用户换有牙周炎的信息，则将具有口气清新功效的漱口水作为口腔清洁用品信息。

可选的，还包括：

向请求方推送口腔清洁用品购物链接。

可选的，所述口腔健康恢复相关信息包括：口腔健康科普信息；

所述根据所述口腔健康信息，确定所述目标用户的口腔健康恢复相关信息，采用如下方式的至少一种：

若所述口腔健康信息包括用户牙齿变色的信息，则将有关牙齿美白的信息作为口腔健康科普信息；

若所述口腔健康信息包括用户刷牙易出血的信息，则将有关正确刷牙方法的信息作为口腔健康科普信息；

若所述口腔健康信息包括用户换有牙周炎的信息，则将有关饮食习惯对牙周炎影响的信息作为口腔健康科普信息。

可选的，所述口腔健康恢复相关信息包括：口腔健康科普信息；

所述根据所述口腔健康信息，确定所述目标用户的口腔健康恢复相关信息，包括：

通过自然语言处理算法，确定与所述口腔健康信息中各个病症信息匹配的所述口腔健康科普信息。

可选的，所述口腔健康恢复相关信息包括：口腔健康科普信息；

所述根据所述口腔健康信息，确定所述目标用户的口腔健康恢复相关信息，包括：

根据所述口腔健康信息，确定所述目标用户的口腔健康类型；

根据所述口腔健康类型与口腔健康科普信息之间的对应关系，确定针对所述目标用户的口腔健康科普信息。

可选的，所述口腔健康恢复相关信息包括：个性化口腔清洁用品定制信息；

所述方法还包括：

接收针对所述定制信息的个性化口腔清洁用品定制请求；

向口腔清洁用品用户推送目标用户定制所述个性化口腔清洁用品的信息。

可选的，所述口腔健康信息包括口腔以外的身体健康信息；

所述方法还包括：

根据医生的专业领域信息和/或医院的专业领域信息、所述口腔健康信息和所述身体健康信息，确定向所述目标用户推送的多种口腔治疗资源信息。

本申请还提供一种口腔健康信息推荐装置，包括：

影像采集单元，用于采集用户的口腔影像数据；

请求发送单元，用于向服务端发送针对所述口腔影像数据的个性化口腔健康信息推荐请求；

信息显示单元，用于显示服务端回送的所述用户的口腔健康恢复相关信息。

本申请还提供一种电子设备，包括：

处理器；以及

存储器，用于存储实现口腔健康信息推荐方法的程序，该设备通电并通过所述处理器运行该方法的程序后，执行下述步骤：采集用户的口腔影像数据；向服务端发送针对所述口腔影像数据的个性化口腔健康信息推荐请求；显示服务端回送的所述用户的口腔健康恢复相关信息。

本申请还提供一种口腔健康信息推荐装置，包括：

请求接收单元，用于接收针对目标用户的口腔影像数据的个性化口腔健康信息推荐请求；

健康信息确定单元，用于根据所述影像数据，确定目标用户的口腔健康信息；

健康恢复相关信息确定单元，用于根据所述口腔健康信息，确定所述目标用户的口腔健康恢复相关信息；

健康恢复相关信息发送单元，用于向请求方回送所述口腔健康恢复相关信息。

本申请还提供一种电子设备，包括：

处理器；以及

存储器，用于存储实现口腔健康信息推荐方法的程序，该设备通电并通过所述处理器运行该方法的程序后，执行下述步骤：接收针对目标用户的口腔影像数据的个性化口腔健康信息推荐请求；根据所述影像数据，确定目标用户的口腔健康信息；根据所述口腔健康信息，确定所述目标用户的口腔健康恢复相关信息；向请求方回送所述口腔健康恢复相关信息。

本申请还提供一种牙齿形态发展预测系统，包括：

客户端，用于采集用户的口腔影像数据，向服务端发送针对所述口腔影像数据的牙齿形态发展预测请求；以及，显示服务端回送的所述用户的未来牙齿形态图像信息；

服务端，用于接收所述请求；根据所述影像数据，生成所述未来牙齿形态图像信息，向所述客户端回送所述图像信息。

本申请还提供一种牙齿形态发展预测方法，包括：

采集用户的口腔影像数据；

向服务端发送针对所述口腔影像数据的牙齿形态发展预测请求；

显示服务端回送的所述用户的未来牙齿形态图像信息。

本申请还提供一种牙齿形态发展预测方法，包括：

接收针对目标用户的口腔影像数据的牙齿形态发展预测请求；

根据所述影像数据，生成所述目标用户的未来牙齿形态图像信息；

向请求方回送所述图像信息。

可选的，通过基于计算机视觉生成对抗网络结构的未来牙齿形态图像确定模型，根据所述影像数据，生成所述图像信息。

可选的，根据所述目标用户的口腔健康相关信息和所述影像数据，生成所述目标用户的未来牙齿形态图像信息。

可选的，所述图像信息包括三维图像信息；

所述方法还包括：

生成包括目标口腔三维图像和所述目标用户的未来牙齿形态三维图像的融合图像信息；

向请求方回送所述融合图像信息。

可选的，所述目标用户为儿童；

所述影像数据包括儿童换牙前的口腔影像数据；

所述未来牙齿形态图像信息包括儿童换牙后的牙齿图像信息。

可选的，还包括：

根据所述影像数据和所述未来牙齿形态图像信息，确定所述目标用户的整牙方案信息；

向请求方回送所述整牙方案信息。

可选的，所述口腔健康相关信息包括口腔健康信息；

通过口腔健康预测模型，根据所述影像数据和所述用户的非影像形式的口腔健康预测相关信息，确定所述口腔健康信息。

本申请还提供一种牙齿形态发展预测装置，包括：

影像采集单元，用于采集用户的口腔影像数据；

请求发送单元，用于向服务端发送针对所述口腔影像数据的牙齿形态发展预测请求；

信息显示单元，用于显示服务端回送的所述用户的未来牙齿形态图像信息。

本申请还提供一种电子设备，包括：

处理器；以及

存储器，用于存储实现牙齿形态发展预测方法的程序，该设备通电并通过所述处理器运行该方法的程序后，执行下述步骤：采集用户的口腔影像数据；向服务端发送针对所述口腔影像数据的牙齿形态发展预测请求；显示服务端回送的所述用户的未来牙齿形态图像信息。

本申请还提供一种牙齿形态发展预测装置，包括：

请求接收单元，用于接收针对目标用户的口腔影像数据的牙齿形态发展预测请求；

未来图像生成单元，用于根据所述影像数据，生成所述目标用户的未来牙齿形态图像信息；

图像发送单元，用于向请求方回送所述图像信息。

本申请还提供一种电子设备，包括：

处理器；以及

存储器，用于存储实现牙齿形态发展预测方法的程序，该设备通电并通过所述处理器运行该方法的程序后，执行下述步骤：接收针对目标用户的口腔影像数据的牙齿形态发展预测请求；根据所述影像数据，生成所述目标用户的未来牙齿形态图像信息；向请求方回送所述图像信息。

本申请还提供一种未来牙齿形态图像确定模型构建方法，包括：

确定训练数据集；所述训练数据包括第一口腔影像数据和第二口腔影像数据间的对应关系；

构建未来牙齿形态图像确定模型的网络结构；

根据所述训练数据集对所述模型的网络参数进行训练，得到所述模型。

本申请还提供一种未来牙齿形态图像确定模型构建装置，包括：

训练数据确定单元，用于确定训练数据集；所述训练数据包括第一口腔影像数据和第二口腔影像数据间的对应关系；

网络构建单元，用于构建未来牙齿形态图像确定模型的网络结构；

网络训练单元，用于根据所述训练数据集对所述模型的网络参数进行训练，得到所述模型。

本申请还提供一种电子设备，包括：

处理器；以及

存储器，用于存储实现未来牙齿形态图像确定模型构建方法的程序，该设备通电并通过所述处理器运行该方法的程序后，执行下述步骤：确定训练数据集；所述训练数据包括第一口腔影像数据和第二口腔影像数据间的对应关系；构建未来牙齿形态图像确定模型的网络结构；根据所述训练数据集对所述模型的网络参数进行训练，得到所述模型。

本申请还提供一种计算机可读存储介质，所述计算机可读存储介质中存储有指令，当其在计算机上运行时，使得计算机执行上述各种方法。

本申请还提供一种包括指令的计算机程序产品，当其在计算机上运行时，使得计算机执行上述各种方法。

与现有技术相比，本申请具有以下优点：

本申请实施例提供的口腔健康管理系统，通过客户端采集用户的口腔影像数据，向服务端发送针对该口腔影像数据的口腔健康预测请求；服务端通过口腔健康预测模型，根据所述影像数据和所述用户的非影像形式的口腔健康预测相关信息，确定所述口腔健康信息；客户端显示服务端回送的口腔健康信息；这种处理方式，使得结合用户随拍的口腔影像、及用户描述的口腔健康相关信息(如病人年龄，病史，当前症状等)，通过基于人工智能技术实现的口腔健康预测模型进行口腔健康的识别处理；因此，可以有效提升口腔健康识别的准确率，从而提升用户体验。此外，这种处理方式将口腔健康预测与用户客户端(如智能手机、智能牙刷)相结合，实现客户端端对用户进行口腔健康预测；因此，可以有效提升用户使用便利度，从而提升用户口腔健康检测的及时性，进而提升用户体验。

本申请实施例提供的口腔健康预测模型构建方法，通过确定训练数据集；所述训练数据包括口腔影像数据、非影像形式的口腔健康预测相关信息、及口腔健康标注信息；构建口腔健康预测模型的网络结构；根据所述训练数据集对所述模型的网络参数进行训练，得到所述模型；这种处理方式，使得从训练数据中学习得到口腔健康预测模型，该模型能够根据用户随拍的口腔影像和用户的非影像形式的口腔健康预测相关信息，确定所述口腔健康信息；因此，可以有效提升口腔健康预测的准确度和效率，从而提升用户体验。

本申请实施例提供的口腔健康信息推荐系统，通过客户端采集用户的口腔影像数据，向服务端发送针对所述口腔影像数据的个性化口腔健康信息推荐请求；以及，显示服务端回送的所述用户的口腔健康恢复相关信息；服务端接收所述请求；根据所述影像数据，确定所述用户的口腔健康信息；根据所述口腔健康信息，确定所述口腔健康恢复相关信息；向所述客户端回送所述口腔健康恢复相关信息；这种处理方式，使得向用户推送与其牙齿损坏情况相匹配的处理信息，使得用户更有针对性的对自身的牙齿损坏进行治疗或保健，避免错过治疗时机，从而提高治疗效果。

本申请实施例提供的牙齿形态发展预测系统，通过客户端采集用户的口腔影像数据，向服务端发送针对所述口腔影像数据的牙齿形态发展预测请求；以及，显示服务端回送的所述用户的未来牙齿形态图像信息；服务端接收所述请求；根据所述影像数据，生成所述未来牙齿形态图像信息，向所述客户端回送所述图像信息；这种处理方式，使得用户可查看受其当前牙齿损坏程度的影响，牙齿在未来时期可能发生的形态变化图像，使用户能够直观的了解到不及时治疗口腔疾病可能导致的后果，促使用户及时对自身的牙齿损坏进行治疗或保健，避免错过治疗时机，从而提高治疗效果。

本申请实施例提供的未来牙齿形态图像确定模型构建方法，通过确定训练数据集；所述训练数据包括第一口腔影像数据和第二口腔影像数据间的对应关系；构建未来牙齿形态图像确定模型的网络结构；根据所述训练数据集对所述模型的网络参数进行训练，得到所述模型；这种处理方式，使得从训练数据中学习得到未来牙齿形态图像确定模型，该模型能够根据用户随拍的口腔影像预测用户的未来牙齿形态图像；因此，可以有效提升未来牙齿形态图像预测的准确度和效率，从而提升用户体验。

附图说明

图1本申请提供的一种口腔健康管理系统的实施例的结构图；

图2本申请提供的一种口腔健康管理系统的实施例的应用场景示意图；

图3本申请提供的一种口腔健康管理系统的实施例的设备交互示意图；

图4本申请提供的一种口腔健康管理系统的实施例的具体设备交互示意图；

图5本申请提供的一种口腔健康信息推荐系统的实施例的设备交互示意图；

图6本申请提供的一种牙齿形态发展预测系统的实施例的设备交互示意图。

具体实施方式

在下面的描述中阐述了很多具体细节以便于充分理解本申请。但是本申请能够以很多不同于在此描述的其它方式来实施，本领域技术人员可以在不违背本申请内涵的情况下做类似推广，因此本申请不受下面公开的具体实施的限制。

在本申请中，提供了口腔健康管理系统、方法和装置，口腔健康预测模型构建方法和装置，口腔健康知识库构建方法和装置，口腔健康信息推荐系统、方法和装置，牙齿形态发展预测系统、方法和装置，未来牙齿形态图像确定模型构建方法和装置，以及电子设备。在下面的实施例中逐一对各种方案进行详细说明。

第一实施例

请参考图1，其为本申请的口腔健康管理系统的实施例的结构图。该系统包括：服务端1，客户端2。

所述服务端1，可以是部署在云端服务器上的服务端，也可以是专用于实现口腔健康管理的服务器，可部署在数据中心。服务器，可以是集群服务器，也可以是单台服务器。

所述客户端2包括但不限于移动通讯设备，即：通常所说的手机或者智能手机，还包括智能牙刷、智能音箱、个人电脑、PAD、iPad等终端设备。

请参考图2，其为本申请的口腔健康管理系统的场景示意图。服务端1和客户端2间可通过网络连接，如客户端2可通过WIFI等方式联网，等等。口腔疾病患者用户可通过智能音箱、智能手机等客户端配备的图像采集装置，对准用户的口腔部位，采集用户的口腔影像数据，客户端将采集到的影像数据发送至服务端，服务端根据所述影像数据，并将该检测结果回送至客户端显示，以便于用户查看等等。

请参考图3，其为本申请的口腔健康管理系统的实施例的设备交互示意图。在本实施例中，客户端采集用户的口腔影像数据，向服务端发送针对所述口腔影像数据的口腔健康预测请求；以及，显示服务端回送的所述用户的口腔健康信息；服务端接收所述请求；通过口腔健康预测模型，根据所述影像数据和所述用户的非影像形式的口腔健康预测相关信息，确定所述口腔健康信息；向所述客户端回送所述口腔健康信息。

所述口腔健康预测请求，至少包括所述口腔影像数据，此外还可包括用户标识等信息。其中，所述口腔影像数据，可以是一段口腔视频中的多帧影像数据，通过针对口腔部位进行多角度拍摄，使得获取到的多帧影像数据可包括较为全面的口腔信息，如所有牙齿的图像等。所述口腔影像数据，也可以是对准口腔的某个部位进行一次拍摄得到的一幅口腔图像的数据。

在一个示例中，客户端为智能手机或智能音箱等等终端设备，该设备上可装载有口腔健康管理应用APP，用户打开该APP后，可通过APP提供的操作选项(如“口腔健康检测”选项)，启动口腔影像数据的采集处理，如可通过智能手机或智能音箱等配备的CMOS/CCD摄像头，拍摄采集N帧口腔部位连续影像，进行口腔健康检测。

在另一个实例中，客户端为智能手机或智能音箱等等终端设备，该设备与智能牙刷连接(二者可通过无线方式连接或有线方式连接)，用户在刷牙时可开启智能牙刷的图像采集功能，如发现牙齿流血则拍摄该部位的图像，可通过设置在智能牙刷表面的摄像头采集所述口腔影像数据，将该影像数据发送至客户端，客户端将该数据发送至服务端。

具体实施时，用户可预先通过客户端注册服务端提供的口腔健康管理服务，成为该服务的注册用户。客户端向服务端发送的所述口腔健康确定请求，可包括所述口腔影像数据和用户标识。

需要说明的是，如图2所示，由于客户端的图像采集装置通常为摄像头，因此其拍摄的一帧所述口腔影像数据通常为口腔内的局部影像数据，用户通常可对准其认为有问题的牙齿部分进行拍摄。

服务端接收到所述请求后，可通过口腔健康预测模型，根据所述影像数据和所述用户的非影像形式的口腔健康预测相关信息，确定用户的口腔健康信息；向所述客户端回送所述口腔健康信息。

所述非影像形式的口腔健康预测相关信息，可以是文本形式的口腔健康预测相关信息，也可以是语音形式的口腔健康预测相关信息。例如，用户可以通过输入文字方式描述当前口腔病症，也可以通过语音方式描述当前口腔病症。

所述非影像形式的口腔健康预测相关信息，包括但不限于以下信息的至少一项：用户个人信息，病情描述信息。其中，用户个人信息可以包括年龄、性别、饮食习惯等多方面信息。

具体实施时，可以预先在服务端中构建口腔健康数据库，将用户个人信息存储在该数据库中。服务端根据所述口腔健康预测请求携带的用户标识，从数据库中查询得到用户个人信息，以便于根据用户个人信息和所述影像数据等，确定用户的口腔健康信息。

具体实施时，也可以是客户端采集用户的非影像形式的口腔健康预测相关信息；向服务端发送所述非影像形式的口腔健康预测相关信息。例如，客户端接收服务端发送的与口腔健康预测相关的询问信息；根据所述询问信息，采集所述非影像形式的口腔健康预测相关信息。采用这种处理方式，使得用户通过客户端回复服务端提出的有关口腔疾病的询问信息，将这些问答信息作为所述非影像形式的口腔健康预测相关信息，以便于根据口腔健康问答信息和所述影像数据，确定用户的口腔健康信息。

所述口腔健康预测模型，可以是人工智能模型，采用人类智能相似的方式做出口腔健康预测反应。所述口腔健康预测模型，其网络结构可以包括DNN，CNN，RNN等等常见的神经网络结构。

所述口腔健康信息，可包括多个口腔健康类型信息，也就是说，所述模型口腔健康预测可以是一个针对口腔健康类型的多分类模型，可识别出多种口腔健康问题。所述口腔健康类型，可以是常见口腔健康问题，如龋齿、牙周炎、牙龈萎缩等。此外，所述口腔健康信息还可包括各种口腔健康类型的健康程度，如牙龈萎缩程度、牙齿变色程度等等。此外，所述口腔健康信息还可包括针对用户目前口腔健康状况的一些有关口腔健康恢复的建议信息，如建议做烤瓷牙、拔牙、补牙等等。进一步的，针对建议治牙方案，所述口腔健康信息还可包括各种治牙方式可能引发的问题，如后遗症、不适感、假牙保质期、烤瓷牙注意事项等等，以便用户做决策。

在一个示例中，针对儿童用户而言，所述口腔健康信息给出的牙齿健康恢复方案信息可采用如下方式确定：根据儿童实际年龄及其有问题牙齿的类型(如切牙、尖牙、双尖牙和磨牙等)、及不同类型牙齿的换牙规律，确定暂时保留对未来牙齿生长有影响的问题牙齿、拔掉其它对未来牙齿生长无影响的问题牙齿。具体实施时，可根据实际需求确定所述口腔健康信息。采用这种处理方式，使得可根据小孩换牙前的牙齿问题，给出牙齿健康恢复方案信息，以便于家长根据这些信息提前考虑整牙方案。

请参考图4，其为本申请的口腔健康管理系统的实施例的口腔健康预测模型示意图。在本实施例中，口腔健康预测模型包括第一预测网络和第二预测网络。服务端通过第一预测网络，根据所述影像数据，确定第一口腔健康信息；以及，确定与口腔健康预测相关的询问信息；向客户端发送所述询问信息，接收客户端发送的针对所述询问信息的答复信息提交请求，将所述答复信息作为所述非影像形式的口腔健康预测相关信息；通过口腔健康预测模型包括的第二预测网络，根据所述第一口腔健康信息和所述非影像形式的口腔健康预测相关信息，确定第二口腔健康信息，作为所述目标用户的口腔健康信息。

所述第一预测网络和第二预测网络，可采用多层CNN卷积神经网络,也可采用其它神经网络结构，如基于注意力机制的神经网络等。

在本实施例中，所述影像数据可经过深度学习的第一预测网络回归出各类潜在疾病的概率图，作为第一口腔健康信息。第一预测网络可采用如resnet，densenet等。具体实施时，第一预测网络的中间层可输出其网络特征，如卷积层权重等等，将这些网络特征输入值第二预测网络，达到网络特征融合，以便于提升第二预测网络的预测准确度。

在本实施例中，服务端部署有关口腔健康的自动问答系统，可根据所述第一预测网络输出的第一口腔健康信息，确定与口腔健康预测相关的询问信息。具体实施时，服务端可预先构建口腔健康知识库，根据口腔健康知识库和第一口腔健康信息，自动确定与口腔健康预测相关的询问信息。

所述询问信息，包括但不限于：病情询问信息，用户信息询问信息。所述口腔健康知识库，可包括口腔疾病问诊过程中的常见问题，如“牙齿感觉有何不适”，“牙齿疼了多长时间”，“口腔病史”，“刷牙习惯”；还可包括针对不同类型用户的问题，如针对成年男子询问“抽烟史”，针对儿童询问“喝什么种类的牛奶”等等；还可包括针对不同口腔健康类型用户的问题，如针对龋齿用户询问“饮食习惯”，针对牙周炎用户询问“牙龈肿痛情况”等等。其中，用户的口腔健康类型可根据所述第一口腔健康信息确定。也就是说，实现根据口腔健康知识库和所述第一口腔健康信息，确定与口腔健康预测相关的询问信息。

具体实施时，服务端可根据用户已提供信息，智能的、有针对性的确定后续询问信息，以便获取全面的病情描述信息，同时可提升用户体验。例如，针对儿童询问“喝什么种类的牛奶”后，如果用户回答所喝牛奶的种类是某个预设种类，则可继续询问“喝这种牛奶已经多久了”等问题。

在一个示例中，所述服务端还用于确定口腔健康问答知识信息；根据口腔健康问答知识信息，构建所述知识库。所述口腔健康问答知识信息，包括但不限于多种口腔健康类型分别对应的口腔健康询问信息。

在本实施例中，服务端通过所述第一预测网络包括的第一口腔健康特征提取子网络，从所述影像数据中提取第一口腔健康特征；通过所述第一预测网络包括的第一口腔健康预测子网络，根据所述第一口腔健康特征，确定所述第一口腔健康信息，如回归出各类潜在疾病的概率图；通过所述第二预测网络包括的第二口腔健康特征提取子网络，可根据各类潜在疾病的概率图和所述非影像形式的口腔健康预测相关信息，确定第二口腔健康特征；通过所述第二预测网络包括的口腔健康预测子网络，根据所述第二口腔健康特征，确定所述第二口腔健康信息。

具体实施时，可在所述模型的训练阶段，先根据第一训练数据集学习得到所述第一预测网络的网络参数，然后将第一预测网络的卷积层权重作为第二预测网络中卷积层的初始权重，再从第二训练数据集中集学习得到所述第二预测网络的网络参数。所述第一训练数据可包括口腔影像与口腔健康类型标注信息之间的对应关系；所述第二训练数据可包括潜在疾病的概率数据、用户信息、病症描述及口腔健康标注信息之间的对应关系。其中，口腔健康类型标注信息可包括多个类型的标注信息，也就是说，所述模型可以是一个多分类模型，可识别出多种口腔健康问题。所述口腔健康类型，可以是常见口腔健康问题，如龋齿、牙周炎等。采用这种处理方式，使得将第一预测网络的网络特征融合到第二预测网络中，这样就可以在一定程度上保留口腔影像中的重要特征，根据这些影像特征、病情描述信息、用户信息和第一口腔健康结果，可以确定出更为准确的第二口腔健康结果，因此可以有效提升口腔疾病的预测准确度。

具体实施时，所述第一预测网络和第二预测网络的卷积层可相同，也可以有部分不同，不同之处可分别单独训练，相同之处可共享权重。通过网络特征融合，可以使得第二预测网络更好地理解从口腔影像中获取到的信息。

此外，服务端还可用于根据所述口腔健康信息，生成口腔健康报告；向客户端回送所述口腔健康报告。所述口腔健康报告，可基于口腔健康模板和所述模型输出的口腔健康信息生成。口腔健康模板可根据实际需要确定。采用这种处理方式，使得根据口腔健康结果自动化生成报告，形成口腔健康管理闭环；因此，可以有效提升用户体验。

从上述实施例可见，本申请实施例提供的口腔健康管理系统，通过客户端采集用户的口腔影像数据，向服务端发送针对该口腔影像数据的口腔健康预测请求；服务端根据所述影像数据，确定所述口腔健康信息；客户端显示服务端回送的口腔健康信息；这种处理方式，使得结合用户随拍的口腔影像、及用户描述的口腔健康相关信息(如病人年龄，病史，当前症状等)，通过基于人工智能技术实现的口腔健康预测模型进行口腔健康的识别处理；因此，可以有效提升口腔健康识别的准确率，从而提升用户体验。此外，这种处理方式将口腔健康预测与用户客户端(如智能手机、智能牙刷)相结合，实现客户端端对用户进行口腔健康预测；因此，可以有效提升用户使用便利度，从而提升用户口腔健康检测的及时性，进而提升用户体验。

第二实施例

与上述的口腔健康管理系统相对应，本申请还提供一种口腔健康管理方法，该方法的执行主体包括但不限于客户端，如智能手机、智能牙刷、智能音箱、平板电脑、台式计算机、可穿戴设备等等，可以通过在客户端上安装应用(APP)的方式或者在台式计算机上安装软件的方式实现。本实施例与第一实施例内容相同的部分不再赘述，请参见实施例一中的相应部分。

在本实施例中，所述方法包括如下步骤：

步骤1：采集用户的口腔影像数据；

步骤2：向服务端发送针对所述口腔影像数据的口腔健康预测请求；

步骤3：显示服务端回送的所述用户的口腔健康信息。

在一个示例中，所述方法还可包括如下步骤：1)采集用户的非影像形式的口腔健康预测相关信息；2)向服务端发送所述非影像形式的口腔健康预测相关信息。

所述非影像形式的口腔健康预测相关信息，包括：文本形式的口腔健康预测相关信息，语音形式的口腔健康预测相关信息。

在一个示例中，所述方法还可包括如下步骤：1)接收服务端发送的与口腔健康预测相关的询问信息；2)根据所述询问信息，采集所述非影像形式的口腔健康预测相关信息。

从上述实施例可见，本申请实施例提供的口腔健康管理方法，通过客户端采集用户的口腔影像数据，向服务端发送针对该口腔影像数据的口腔健康预测请求；服务端根据所述影像数据，确定所述口腔健康信息；客户端显示服务端回送的口腔健康信息；这种处理方式，使得结合用户随拍的口腔影像、及用户描述的口腔健康相关信息(如病人年龄，病史，当前症状等)，通过基于人工智能技术实现的口腔健康预测模型进行口腔健康的识别处理；因此，可以有效提升口腔健康识别的准确率，从而提升用户体验。此外，这种处理方式将口腔健康预测与用户客户端(如智能手机、智能牙刷)相结合，实现客户端端对用户进行口腔健康预测；因此，可以有效提升用户使用便利度，从而提升用户口腔健康检测的及时性，进而提升用户体验。

第三实施例

在上述的实施例中，提供了一种口腔健康管理方法，与之相对应的，本申请还提供一种口腔健康管理装置。该装置是与上述方法的实施例相对应。

本实施例与第一实施例内容相同的部分不再赘述，请参见实施例一中的相应部分。本申请提供的一种口腔健康管理装置包括：

影像采集单元，用于采集用户的口腔影像数据；

请求发送单元，用于向服务端发送针对所述口腔影像数据的口腔健康预测请求；

信息显示单元，用于显示服务端回送的所述用户的口腔健康信息。

第四实施例

本申请还提供一种电子设备。由于设备实施例基本相似于方法实施例，所以描述得比较简单，相关之处参见方法实施例的部分说明即可。下述描述的设备实施例仅仅是示意性的。

本实施例的一种电子设备，该设备包括：处理器和存储器；存储器，用于存储实现口腔健康管理方法的程序，该设备通电并通过所述处理器运行该方法的程序后，执行下述步骤：采集用户的口腔影像数据；向服务端发送针对所述口腔影像数据的口腔健康预测请求；显示服务端回送的所述用户的口腔健康信息。

所述设备,包括但不限于：智能手机，平板电脑，个人电脑。

第五实施例

与上述的口腔健康管理系统相对应，本申请还提供一种口腔健康管理方法，该方法的执行主体包括但不限于服务端，也可以是能够实现所述方法的任意设备。本实施例与第一实施例内容相同的部分不再赘述，请参见实施例一中的相应部分。

在本实施例中，所述方法包括如下步骤：

步骤1：接收针对目标用户的口腔影像数据的口腔健康预测请求。

步骤2：根据所述影像数据，确定目标用户的口腔健康信息。

在一个示例中，步骤2可采用如下方式实现：通过口腔健康预测模型，根据所述影像数据和所述目标用户的非影像形式的口腔健康预测相关信息，确定目标用户的口腔健康信息。

所述非影像形式的口腔健康预测相关信息，包括：病情描述信息，用户信息。

在一个示例中，所述方法还可包括如下步骤：从用户信息数据库中查询所述用户信息。

所述步骤2可包括如下子步骤：2.1)通过口腔健康预测模型包括的第一预测网络，根据所述影像数据，确定第一口腔健康信息；以及，确定与口腔健康预测相关的询问信息；2.2)向请求方发送所述询问信息，接收请求方发送的针对所述询问信息的答复信息提交请求，将所述答复信息作为所述非影像形式的口腔健康预测相关信息；2.3)通过口腔健康预测模型包括的第二预测网络，根据所述第一口腔健康信息和所述非影像形式的口腔健康预测相关信息，确定第二口腔健康信息，作为所述目标用户的口腔健康信息。

在一个示例中，根据所述第一口腔健康信息，确定与口腔健康预测相关的询问信息。

在另一个示例中，根据口腔健康知识库和所述第一口腔健康信息，确定与口腔健康预测相关的询问信息。

在一个示例中，所述目标用户为儿童用户；所述第一口腔健康信息包括：牙齿类型；所述非影像形式的口腔健康预测相关信息，包括：儿童年龄，多种牙齿类型的换牙规律；所述口腔健康信息包括：儿童换牙期的牙齿健康恢复方案信息。

在一个示例中，所述步骤2.1可包括如下子步骤：2.1.1)通过所述第一预测网络包括的第一口腔健康特征提取子网络，从所述影像数据中提取第一口腔健康特征；2.1.2)通过所述第一预测网络包括的第一口腔健康预测子网络，根据所述第一口腔健康特征，确定所述第一口腔健康信息；相应的，所述步骤2.3可包括如下子步骤：2.3.1)通过所述第二预测网络包括的第二口腔健康特征提取子网络，根据所述第一口腔健康信息和所述非影像形式的口腔健康预测相关信息，确定第二口腔健康特征；2.3.2)通过所述第二预测网络包括的口腔健康预测子网络，根据所述第二口腔健康特征，确定所述第二口腔健康信息。

在一个示例中，所述方法还可包括如下步骤：1)从第一训练数据集中学习得到所述第一预测网络的网络参数；2)将第一预测网络的卷积层网络参数作为第二预测网络中卷积层的初始网络参数；3)从第二训练数据集中学习得到所述第二预测网络的网络参数。

步骤3：向请求方回送所述口腔健康信息。

所述口腔健康信息，可包括多个口腔健康类型信息，也就是说，所述模型口腔健康预测可以是一个针对口腔健康类型的多分类模型，可识别出多种口腔健康问题。所述口腔健康类型，可以是常见口腔健康问题，如龋齿、牙周炎、牙龈萎缩等。此外，所述口腔健康信息还可包括各种口腔健康类型的健康程度，如牙龈萎缩程度、牙齿变色程度等等。此外，所述口腔健康信息还可包括针对用户目前口腔健康状况的一些有关口腔健康恢复的建议信息，如建议做烤瓷牙、拔牙、补牙等等。进一步的，针对建议治牙方案，所述口腔健康信息还可包括各种治牙方式可能引发的问题，如后遗症、不适感、假牙保质期、烤瓷牙注意事项等等，以便用户做决策。

在一个示例中，针对儿童用户而言，所述口腔健康信息给出的牙齿健康恢复方案信息可采用如下方式确定：根据儿童实际年龄及其有问题牙齿的类型(如切牙、尖牙、双尖牙和磨牙等)、及不同类型牙齿的换牙规律，确定暂时保留对未来牙齿生长有影响的问题牙齿、拔掉其它对未来牙齿生长无影响的问题牙齿。具体实施时，可根据实际需求确定所述口腔健康信息。采用这种处理方式，使得可根据小孩换牙前的牙齿问题，给出牙齿健康恢复方案信息，以便于家长根据这些信息提前考虑整牙方案。

在一个示例中，所述方法还可包括如下步骤：1)根据所述口腔健康信息，生成口腔健康报告；2)向请求方回送所述口腔健康报告。

从上述实施例可见，本申请实施例提供的口腔健康管理方法，通过客户端采集用户的口腔影像数据，向服务端发送针对该口腔影像数据的口腔健康预测请求；服务端根据所述影像数据，确定所述口腔健康信息；客户端显示服务端回送的口腔健康信息；这种处理方式，使得结合用户随拍的口腔影像、及用户描述的口腔健康相关信息(如病人年龄，病史，当前症状等)，通过基于人工智能技术实现的口腔健康预测模型进行口腔健康的识别处理；因此，可以有效提升口腔健康识别的准确率，从而提升用户体验。此外，这种处理方式将口腔健康预测与用户客户端(如智能手机、智能牙刷)相结合，实现客户端端对用户进行口腔健康预测；因此，可以有效提升用户使用便利度，从而提升用户口腔健康检测的及时性，进而提升用户体验。

第六实施例

在上述的实施例中，提供了一种口腔健康管理方法，与之相对应的，本申请还提供一种口腔健康管理装置。该装置是与上述方法的实施例相对应。

本实施例与第一实施例内容相同的部分不再赘述，请参见实施例一中的相应部分。本申请提供的一种口腔健康管理装置包括：

请求接收单元，用于接收针对目标用户的口腔影像数据的口腔健康预测请求；

健康预测单元，用于根据所述影像数据，确定目标用户的口腔健康信息；

信息发送单元，用于向请求方回送所述口腔健康信息。

第七实施例

本申请还提供一种电子设备实施例。由于设备实施例基本相似于方法实施例，所以描述得比较简单，相关之处参见方法实施例的部分说明即可。下述描述的设备实施例仅仅是示意性的。

本实施例的一种电子设备，该电子设备包括：处理器和存储器；存储器，用于存储实现口腔健康管理方法的程序，该设备通电并通过所述处理器运行该方法的程序后，执行下述步骤：接收针对目标用户的口腔影像数据的口腔健康预测请求；根据所述影像数据，确定目标用户的口腔健康信息；向请求方回送所述口腔健康信息。

第八实施例

与上述的口腔健康管理系统相对应，本申请还提供一种口腔健康预测模型构建方法，该方法的执行主体包括但不限于服务端，也可以是能够实现所述方法的任意设备。本实施例与第一实施例内容相同的部分不再赘述，请参见实施例一中的相应部分。

在本实施例中，所述口腔健康预测模型构建方法包括如下步骤：

步骤1：确定训练数据集；所述训练数据包括口腔影像数据、非影像形式的口腔健康预测相关信息、及口腔健康标注信息；

步骤2：构建口腔健康预测模型的网络结构；

步骤3：根据所述训练数据集对所述模型的网络参数进行训练，得到所述模型。

在一个示例中，所述口腔健康预测模型包括第一预测网络，用于根据所述影像数据，确定第一口腔健康信息；所述口腔健康预测模型包括第二预测网络，用于根据所述第一口腔健康信息和所述非影像形式的口腔健康预测相关信息，确定第二口腔健康信息，作为所述目标用户的口腔健康信息。

在一个示例中，所述第一预测网络包括第一口腔健康特征提取子网络，用于从所述影像数据中提取第一口腔健康特征；所述第一预测网络包括第一口腔健康预测子网络，用于根据所述第一口腔健康特征，确定所述第一口腔健康信息；所述第二预测网络包括第二口腔健康特征提取子网络，用于根据所述第一口腔健康信息和所述非影像形式的口腔健康预测相关信息，确定第二口腔健康特征；所述第二预测网络包括口腔健康预测子网络，用于根据第二口腔健康特征，确定所述第二口腔健康信息。

在一个示例中，从第一训练数据集中学习得到所述第一预测网络的网络参数；将第一预测网络的卷积层(如第一口腔健康特征提取子网络)网络参数作为第二预测网络中卷积层(如第二口腔健康特征提取子网络)的初始网络参数；从第二训练数据集中学习得到所述第二预测网络的网络参数。

所述第一训练数据可包括口腔影像与口腔健康类型标注信息之间的对应关系；所述第二训练数据可包括潜在疾病的概率数据、用户信息、病症描述及口腔健康标注信息之间的对应关系。其中，口腔健康类型标注信息可包括多个类型的标注信息，也就是说，所述模型可以是一个多分类模型，可识别出多种口腔健康问题。所述口腔健康类型，可以是常见口腔健康问题，如龋齿、牙周炎等。采用这种处理方式，使得将第一预测网络的网络特征融合到第二预测网络中，这样就可以在一定程度上保留口腔影像中的重要特征，根据这些影像特征、病情描述信息、用户信息和第一口腔健康结果，可以确定出更为准确的第二口腔健康结果，因此可以有效提升口腔疾病的预测准确度。

具体实施时，所述第一预测网络和第二预测网络的卷积层可相同，也可以有部分不同，不同之处可分别单独训练，相同之处可共享权重。通过网络特征融合，可以使得第二预测网络更好地理解从口腔影像中获取到的信息。

从上述实施例可见，本申请实施例提供的口腔健康预测模型构建方法，通过确定训练数据集；所述训练数据包括口腔影像数据、非影像形式的口腔健康预测相关信息、及口腔健康标注信息；构建口腔健康预测模型的网络结构；根据所述训练数据集对所述模型的网络参数进行训练，得到所述模型；这种处理方式，使得从训练数据中学习得到口腔健康预测模型，该模型能够根据用户随拍的口腔影像和用户的非影像形式的口腔健康预测相关信息，确定所述口腔健康信息；因此，可以有效提升口腔健康预测的准确度和效率，从而提升用户体验。

第九实施例

在上述的实施例中，提供了一种口腔健康预测模型构建方法，与之相对应的，本申请还提供一种口腔健康预测模型构建装置。该装置是与上述方法的实施例相对应。

本实施例与第一实施例内容相同的部分不再赘述，请参见实施例一中的相应部分。本申请提供的一种口腔疾病预测构建装置包括：

训练数据确定单元，用于确定训练数据集；所述训练数据包括口腔影像数据、非影像形式的口腔健康预测相关信息、及口腔健康标注信息；

网络构建单元，用于构建口腔健康预测模型的网络结构；

网络训练单元，用于根据所述训练数据集对所述模型的网络参数进行训练，得到所述模型。

第十实施例

本申请还提供一种电子设备实施例。由于设备实施例基本相似于方法实施例，所以描述得比较简单，相关之处参见方法实施例的部分说明即可。下述描述的设备实施例仅仅是示意性的。

本实施例的一种电子设备，该电子设备包括：处理器和存储器；存储器，用于存储实现口腔健康预测模型构建方法的程序，该设备通电并通过所述处理器运行该方法的程序后，执行下述步骤：确定训练数据集；所述训练数据包括口腔影像数据、非影像形式的口腔健康预测相关信息、及口腔健康标注信息；构建口腔健康预测模型的网络结构；根据所述训练数据集对所述模型的网络参数进行训练，得到所述模型。

第十一实施例

与上述的口腔健康管理系统相对应，本申请还提供一种口腔健康信息推荐系统。本实施例与第一实施例内容相同的部分不再赘述，请参见实施例一中的相应部分。

在本实施例中，所述口腔健康信息推荐系统包括：服务端1和客户端2。

请参考图5，其为本申请的口腔健康信息推荐系统的实施例的设备交互示意图。客户端采集用户的口腔影像数据，向服务端发送针对所述用户的个性化口腔健康信息推荐请求；以及，显示服务端回送的所述用户的口腔健康恢复相关信息；服务端接收所述请求；根据所述影像数据和所述用户的非影像形式的口腔健康预测相关信息，确定所述用户的口腔健康信息；根据所述口腔健康信息，确定所述口腔健康恢复相关信息；向所述客户端回送所述口腔健康恢复相关信息。

服务端根据所述影像数据和所述用户的非影像形式的口腔健康预测相关信息，确定所述用户的口腔健康信息的具体实施方式，可参见上述实施例一部分，此处不再赘述。

服务端在确定出用户的所述口腔健康信息后，还可根据该用户的口腔健康信息，确定所述口腔健康恢复相关信息，例如，当前用户存在牙齿损坏，比如龋齿，可根据牙齿损坏程度选择推送治疗方案、医院、医生、药物中一种或任意组合，也就是说，根据实际需要，可以推送治疗方案、可推送医院和该医院内的某位医生、也可将治疗方案、医院、该医院内的某位医生、适用的药物都推送给当前用户。客户端显示该相关信息，可以使用户能够直观的了解到与其自身的口腔健康恢复问题所匹配的信息，以便于用户根据这些信息及时治疗口腔疾病，尽早恢复口腔健康等等。

所述口腔健康恢复相关信息，包括对用户的口腔健康恢复有帮助的信息。所述口腔健康恢复相关信息，包括但不限于：口腔清洁相关信息，口腔健康科普信息，口腔治疗资源信息，还可以包括牙齿治疗方案信息等等。

所述口腔清洁相关信息可以是刷牙方案，如可根据用户的口腔健康状况生成匹配的刷牙方案，如发现用户牙齿清洁不净，则可建议用户使用牙线清洗牙齿等等。口腔清洁相关信息还可以是牙膏、牙刷、漱口水等口腔清洁产品的购买链接，可根据用户的口腔健康状况确定适合用户的口腔清洁产品，并提供相关产品的购买链接，用户可在客户端装载的口腔健康管理应用中向相关购物网站发送购买请求，并可通过该应用管理这些购物信息。牙刷信息可以包括牙刷类型、牙刷品牌等信息。

例如，如果判定用户牙齿发黄，则可向用户推送具有牙齿美白功效的牙膏，建议用户使用美白牙膏清洁牙齿；如果判定用户在刷牙时易出血，则可建议用户使用具有止血功效的牙膏清洁牙齿；如果判定用户有牙周炎，则可建议用户使用具有消炎功效的牙膏清洁牙齿，等等。

具体实施时，服务端可预先存储各种口腔清洁用品的功效，以便于根据用户口腔状况，选取适合的口腔清洁用品。表1示出了本实施例的口腔清洁用品与功效间的对应记录。

表1、口腔清洁用品与功效间的对应记录

在一个示例中，根据用户的口腔健康状况等确定适合用户的个性化牙刷定制信息。所述牙刷定制信息，可包括刷毛软硬度、刷毛波浪形状、牙刷尺寸等等。客户端可根据服务端推送的个性化牙刷定制信息，向服务端发送牙刷定制请求；服务端根据所述牙刷定制信息，向牙刷定制厂商(如智能牙刷生产厂商)发送牙刷定制信息；牙刷定制厂商根据所述牙刷定制信息生产用户个性化牙刷。

所述口腔健康科普信息，可以是口腔保护知识类的信息，患者用户通过这些信息可学习如何保护牙齿，尽早恢复口腔健康等等。例如，若所述口腔健康信息包括用户牙齿变色的信息，则可将有关牙齿美白的网页信息作为口腔健康科普信息；若所述口腔健康信息包括用户刷牙易出血的信息，则可将有关正确刷牙方法的网页信息作为口腔健康科普信息；若所述口腔健康信息包括用户换有牙周炎的信息，则可将有关饮食习惯对牙周炎影像的网页信息作为口腔健康科普信息。

具体实施时，可针对所述口腔健康信息包括的各种健康类型信息(如龋齿、牙齿变色、易出血、牙周炎等)，通过自然语言处理算法，确定与具体健康类型匹配的所述口腔健康科普信息。

具体实施时，也可以在服务端预先存储口腔健康类型与所述口腔健康科普信息间的对应记录，以便于在个性化推荐阶段使用该信息确定适合用户口腔状况的口腔健康科普信息。表2示出了本实施例的口腔健康类型与所述口腔健康科普信息间的对应记录。

表2、口腔健康类型与口腔健康科普信息间的对应记录

具体实施时，可先根据用户的口腔健康信息，确定用户的口腔健康类型信息；然后，从该数据库中，确定与用户口腔健康类型对应的所述口腔健康恢复相关信息，将这些信息推送至用户客户端，供用户参考。

所述口腔治疗资源信息，可以是口腔医院信息，口腔医生信息，口腔美容服务信息，等等。所述医院，可以包括口腔专科医院或者设有口腔科的综合医院，推送的医院信息中可以包括医院的名称、地址、联系电话等信息。所述医生，可以包括口腔科医生的相关信息，例如口腔医生的姓名、工作年限、联系电话等信息。此外，还可推送对症的药物，比如是可延缓龋齿发展的药物用、于为牙龈提供营养的药物等等。

具体实施时，服务端还用于确定所述用户的位置信息；根据所述口腔健康信息和所述位置信息，确定所述口腔治疗资源信息。采用这种处理方式，可向用户提供距离其地理位置较近的、且具有治疗其口腔疾病能力的口腔治疗资源信息，如向用户推送最近的拔牙、洗牙诊所信息，或者是推送医疗水平较高的、能够治疗疑难口腔疾病的口腔医生信息，或者是推送适合用户口腔情况的特色牙齿美容诊所信息。

在一个示例中，所述口腔健康信息还包括口腔以外的身体健康信息；服务端可根据医生的专业领域信息和/或医院的专业领域信息、用户的口腔健康信息和身体健康信息，确定向用户推送多种口腔治疗资源信息。例如，如果用户是老年人、且患有严重的冠心病，则不仅要向用户推送诸如三级甲医院的具有较高医疗水平的口腔医生信息，还可推送该医院其他科室的相关医生信息，如内科医生信息等。采用这种处理方式，可实现对用户口腔健康问题的专家会诊；因此，可以有效提升用户体验。

所述口腔治疗资源信息，还可以包括治疗方案信息，如是否需要药物延缓症状，是否需要根管治疗，是否需要拔掉等，这样可以使得患者用户了解可能的治疗情况，以便做好相关准备。

服务端可构建口腔健康信息数据库，将口腔健康类型信息、与所述口腔治疗资源信息、所述口腔健康科普信息、所述口腔清洁相关信息之间的对应关系，存储在口腔健康信息数据库中。表3示出了本实施例的口腔健康类型与所述口腔健康恢复相关信息间的对应记录。

表3、口腔健康类型与所述口腔健康相关信息间的对应记录

具体实施时，可先根据用户的口腔健康信息，确定用户的口腔健康类型信息；然后，从该数据库中，确定与用户疾病类型对应的所述口腔健康恢复相关信息，将这些信息推送至用户客户端，供用户参考。

具体实施时，也可根据用户的口腔健康类型信息、用户个人信息(如年龄、性别)、饮食习惯等多方面信息，确定向用户推送的所述口腔健康恢复相关信息，将这些信息推送至用户客户端，供用户参考。例如，用户为儿童，则可向其推送儿童电动牙刷；用户为中青年，则可向其推送智能牙刷；用户为老年人，则可向其推送某些专为老年人设计的牙刷。再例如，如果用户为儿童，且可根据其年龄及不同部位牙齿的换牙规律，确定暂时保留对未来牙齿生长有影响的有问题牙齿、拔掉其它对未来牙齿生长无影响的有问题牙齿的治疗方案。

在一个示例中，所述口腔健康恢复相关信息包括：在线口腔医生信息；服务端还用于接收客户端针对所述在线口腔医生的在线诊疗服务请求；为所述用户和所述在线口腔医生提供在线诊疗信息交流服务。采用这种方式，使得用户可在一个应用内解决口腔疾病初诊、个性化信息推送及在线问诊多个问题；因此，可以有效提升用户体验。

本申请实施例提供的口腔健康信息推荐系统，通过向用户推送与其牙齿损坏情况相匹配的处理信息，使得用户更有针对性的对自身的牙齿损坏进行治疗或保健，避免错过治疗时机，从而提高治疗效果。

第十二实施例

与上述的口腔健康信息推荐系统相对应，本申请还提供一种口腔健康信息推荐方法，该方法的执行主体包括但不限于客户端，如智能手机、智能牙刷、智能音箱、平板电脑、台式计算机、可穿戴设备等等，可以通过在客户端上安装应用(APP)的方式或者在台式计算机上安装软件的方式实现。本实施例与第一实施例内容相同的部分不再赘述，请参见实施例一中的相应部分。

在本实施例中，所述方法包括如下步骤：

步骤1：采集用户的口腔影像数据；

步骤2：向服务端发送针对所述口腔影像数据的个性化口腔健康信息推荐请求；

步骤3：显示服务端回送的所述用户的口腔健康恢复相关信息。

从上述实施例可见，本申请实施例提供的口腔健康信息推荐方法，通过客户端采集用户的口腔影像数据，向服务端发送针对所述口腔影像数据的个性化口腔健康信息推荐请求；以及，显示服务端回送的所述用户的口腔健康恢复相关信息；服务端接收所述请求；根据所述影像数据和所述用户的非影像形式的口腔健康预测相关信息，确定所述用户的口腔健康信息；根据所述口腔健康信息，确定所述口腔健康恢复相关信息；向所述客户端回送所述口腔健康恢复相关信息；这种处理方式，使得向用户推送与其牙齿损坏情况相匹配的处理信息，使得用户更有针对性的对自身的牙齿损坏进行治疗或保健，避免错过治疗时机，从而提高治疗效果。

第十三实施例

在上述的实施例中，提供了一种口腔健康信息推荐方法，与之相对应的，本申请还提供一种口腔健康信息推荐装置。该装置是与上述方法的实施例相对应。

本实施例与第十一实施例内容相同的部分不再赘述，请参见实施例一中的相应部分。本申请提供的一种口腔健康信息推荐装置包括：

影像采集单元，用于采集用户的口腔影像数据；

请求发送单元，用于向服务端发送针对所述口腔影像数据的个性化口腔健康信息推荐请求；

信息显示单元，用于显示服务端回送的所述用户的口腔健康恢复相关信息。

第十四实施例

本申请还提供一种电子设备。由于设备实施例基本相似于方法实施例，所以描述得比较简单，相关之处参见方法实施例的部分说明即可。下述描述的设备实施例仅仅是示意性的。

本实施例的一种电子设备，该设备包括：处理器和存储器；存储器，用于存储实现口腔健康信息推荐方法的程序，该设备通电并通过所述处理器运行该方法的程序后，执行下述步骤：采集用户的口腔影像数据；向服务端发送针对所述口腔影像数据的个性化口腔健康信息推荐请求；显示服务端回送的所述用户的口腔健康恢复相关信息。

所述设备包括但不限于：智能手机，平板电脑，个人电脑。

第十五实施例

与上述的口腔健康信息推荐系统相对应，本申请还提供一种口腔健康信息推荐方法，该方法的执行主体包括但不限于服务端，也可以是能够实现所述方法的任意设备。本实施例与第一实施例内容相同的部分不再赘述，请参见实施例一中的相应部分。

在本实施例中，所述方法包括如下步骤：

步骤1：接收针对目标用户的口腔影像数据的个性化口腔健康信息推荐请求。

步骤2：通过口腔健康预测模型，根据所述影像数据和所述目标用户的非影像形式的口腔健康预测相关信息，确定目标用户的口腔健康信息。

步骤3：根据所述口腔健康信息，确定所述目标用户的口腔健康恢复相关信息。

所述口腔健康恢复相关信息包括但不限于：口腔清洁相关信息，口腔健康科普信息，口腔治疗资源信息。

在一个示例中，所述方法还可包括如下步骤：确定所述目标用户的个人信息；步骤3可采用如下方式：根据所述口腔健康信息和所述个人信息，确定所述口腔健康恢复相关信息。

在一个示例中，所述目标用户为儿童；所述步骤3可采用如下方式的至少一种：

根据用户年龄及患病牙齿的换牙规律信息，确定要暂时保留的、对未来牙齿生长有影响的患病牙齿；

根据用户年龄及患病牙齿的换牙规律信息，确定要拔掉、对未来牙齿生长无影响的患病牙齿。

在一个示例中，所述步骤3可包括如下子步骤：3.1)根据所述口腔健康信息，确定所述目标用户的口腔健康类型；3.2)根据所述口腔健康类型，确定所述口腔健康恢复相关信息。

在一个示例中，所述口腔健康恢复相关信息包括：口腔医美服务信息，口腔医院信息；所述方法还可包括如下步骤：确定所述目标用户的位置信息；所述步骤3可采用如下方式：根据所述口腔健康信息和所述位置信息，确定所述口腔健康恢复相关信息。

在一个示例中，所述口腔健康恢复相关信息包括：在线口腔医生信息；所述方法还可包括如下步骤：接收请求方针对所述在线口腔医生的在线诊疗服务请求；为所述目标用户和所述在线口腔医生提供在线诊疗信息交流服务。

在一个示例中，所述口腔健康恢复相关信息包括：口腔清洁用品信息；所述步骤3可采用如下方式的至少一种：

若所述口腔健康信息包括用户牙齿变色的信息，则将具有牙齿美白功效的牙膏信息作为口腔清洁用品信息；

若所述口腔健康信息包括用户刷牙易出血的信息，则将具有止血功效的牙膏信息作为口腔清洁用品信息；

若所述口腔健康信息包括用户刷牙易出血的信息，则将牙刷刷毛达到预设柔软度阈值的牙刷信息作为口腔清洁用品信息；

若所述口腔健康信息包括用户换有牙周炎的信息，则将具有消炎功效的牙膏作为口腔清洁用品信息；

若所述口腔健康信息包括用户换有牙周炎的信息，则将具有口气清新功效的漱口水作为口腔清洁用品信息。

在一个示例中，所述方法还可包括如下步骤：向请求方推送口腔清洁用品购物链接。

在一个示例中，所述口腔健康恢复相关信息包括：口腔健康科普信息；所述步骤3可采用如下方式的至少一种：

若所述口腔健康信息包括用户牙齿变色的信息，则将有关牙齿美白的信息作为口腔健康科普信息；

若所述口腔健康信息包括用户刷牙易出血的信息，则将有关正确刷牙方法的信息作为口腔健康科普信息；

若所述口腔健康信息包括用户换有牙周炎的信息，则将有关饮食习惯对牙周炎影响的信息作为口腔健康科普信息。

在一个示例中，所述口腔健康恢复相关信息包括：口腔健康科普信息；所述步骤3可包括：通过自然语言处理算法，确定与所述口腔健康信息中各个病症信息匹配的所述口腔健康科普信息。

在一个示例中，所述口腔健康恢复相关信息包括：口腔健康科普信息；所述步骤3可包括：根据所述口腔健康信息，确定所述目标用户的口腔健康类型；根据所述口腔健康类型与口腔健康科普信息之间的对应关系，确定针对所述目标用户的口腔健康科普信息。

在一个示例中，所述口腔健康恢复相关信息包括：个性化口腔清洁用品定制信息；所述方法还可包括如下步骤：接收针对所述定制信息的个性化口腔清洁用品定制请求；向口腔清洁用品用户推送目标用户定制所述个性化口腔清洁用品的信息。

在一个示例中，所述口腔健康信息包括口腔以外的身体健康信息；所述方法还可包括如下步骤：根据医生的专业领域信息和/或医院的专业领域信息、所述口腔健康信息和所述身体健康信息，确定向所述目标用户推送的多种口腔治疗资源信息。

步骤4：向请求方回送所述口腔健康恢复相关信息。

从上述实施例可见，本申请实施例提供的口腔健康信息推荐方法，通过客户端采集用户的口腔影像数据，向服务端发送针对所述口腔影像数据的个性化口腔健康信息推荐请求；以及，显示服务端回送的所述用户的口腔健康恢复相关信息；服务端接收所述请求；根据所述影像数据和所述用户的非影像形式的口腔健康预测相关信息，确定所述用户的口腔健康信息；根据所述口腔健康信息，确定所述口腔健康恢复相关信息；向所述客户端回送所述口腔健康恢复相关信息；这种处理方式，使得向用户推送与其牙齿损坏情况相匹配的处理信息，使得用户更有针对性的对自身的牙齿损坏进行治疗或保健，避免错过治疗时机，从而提高治疗效果。

第十六实施例

在上述的实施例中，提供了一种口腔健康信息推荐方法，与之相对应的，本申请还提供一种口腔健康信息推荐装置。该装置是与上述方法的实施例相对应。

本实施例与第一实施例内容相同的部分不再赘述，请参见实施例一中的相应部分。本申请提供的一种口腔健康信息推荐装置包括：

请求接收单元，用于接收针对目标用户的口腔影像数据的个性化口腔健康信息推荐请求；

健康信息确定单元，用于通过口腔健康预测模型，根据所述影像数据和所述目标用户的非影像形式的口腔健康预测相关信息，确定目标用户的口腔健康信息；

健康恢复相关信息确定单元，用于根据所述口腔健康信息，确定所述目标用户的口腔健康恢复相关信息；

健康恢复相关信息发送单元，用于向请求方回送所述口腔健康恢复相关信息。

第十七实施例

本申请还提供一种电子设备实施例。由于设备实施例基本相似于方法实施例，所以描述得比较简单，相关之处参见方法实施例的部分说明即可。下述描述的设备实施例仅仅是示意性的。

本实施例的一种电子设备，该电子设备包括：处理器和存储器；存储器，用于存储实现口腔健康信息推荐方法的程序，该设备通电并通过所述处理器运行该方法的程序后，执行下述步骤：接收针对目标用户的口腔影像数据的个性化口腔健康信息推荐请求；通过口腔健康预测模型，根据所述影像数据和所述目标用户的非影像形式的口腔健康预测相关信息，确定目标用户的口腔健康信息；根据所述口腔健康信息，确定所述目标用户的口腔健康恢复相关信息；向请求方回送所述口腔健康恢复相关信息。

第十八实施例

与上述的口腔健康管理系统相对应，本申请还提供一种牙齿形态发展预测系统。本实施例与第一实施例内容相同的部分不再赘述，请参见实施例一中的相应部分。

在本实施例中，所述牙齿形态发展预测系统包括：服务端1和客户端2。

请参考图6，其为本申请的牙齿形态发展预测系统的实施例的设备交互示意图。客户端采集用户的口腔影像数据，向服务端发送针对所述口腔影像数据的牙齿形态发展预测请求；以及，显示服务端回送的所述用户的未来牙齿形态图像信息；服务端接收所述请求；根据所述影像数据，生成所述未来牙齿形态图像信息，向所述客户端回送所述图像信息。

所述牙齿形态发展预测请求，可包括用户标识和所述口腔影像数据，所述口腔影像数据可体现当前部分病症信息。

所述未来牙齿形态图像信息，包括能体现用户在未来某个时间的牙齿发展变化状况的图像信息。

在本实施例中，服务端具体用于通过基于计算机视觉生成对抗网络结构的未来牙齿形态图像确定模型，根据所述影像数据，生成所述图像信息。

基于生成对抗网络(GAN,Generative Adversarial Networks)的未来牙齿形态图像确定模型，可解决未来牙齿形态图像预测问题，生成用户未来的牙齿形态效果图。基于生成对抗网络的所述模型可以是一种具有非监督学习性质的收敛模型。具体实施时，可通过优化生成对抗网络拓扑结构，提升未来牙齿形态图像确定模型的性能。由于生成对抗网络属于较为成熟的现有技术，因此此处不再赘述。

在本实施例中，所述未来牙齿形态图像确定模型包括：牙齿特征提取网络和未来牙齿形态图像确定网络。所述模型的输入数据为客户端上传的随拍口腔影像数据，输出数据为未来牙齿形态图像数据。

在一个示例中，服务端还用于确定训练数据集；所述训练数据包括第一口腔影像数据和第二口腔影像数据间的对应关系；构建未来牙齿形态图像确定模型的网络结构；根据所述训练数据集对所述模型的网络参数进行训练，得到所述模型。采用这种处理方式，使得从训练数据中学习得到未来牙齿形态图像确定模型，该模型能够根据用户随拍的口腔影像预测用户的未来牙齿形态图像；因此，可以有效提升未来牙齿形态图像预测的准确度和效率，从而提升用户体验。

具体实施时，可构造一个大型问题牙齿对照影像数据库，数据库中保存用户不同时期的牙齿影像(比方说，早期和后期的不健康牙齿影像，早期影像为第一口腔影像数据，后期影像为第二口腔影像数据)，基于数据库建立生成对抗网络模型，生成对抗网络包括两部分：生成器和判别器。其中，生成器用于基于早期牙齿影像提取特征，根据提取的特征生成后期牙齿预测影像；判别期用于判断后期预测影像和真实后期影像是否相似。通过迭代训练生成器和判别器，最终模型收敛，判别器已经无法区分后期牙齿预测影像和真实后期影像的差别。在牙齿形态图像预测阶段，用户上传早期牙齿影像，所述模型自动生成后期牙齿影像，供用户参考。

在一个示例中，服务端具体用于根据所述用户的口腔健康相关信息和所述影像数据，生成所述未来牙齿形态图像信息。采用这种处理方式，可以有效提升未来牙齿形态图像的准确度，从而有效提升用户体验。

所述口腔健康相关信息，包括但不限于以下信息的至少一者：用户个人信息，口腔健康信息，饮食习惯等等。其中，口腔疾病相关信息可包括用户的多次口腔疾病诊疗结果信息，如多个时刻通过实施例一提供的系统得到的多次口腔健康信息，还可包括用于确定口腔健康信息的口腔症状描述信息等等。在本实施例中，服务端预先存储用户与口腔健康相关信息之间的对应记录，可将其存储在口腔健康信息数据库中，以便在牙齿形态发展预测阶段使用。

在一个示例中，所述用户为儿童；所述影像数据包括儿童换牙前的口腔影像数据；所述未来牙齿形态图像信息包括儿童换牙后的牙齿图像信息。根据该儿童换牙前的口腔影像数据(如本次随拍的口腔影像)、和该儿童的刷牙习惯、牙齿损坏情况等信息，可预测出该儿童换牙后的牙齿图像信息。采用这种处理方式，使得可根据小孩换牙前的牙齿问题，预测换牙后的牙齿情况，让家长提前考虑整牙方案。

所述图像信息，可以是三维图像信息。相应的，服务端还可用于通过3D建模技术,生成包括目标口腔三维图像和所述目标用户的未来牙齿形态三维图像的融合图像信息；向请求方回送所述融合图像信息。具体实施时，可由用户将其在某一时刻拍摄的口腔图像的三维模型设置为目标口腔三维图像，该图像作为标准图像，可使得用户将牙齿在未来时刻的发展变化图像与该标准3D模型进行对比，从而直观感知到其三维形态及牙齿发展变化情况，让用户对自己的牙齿问题有直观感知。

具体实施时，服务端还可用于根据所述影像数据和所述未来牙齿形态图像信息，确定所述用户的整牙方案信息；向客户端回送所述整牙方案信息，供用户参考用。

从上述实施例可见，本申请实施例提供的牙齿形态发展预测系统，通过客户端采集用户的口腔影像数据，向服务端发送针对所述口腔影像数据的牙齿形态发展预测请求；以及，显示服务端回送的所述用户的未来牙齿形态图像信息；服务端接收所述请求；根据所述影像数据，生成所述未来牙齿形态图像信息，向所述客户端回送所述图像信息；这种处理方式，使得用户可查看受其当前牙齿损坏程度的影响，牙齿在未来时期可能发生的形态变化图像，使用户能够直观的了解到不及时治疗口腔疾病可能导致的后果，促使用户及时对自身的牙齿损坏进行治疗或保健，避免错过治疗时机，从而提高治疗效果。

第十二实施例

与上述的牙齿形态发展预测系统相对应，本申请还提供一种牙齿形态发展预测方法，该方法的执行主体包括但不限于客户端，如智能手机、智能牙刷、智能音箱、平板电脑、台式计算机、可穿戴设备等等，可以通过在客户端上安装应用(APP)的方式或者在台式计算机上安装软件的方式实现。本实施例与第一实施例内容相同的部分不再赘述，请参见实施例一中的相应部分。

在本实施例中，所述方法包括如下步骤：

步骤1：采集用户的口腔影像数据；

步骤2：向服务端发送针对所述口腔影像数据的牙齿形态发展预测请求；

步骤3：显示服务端回送的所述用户的未来牙齿形态图像信息。

从上述实施例可见，本申请实施例提供的牙齿形态发展预测方法，通过客户端采集用户的口腔影像数据，向服务端发送针对所述口腔影像数据的牙齿形态发展预测请求；以及，显示服务端回送的所述用户的未来牙齿形态图像信息；服务端接收所述请求；根据所述影像数据，生成所述未来牙齿形态图像信息，向所述客户端回送所述图像信息；这种处理方式，使得用户可查看受其当前牙齿损坏程度的影响，牙齿在未来时期可能发生的形态变化图像，使用户能够直观的了解到不及时治疗口腔疾病可能导致的后果，促使用户及时对自身的牙齿损坏进行治疗或保健，避免错过治疗时机，从而提高治疗效果。

第十三实施例

在上述的实施例中，提供了一种牙齿形态发展预测方法，与之相对应的，本申请还提供一种牙齿形态发展预测装置。该装置是与上述方法的实施例相对应。

本实施例与第十一实施例内容相同的部分不再赘述，请参见实施例一中的相应部分。本申请提供的一种牙齿形态发展预测装置包括：

影像采集单元，用于采集用户的口腔影像数据；

请求发送单元，用于向服务端发送针对所述口腔影像数据的牙齿形态发展预测请求；

信息显示单元，用于显示服务端回送的所述用户的未来牙齿形态图像信息。

第十四实施例

本申请还提供一种电子设备。由于设备实施例基本相似于方法实施例，所以描述得比较简单，相关之处参见方法实施例的部分说明即可。下述描述的设备实施例仅仅是示意性的。

本实施例的一种电子设备，该设备包括：处理器和存储器；存储器，用于存储实现牙齿形态发展预测方法的程序，该设备通电并通过所述处理器运行该方法的程序后，执行下述步骤：采集用户的口腔影像数据；向服务端发送针对所述口腔影像数据的牙齿形态发展预测请求；显示服务端回送的所述用户的未来牙齿形态图像信息。

所述设备包括但不限于：智能手机，平板电脑，个人电脑。

第十五实施例

与上述的牙齿形态发展预测系统相对应，本申请还提供一种牙齿形态发展预测方法，该方法的执行主体包括但不限于服务端，也可以是能够实现所述方法的任意设备。本实施例与第一实施例内容相同的部分不再赘述，请参见实施例一中的相应部分。

在本实施例中，所述方法包括如下步骤：

步骤1：接收针对目标用户的口腔影像数据的牙齿形态发展预测请求；

步骤2：根据所述影像数据，生成所述目标用户的未来牙齿形态图像信息；

步骤3：向请求方回送所述图像信息。

在一个示例中，通过基于计算机视觉生成对抗网络结构的未来牙齿形态图像确定模型，根据所述影像数据，生成所述图像信息。

在一个示例中，根据所述目标用户的口腔健康相关信息和所述影像数据，生成所述目标用户的未来牙齿形态图像信息。

在一个示例中，所述图像信息包括三维图像信息；所述方法还可包括如下步骤：生成包括目标口腔三维图像和所述目标用户的未来牙齿形态三维图像的融合图像信息；向请求方回送所述融合图像信息。

在一个示例中，所述目标用户为儿童；所述影像数据包括儿童换牙前的口腔影像数据；所述未来牙齿形态图像信息包括儿童换牙后的牙齿图像信息。

在一个示例中，所述方法还可包括如下步骤：根据所述影像数据和所述未来牙齿形态图像信息，确定所述目标用户的整牙方案信息；向请求方回送所述整牙方案信息。

在一个示例中，所述口腔健康相关信息包括口腔健康信息；通过口腔健康预测模型，根据所述影像数据和所述用户的非影像形式的口腔健康预测相关信息，确定所述口腔健康信息。

从上述实施例可见，本申请实施例提供的牙齿形态发展预测方法，通过客户端采集用户的口腔影像数据，向服务端发送针对所述口腔影像数据的牙齿形态发展预测请求；以及，显示服务端回送的所述用户的未来牙齿形态图像信息；服务端接收所述请求；根据所述影像数据，生成所述未来牙齿形态图像信息，向所述客户端回送所述图像信息；这种处理方式，使得用户可查看受其当前牙齿损坏程度的影响，牙齿在未来时期可能发生的形态变化图像，使用户能够直观的了解到不及时治疗口腔疾病可能导致的后果，促使用户及时对自身的牙齿损坏进行治疗或保健，避免错过治疗时机，从而提高治疗效果。

第十六实施例

在上述的实施例中，提供了一种牙齿形态发展预测方法，与之相对应的，本申请还提供一种牙齿形态发展预测装置。该装置是与上述方法的实施例相对应。

本实施例与第一实施例内容相同的部分不再赘述，请参见实施例一中的相应部分。本申请提供的一种口腔健康信息推荐装置包括：

请求接收单元，用于接收针对目标用户的口腔影像数据的牙齿形态发展预测请求；

未来图像生成单元，用于根据所述影像数据，生成所述目标用户的未来牙齿形态图像信息；

图像发送单元，用于向请求方回送所述图像信息。

第十七实施例

本申请还提供一种电子设备实施例。由于设备实施例基本相似于方法实施例，所以描述得比较简单，相关之处参见方法实施例的部分说明即可。下述描述的设备实施例仅仅是示意性的。

本实施例的一种电子设备，该电子设备包括：处理器和存储器；存储器，用于存储实现牙齿形态发展预测方法的程序，该设备通电并通过所述处理器运行该方法的程序后，执行下述步骤：接收针对目标用户的口腔影像数据的牙齿形态发展预测请求；根据所述影像数据，生成所述目标用户的未来牙齿形态图像信息；向请求方回送所述图像信息。

本申请虽然以较佳实施例公开如上，但其并不是用来限定本申请，任何本领域技术人员在不脱离本申请的精神和范围内，都可以做出可能的变动和修改，因此本申请的保护范围应当以本申请权利要求所界定的范围为准。

在一个典型的配置中，计算设备包括一个或多个处理器(CPU)、输入/输出接口、网络接口和内存。

内存可能包括计算机可读介质中的非永久性存储器，随机存取存储器(RAM)和/或非易失性内存等形式，如只读存储器(ROM)或闪存(flash RAM)。内存是计算机可读介质的示例。

1、计算机可读介质包括永久性和非永久性、可移动和非可移动媒体可以由任何方法或技术来实现信息存储。信息可以是计算机可读指令、数据结构、程序的模块或其他数据。计算机的存储介质的例子包括，但不限于相变内存(PRAM)、静态随机存取存储器(SRAM)、动态随机存取存储器(DRAM)、其他类型的随机存取存储器(RAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、快闪记忆体或其他内存技术、只读光盘只读存储器(CD-ROM)、数字多功能光盘(DVD)或其他光学存储、磁盒式磁带，磁带磁磁盘存储或其他磁性存储设备或任何其他非传输介质，可用于存储可以被计算设备访问的信息。按照本文中的界定，计算机可读介质不包括非暂存电脑可读媒体(transitory media)，如调制的数据信号和载波。

2、本领域技术人员应明白，本申请的实施例可提供为方法、系统或计算机程序产品。因此，本申请可采用完全硬件实施例、完全软件实施例或结合软件和硬件方面的实施例的形式。而且，本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。