一种摘录标记方法及摘录标记笔

摘要

本申请公开了一种摘录标记方法及摘录标记笔，属于智能学习设备领域，包括处理器、第一拍照摄像头和第二拍照摄像头，处理器控制第一拍照摄像头和第二拍照摄像头以一定的频率拍摄第一图像帧和第二图像帧；将第一图像帧和第二图像帧进行融合拼接，不断的生成新图像；当笔尖被松开后将生成的新图像进行文字行切分及字符切分；获取离笔尖位置最近的文字行；基于词语或单词图像特征模式将获取的离笔尖位置最近的文字行进行分类；将分类模式赋予识别结果，并进行光学字符识别；识别文字行下方的标记线类型，并将文字赋予相应的标记属性。本申请能够在学习时在印刷介质上边扫描边进行标注，并能够通过识别标记线对摘录内容进行分类整理。

说明书

技术领域

本申请涉及智能学习设备领域，具体涉及一种摘录标记方法及摘录标记笔。

背景技术

随着科技的不断进步和发展，扫描翻译笔（即扫描笔、取词笔等）越来越受欢迎。人们在阅读过程中，为了摘录阅读内容，一般采用扫描笔来对感兴趣内容进行扫描录入，同时也可以对单词进行扫描录入翻译。扫描笔在使用时，贴在印刷介质上对整个词语进行扫描，扫描后取得词语的扫描图像，然后对词语的扫描图像进行图形处理，并利用OCR技术识别出文字，再翻译成用户所需要的语言，或者对扫描内容进行存储和转发。

但是，现有的扫描笔在扫描时，不能在印刷介质上同时对扫描内容进行批注；在摘录时，无法对摘录内容同时进行分类整理。

发明内容

为此，本申请提供一种摘录标记方法及摘录标记笔，以解决现有技术存在的扫描笔不能在印刷介质上同时对扫描内容进行批注、无法对摘录内容同时进行分类整理的问题。

为了实现上述目的，本申请提供如下技术方案：

第一方面，一种摘录标记方法，包括：

检测笔芯的笔尖是否持续被按压并移动；

若所述笔尖持续被按压并移动，则控制第一拍照摄像头和第二拍照摄像头以一定的频率拍摄第一图像帧和第二图像帧；

将所述第一图像帧和所述第二图像帧进行融合拼接，不断生成新双摄拼接图像；

将所述新双摄拼接图像不断的进行融合拼接，形成待拼接图像；

检测所述笔尖是否被松开；

若所述笔尖被松开，则将所述待拼接图像进行文字行切分及字符切分；

获取离所述笔尖位置最近的文字行；

基于词语或单词图像特征模式将获取的离所述笔尖位置最近的文字行进行分类；

将分类模式赋予识别结果，并进行光学字符识别；

识别文字行下方的标记线类型，并将文字赋予相应的标记属性。

进一步的，所述识别文字行下方的标记线类型时是通过对连续线区域在连续几帧图像中的像素位置变化来进行识别的。

第二方面，一种摘录标记笔，包括笔壳、笔芯、第一拍照摄像头、第二拍照摄像头、第一透镜、第二透镜、处理器、微动开关和存储器；

所述处理器、所述微动开关、所述存储器、所述第一拍照摄像头和所述第二拍照摄像头均设置在所述笔壳内，所述微动开关、所述存储器、所述第一拍照摄像头和所述第二拍照摄像头均与所述处理器电连接；

所述笔芯安装在所述笔壳末端，一端位于所述笔壳内部与所述微动开关接触，另一端位于所述笔壳外部，所述第一透镜和所述第二透镜设置在所述笔壳位于所述笔芯的一面，且分别与所述笔壳内的所述第一拍照摄像头和所述第二拍照摄像头的位置相对应；

所述笔芯用于按压所述微动开关使所述微动开关接通；所述处理器控制所述第一拍照摄像头和所述第二拍照摄像头进行拍照。

进一步的，所述笔芯、所述第一拍照摄像头和所述第二拍照摄像头在同一平面呈三角形设置。

进一步的，所述笔芯为墨水笔芯。

进一步的，还包括无线传输单元，所述无线传输单元设置在所述笔壳内部与所述处理器电连接。

进一步的，还包括UI单元，所述UI单元与所述处理器电连接。

相比现有技术，本申请至少具有以下有益效果：

本申请提供了一种摘录标记方法及摘录标记笔，包括处理器、第一拍照摄像头和第二拍照摄像头，处理器控制第一拍照摄像头和第二拍照摄像头以一定的频率拍摄第一图像帧和第二图像帧；将第一图像帧和第二图像帧进行融合拼接，不断的生成新图像帧；当笔尖被松开后将生成的新图像帧进行文字行切分及字符切分；获取离笔尖位置最近的文字行；基于词语或单词图像特征模式将获取的离笔尖位置最近的文字行进行分类；将分类模式赋予识别结果，并进行光学字符识别；识别文字行下方的标记线类型，并将文字赋予相应的标记属性。本申请能够在学习时在印刷介质上边扫描边进行标注，并能够通过识别标记线对摘录内容进行分类整理。

摘录标记笔采用双摄像头的设置，能够增大对扫描文字拍照的容错，并且能扫描超出扫描宽度的印刷文字。

附图说明

为了更直观地说明现有技术以及本申请，下面给出几个示例性的附图。应当理解，附图中所示的具体形状、构造，通常不应视为实现本申请时的限定条件；例如，本领域技术人员基于本申请揭示的技术构思和示例性的附图，有能力对某些单元（部件）的增/减/归属划分、具体形状、位置关系、连接方式、尺寸比例关系等容易作出常规的调整或进一步的优化。

图1为本申请实施例一提供的一种摘录标记方法流程图；

图2为本申请实施例一提供的标记线种类示意图；

图3为本申请实施例二提供的一种摘录标记笔结构示意图；

图4为本申请实施例二提供的一种摘录标记笔截面示意图；

图5为本申请实施例二提供的双拍照摄像头取词区域示意图。

附图标记说明：

1、笔壳；2、笔芯；3、处理器；4、拍照摄像头；41、第一拍照摄像头；42、第二拍照摄像头；5、透镜；6、微动开关；7、存储器；8、UI单元；9、无线传输单元；10、电源单元。

具体实施方式

以下结合附图，通过具体实施例对本申请作进一步详述。

在本申请的描述中：除非另有说明，“多个”的含义是两个或两个以上。本申请中的术语“第一”、“第二”、“第三”等旨在区别指代的对象，而不具有技术内涵方面的特别意义（例如，不应理解为对重要程度或次序等的强调）。“包括”、“包含”、“具有”等表述方式，同时还意味着“不限于”（某些单元、部件、材料、步骤等）。

本申请中所引用的如“上”、“下”、“左”、“右”、“中间”等的用语，通常是为了便于对照附图直观理解，而并非对实际产品中位置关系的绝对限定。在未脱离本申请揭示的技术构思的情况下，这些相对位置关系的改变，当亦视为本申请表述的范畴。

实施例一

请参阅图1，本实施例提供一种摘录标记方法，包括：

S1：检测笔芯的笔尖是否持续被按压并移动；

具体的，笔尖持续被按压并移动的同时在印刷介质上生成标记线。

S2：若笔尖持续被按压并移动，则控制第一拍照摄像头和第二拍照摄像头以一定的频率拍摄第一图像帧和第二图像帧；

S3：将第一图像帧和第二图像帧进行融合拼接，不断的生成新双摄拼接图像；

S4：将新双摄拼接图像不断的进行融合拼接，形成待拼接图像；

具体的，

S41：判断是否生成待拼接图像；

S42：若没有生成待拼接图像，则标注新双摄拼接图像为待拼接图像；

S43：若已经生成待拼接图像，则将新双摄拼接图像与待拼接图像进行融合拼接，生成新的待拼接图像，并抛弃原有待拼接图像。

S5：检测笔尖是否被松开；

S6：若笔尖被松开，则将生成的待拼接图像进行文字行切分及字符切分；

S7：获取离笔尖位置最近的文字行；

S8：基于词语或单词图像特征模式将获取的离笔尖位置最近的文字行进行分类；

S9：将分类模式赋予识别结果，并进行光学字符识别；

S10：识别文字行下方的标记线类型，并将文字赋予相应的标记属性。

请参阅图2，标记线类型可以为图2所示的几种类型但并不限于这几种。

具体的，识别文字行下方的标记线类型时是通过对连续线区域在连续几帧图像中的像素位置变化来进行识别的。标记属性可以按使用者的要求进行标记，例如标记为难点、重点或其他感兴趣点等。标记后，可以生成所有的难点集合、重点集合等，方便使用者对摘录内容的分类整理。

实施例二

请参阅图3，本实施例提供了一种摘录标记笔，包括笔壳1、笔芯2、拍照摄像头4、透镜5、处理器3、微动开关6、存储器7和UI单元8，笔芯2为墨水笔芯，拍照摄像头4包括第一拍照摄像头41和第二拍照摄像头42，对应的，透镜5包括第一透镜和第二透镜；处理器3、微动开关6、存储器7、第一拍照摄像头41和第二拍照摄像头42均设置在笔壳1内，UI单元8设置在笔壳1的外表面，微动开关6、存储器7、UI单元8、第一拍照摄像头41和第二拍照摄像头42均与处理器3电连接，笔芯2安装在笔壳1末端，一端位于笔壳1内部与微动开关6接触，另一端位于笔壳1外部；第一透镜和第二透镜设置在笔壳1上，与笔芯2位于同一面，且分别与笔壳1内的第一拍照摄像头41和第二拍照摄像头42的位置相对应，使用者握持后，透镜5的位置自然处于使用者手心的相对面，朝向所摘录的内容。

具体的，存储器7存储有若干指令，处理器3执行指令时实现以下方法步骤：

检测笔芯2的笔尖是否持续被按压并移动；

若笔尖持续被按压并移动，则控制第一拍照摄像头41和第二拍照摄像头42以一定的频率拍摄第一图像帧和第二图像帧；

将第一图像帧和第二图像帧进行融合拼接，不断生成新双摄拼接图像；

将新双摄拼接图像不断的进行融合拼接，形成待拼接图像；

检测笔尖是否被松开；

若笔尖被松开，则将待拼接图像进行文字行切分及字符切分；

获取离笔尖位置最近的文字行；

基于词语或单词图像特征模式将获取的离所述笔尖位置最近的文字行进行分类；

将分类模式赋予识别结果，并进行光学字符识别；

识别文字行下方的标记线类型，并将文字赋予相应的标记属性。

本申请能够在学习时在印刷介质上边扫描边进行标注，并能够通过识别标记线对摘录内容进行分类整理；采用双拍照摄像头，还可以避免因为使用者的习惯，导致笔有小角度的旋转，无法摘录到完整的内容，导致摘录失败的问题。

请参阅图4至图5，本实施例中笔芯2、第一拍照摄像头41和第二拍照摄像头42在同一平面呈三角形设置。在进行摘录时，当笔芯2位于笔壳1外面的一端被按压并在印刷介质上移动时，笔芯2的按压力作用在微动开关6上接通电路，处理器3控制第一拍照摄像头41和第二拍照摄像头42分别对拍摄区域A和拍摄区域B进行拍摄。本申请采用双拍照摄像头，可以在双拍照摄像头的配合下，摘录到完整的内容。

需要说明的是，本实施例中的拍摄区域具有一定大小的尺寸，能够容纳常见的印刷字号下多行文字。

本实施例提供的摘录标记笔还设有无线传输单元9和电源单元10，无线传输单元9和电源单元10均设置在笔壳1内与处理器3电连接。

具体的，UI单元8为LCD显示屏时，用于向使用者展示摘录结果；还可以配合设置扬声器，语音播放摘录结果。

具体的，无线传输单元9可以与手机或者平板无线连接，用于将摘录结果发送到手机或者平板上。

具体的，存储器7不仅可以用于存储指令，还可以用于存储摘录结果或者标记属性，方便用户查看；电源单元10用于为整个摘录标记笔供电，考虑到摘录标记笔的体积较小，电源单元10的电池优选为纽扣电池。

具体的，为了便于使用者握持，笔壳1可以设计为圆形、六角形或三角形等。

本实施例提供的摘录标记笔能够在学习时在印刷介质上边扫描边进行标注，并能够通过识别标记线对摘录内容进行分类整理；采用双拍照摄像头进行双目图像拼接，既增加了拍照的容错能力又能够扫描超出扫描宽度的印刷文字。

以上实施例的各技术特征可以进行任意的组合（只要这些技术特征的组合不存在矛盾），为使描述简洁，未对上述实施例中的各个技术特征所有可能的组合都进行描述；这些未明确写出的实施例，也都应当认为是本说明书记载的范围。

上文中通过一般性说明及具体实施例对本申请作了较为具体和详细的描述。应当理解，基于本申请的技术构思，还可以对这些具体实施例作出若干常规的调整或进一步的创新；但只要未脱离本申请的技术构思，这些常规的调整或进一步的创新得到的技术方案也同样落入本申请的权利要求保护范围。