一种基于深度神经网络的自然图像字符识别方法及系统

摘要

本发明公开了一种基于深度神经网络的自然图像字符识别方法及系统，其方法包括图像采集融合、字符定位、字符识别以及合理性判断的步骤；其系统包括图像采集融合单元、字符检测单元、字符识别单元以及合理性判断单元；字符检测单元通过训练得到的字符探测器自动定位图像中字符所在区域；字符识别单元通过构建的多接口CNN先将字符分为中文、英文和数字三大类，再对相应类别的字符进行识别；合理性判断单元中将识别单元的输出结果与基于字符的LSTM模型预测结果融合，提高中文连续字符识别的合理性。该自然图像字符识别方法及系统可智能地对自然图像中字符进行识别，核心处理模型均由深度神经网络构成，能最大程度模拟人脑，具备较高的鲁棒性和识别精度。