基于多任务级联卷积神经网络的授课辅助系统

摘要

本发明方法是在高校课堂上基于多任务级联卷积神经网络的授课辅助系统，采用卷积神经网络训练人脸样本生成人脸识别模型，利用训练的结果识别人脸关键点和面部朝向，关键点包括：人眼、鼻子、嘴、脸的轮廓。根据关键点的位置分析学生听课行为，根据分析面部朝向、是否闭眼、表情和眼睛相对面部的运动轨迹，分析学生听课行为，听课行为包括：睡觉、溜号、不听课、疑惑、理解，收集听课行为并及时给出提示，通过收集的听课行为评估学生学习状态，辅助教师掌握学生听课情况。