一种基于脸部特征的驾驶员路怒症实时识别和预警方法

摘要

本发明公开了一种基于脸部特征的驾驶员路怒症实时识别和预警方法，首先，运用Kinect从实时视频数据中追踪驾驶员人脸、提取驾驶员人脸的RGB图像和Depth图像，然后，将这两种图像信息进行灰度化、图像大小归一化以及均值滤波去除噪声等预处理操作后分别输入到训练好的CNN模型中进行特征提取，将提取的特征输入Softmax分类器进行识别，分别对人脸的RGB图像和Depth图像连续的30帧的分类结果进行融合，计算得到两通道置信度的概率值，比较两个置信度大小，置信度最高的为驾驶员表情最终识别结果，并根据识别结果对驾驶员进行预警。本发明融合RGB?D驾驶员脸部特征信息，在夜间或者恶劣驾驶环境下，依然能实现实时、高精度地识别驾驶员愤怒情感进行预警。