基于视觉关系检测的煤矿综采工作面不安全行为识别方法

摘要

本发明公开了一种基于视觉关系检测的煤矿综采工作面不安全行为识别方法，包括：获取煤矿综采工作面的图像数据，对数据进行标注和语义描述，建立煤矿综采工作面不安全行为语义图像数据集；在建立的数据集上构建“人‑机‑环”目标识别算法和视觉关系检测模型，形成图像文本描述；通过语句相似度计算进行图像文本描述语句与煤矿不安全行为数据库中词条进行匹配检索，识别煤矿不安全行为。基于图像理解的方法，不仅能够对识别煤矿工作面中的“人、机、环”对象，还能识别每个对象间的语义关系，可以对煤矿工作面中的不安全行为进行识别，准确率高。