一种基于隧道雷视数据融合的事件检测方法、装置及系统

摘要

本发明公开了隧道检测领域的一种基于隧道雷视数据融合的事件检测方法、装置及系统，对雷达数据进行分类筛选，得到雷达数据目标检测点；对视频数据进行目标检测，得到视频数据检测目标；基于雷达数据检测目标和视频数据检测目标，通过检测框交叉比的融合算法进行决策级融合，得到目标融合结果；所述目标融合结果包括目标的速度、位置信息、数量以及目标间的间距；所述目标包括车辆目标和非车辆目标；根据目标融合结果，进行交通事件检测判定，得到交通事件检测结果；本发明分析融合后交通特征信息，判断是否发生交通事件，并输出交通事件的类型进行事件预警，提高交通事件的检测精度。

说明书

技术领域

本发明属于交通检测技术领域，具体涉及隧道检测方法、装置及系统。

背景技术

隧道具有密闭式结构空间特性，并且黑白洞现象、噪声大、亮度环境低等特点明显，一旦发生交通事故，极易导致二次事故甚至交通瘫痪。根据《2020年交通运输行业发展统计公报》统计结果显示，我国公路隧道有21316处，因此，如何利用技术手段保障此类隧道的安全运营至关重要。

隧道交通事件的有效检测是提升其交通通行安全的关键。目前，市面上隧道交通事件检测产品主要存在问题：绝大多数产品采用固定视频检测技术，单一技术手段难以应对多种多样的交通事件，导致隧道交通事件检测内容覆盖不全。少数产品会加以雷达等设备进行辅助检测，但是不同类设备之间相对孤立，数据融合性不足，协同检测能力弱，导致隧道交通事件检测精度不高。

发明内容

本发明的目的在于提供一种基于隧道雷视数据融合的事件检测方法、装置及系统，全面、准确地获取隧道内交通事件检测结果，实现隧道交通事件随感随知，及时应急处置，事后统计分析，降低安全隐患。

为达到上述目的，本发明所采用的技术方案是：

第一方面，本发明提供了一种基于隧道雷视数据融合的事件检测方法，包括：

获取隧道内的雷达数据和视频数据；

对雷达数据进行目标分类筛选，得到雷达数据目标检测点；

对视频数据进行目标检测，得到视频数据检测目标；

基于雷达数据目标检测点和视频数据检测目标，通过检测框交叉比的融合算法进行决策级融合，得到目标融合结果；所述目标包括车辆目标和非车辆目标；所述目标融合结果包括目标的速度、位置信息、数量以及目标间的间距；

根据目标融合结果，进行交通事件检测判定，得到交通事件检测结果。

优选的，对雷达数据进行分类筛选，得到雷达数据目标检测点，包括：对获取雷达数据进行初步聚类形成m个子簇，每个子簇为ci，计算所有子簇之间的速度差Δv，当两个子簇之间速度差的最小值Δv

优选的，对视频数据进行目标检测，得到视频数据检测目标，包括：

将视频数据输入训练好的FasterR-CNN检测模型，得到模型输出的视频数据检测目标；所述FasterR-CNN检测模型经过多尺度的训练数据集训练。

优选的，基于雷达数据检测目标和视频数据检测目标，通过检测框交叉比的融合算法进行决策级融合，得到目标融合结果，包括：

以雷达数据目标检测点为中心，建立矩形的雷达检测框Rradar；

对视频数据检测目标构建最小外接矩形的视频检测框Rcamera；

将雷达检测框Rradar基于距离和相似性原理投影到视频检测框Rcamera上；雷达检测框Rradar与视频检测框Rcamera包围的总面积为Su，重合区域的面积为Si，则计算出交叉比值I＝Su/Si；

当I值在阈值范围之内，则取雷达检测框Rradar与视频检测框Rcamera中边界较大为融合检测框，输出融合检测框的检测结果作为融合检测结果；

当I值在阈值范围之外，同时保留雷达检测框Rradar与视频检测框Rcamera的检测结果。

优选的，根据目标融合结果，进行交通事件检测判定，得到交通事件检测结果，包括：

根据车辆目标数量计算出车道占有率，当车道占有率大于车道占有率阈值、车辆目标的速度小于拥堵车速阈值以及车辆目标之间的距离小于车距阈值时，判定隧道交通发生车辆拥堵事件；

车辆目标速度为零，且停留时间大于时间阈值，判定发生车辆违停事件；车辆目标的速度高于最大车速阈值，判定发生车辆超速事件；车辆目标的速度低于最小车速阈值，判定发生车辆缓行事件；

根据车辆目标位置检测到车辆目标存在车道压线，判定为发生车辆违规变道事件。

优选的，所述非车辆目标包括行人和抛洒物，当检测到行人，判定为发生行人闯入事件；当检测到抛洒物，判定为发生违规抛洒物。

优选的，还包括：根据交通事件检测结果，对隧道内通行情况进行可视化展示，记录每次隧道内交通事件发生的基本信息，辅助隧道交通事件管理和作业。

优选的，还包括：根据交通事件检测结果进行预警；所述预警方式包括短信预警、报警灯预警和广播预警。

第二方面，本发明提供了一种基于隧道雷视数据融合的事件检测装置，包括：

数据获取模块，用于获取隧道内的雷达数据和视频数据；

分类筛选模块，用于对雷达数据进行目标分类筛选，得到雷达数据目标检测点；

目标检测模块，对视频数据进行目标检测，得到视频数据检测目标；

数据融合分析模块，基于雷达数据目标检测点和视频数据检测目标，通过检测框交叉比的融合算法进行决策级融合，得到目标融合结果；

事件检测判定模块，根据目标融合结果，进行交通事件检测判定，得到交通事件检测结果。

第三方面，本发明提供了一种基于隧道雷视数据融合的检测系统，包括所述基于隧道雷视数据融合的事件检测装置，还包括

采集模块，包括在隧道按照设定间隔布设的多种视频感知设备和多种雷达感知设备，用于采集隧道内的雷达数据和视频数据；

报警模块，用于对交通事件进行短信预警；

显示模块，用于对隧道内通行情况进行可视化展示，辅助隧道交通事件管理和作业。

与现有技术相比，本发明所达到的有益效果：

本发明通过多种视频感知设备和多种雷达感知设备，避免了单一技术手段检测事件覆盖不全的问题，通过检测框交叉比的融合算法对分类筛选后的雷达数据和视频数据进行决策级融合，得到目标融合结果；根据目标融合结果，进行交通事件检测判定，得到交通事件检测结果，采用各类视频、雷达前端感知设备数据融合、相互补充、协同检测的技术方案，显著提高隧道交通事件检测范围、检测精度和处置能力，实现对隧道内交通事件的有效检测和管理。

本发明提供综合管理模块对隧道内通行情况进行可视化展示，综合管理模块也设有短信配置功能，并记录每次隧道内交通事件发生的基本信息，便于隧道一线管理人员及时对事件进行响应与决策，实用性强。

附图说明

图1为本发明实施例提供的一种基于隧道雷视数据融合的事件检测方法步骤流程图；

图2为本发明实施例提供的雷达数据和视频数据进行决策级融合的流程图；

图3为本发明实施例提供的交通事件的检测流程图。

具体实施方式

下面结合附图对本发明作进一步描述。以下实施例仅用于更加清楚地说明本发明的技术方案，而不能以此来限制本发明的保护范围。

实施例一

如图1-2所示，第一方面，本发明提供了一种基于隧道雷视数据融合的事件检测方法，包括：

获取隧道内的雷达数据和视频数据，构建综合数据库；

对视频数据进行目标检测，得到视频数据检测目标；本施例中多种尺度训练数据集包括768、960、1024分辨率大小的视频图像，所述FasterR-CNN检测模型经过多种尺度训练数据集训练；将视频数据输入训练好的FasterR-CNN检测模型，得到模型输出的视频数据检测目标；。

对雷达数据进行分类筛选，得到雷达数据目标检测点，包括：对获取雷达数据进行初步聚类形成m个子簇，每个子簇为ci，计算所有子簇之间的速度差Δv，当两个子簇之间速度差的最小值Δv

基于雷达数据检测目标和视频数据检测目标，通过检测框交叉比的融合算法进行决策级融合，得到目标融合结果，包括：

以雷达数据目标检测点为中心，建立矩形的雷达检测框Rradar；

对视频数据检测目标构建最小外接矩形的视频检测框Rcamera；

将雷达检测框Rradar基于距离和相似性原理投影到视频检测框Rcamera上；雷达检测框Rradar与视频检测框Rcamera包围的总面积为Su，重合区域的面积为Si，则计算出交叉比值I＝Su/Si；

当I值在阈值范围之内，则取雷达检测框Rradar与视频检测框Rcamera中边界较大为融合检测框，输出融合检测框的检测结果作为融合检测结果；

当I值在阈值范围之外，同时保留雷达检测框Rradar与视频检测框Rcamera的检测结果。

如图3所示根据目标融合结果，根据目标融合结果，进行交通事件检测判定，得到交通事件检测结果，包括：

根据车辆目标数量计算出车道占有率，当车道占有率大于车道占有率阈值、车辆目标的速度小于拥堵车速阈值以及车辆目标之间的距离小于车距阈值时，判定隧道交通发生车辆拥堵事件；

车辆目标速度为零，且停留时间大于时间阈值，判定发生车辆违停事件；车辆目标的速度高于最大车速阈值，判定发生车辆超速事件；车辆目标的速度低于最小车速阈值，判定发生车辆缓行事件；

根据车辆目标位置检测到车辆目标存在车道压线，判定为发生车辆违规变道事件；所述非车辆目标包括行人和抛洒物，当检测到行人，判定为发生行人闯入事件；当检测到抛洒物，判定为发生违规抛洒物。

根据交通事件检测结果，判断交通事件是否发生，交通事件发生后启动预警功能，对出隧道内通行情况和事件发生的位置、事件类型进行可视化高亮显示，辅助隧道交通事件管理和作业。根据交通事件检测结果进行预警；所述预警方式包括短信预警、报警灯预警和广播预警；短信预警是将预警信息同步通过短信方式发送至管理人员手机进行提醒。隧道管理人接到预警提醒可以对相应事件进行查询、确认和上报处理，处理完毕后，相应事件不再预警提醒；记录每次隧道内交通事件发生的基本信息，记录每次隧道内交通事件发生的基本信息，生成评价指标及分析报表；分析报表包括事件同比分析报告、事件环比分析报告和事件误报率分析报告；价指标包括实时车辆占有率、实时车速和实时车辆流量，以供隧道管理人员掌握隧道交通事件发生情况，以便科学地进行决策。

实施例二

一种基于隧道雷视数据融合的事件检测装置，事件检测装置用于应用实施例一所述的事件检测方法，包括：

数据获取模块，用于获取隧道内的雷达数据和视频数据；

分类筛选模块，用于对雷达数据进行目标分类筛选，得到雷达数据目标检测点；

目标检测模块，对视频数据进行目标检测，得到视频数据检测目标；

数据融合分析模块，基于雷达数据目标检测点和视频数据检测目标，通过检测框交叉比的融合算法进行决策级融合，得到目标融合结果；

事件检测判定模块，根据目标融合结果，进行交通事件检测判定，得到交通事件检测结果。

实施例三

一种基于隧道雷视数据融合的检测系统，包括实施例二所述基于隧道雷视数据融合的事件检测装置，还包括

采集模块，包括在隧道按照设定间隔布设的多种视频感知设备和多种雷达感知设备，用于采集隧道内的雷达数据和视频数据；

报警模块，用于对交通事件进行短信预警；

显示模块，用于对隧道内通行情况进行可视化展示，辅助隧道交通事件管理和作业。

本领域内的技术人员应明白，本申请的实施例可提供为方法、系统、或计算机程序产品。因此，本申请可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。

本申请是参照根据本申请实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。

这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。

这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。

以上所述仅是本发明的优选实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明技术原理的前提下，还可以做出若干改进和变形，这些改进和变形也应视为本发明的保护范围。