一种基于多模态融合的自主系统感知方法及系统

摘要

一种基于多模态融合的自主系统感知方法及系统，其方法包括：获取多个车辆的传感器采集的数据，利用训练好的多模态数据融合框架对传感器采集的数据进行处理，将处理的结果进行融合，得到一级融合结果，基于目标识别业务，对一级融合结果进行处理，保留感兴趣区域信息，利用已有的多视角融合算法构建协作级融合架构，对多个车辆上传的感兴趣区域信息进行二次融合，得到二次融合结果，将二级融合结果下发至车辆，以供车辆根据二级融合结果做控制决策；本申请通过构建车辆级联协作数据融合框架，可通过级联框架提高和扩展环境视野，解决单个自动驾驶车辆视野局限性，降低不确定性，提高感知算法的性能。