一种面向2D图像的车辆对象视点预测与三维模型恢复方法及装置

摘要

本发明提供的一种面向2D图像的车辆对象视点预测与三维模型恢复方法，首先生成离线掩膜模板数据集，包括离线完整掩膜模板数据集与离线删节掩膜模板数据集；然后在数据集上训练以视点、掩膜、对象类别、图像删节、二维选框为分支的深度卷积神经网络；根据待预测图像中车辆对象，通过比对基于深度卷积神经网络的掩膜预测结果与待匹配离线掩膜模板数据集合中的掩膜对象，得到掩膜模板匹配集合；最后利用车辆对象视点、三维模型、掩膜存在的透视投影变换规律，设计基于视点与掩膜的置信度加权融合方法，得到最终视点预测结果，恢复车辆三维模型。