基于多帧融合光流的视频超分辨率重建方法

摘要

一种基于多帧融合光流的视频超分辨重建方法，由采集数据集、构建运动补偿网络、超分辨率重建网络步骤组成。本发明在多帧融合光流网络中，对于输入的多帧，能够充分利用帧内空间相关性，能够弥补损失细节，用融合后的光流作运动补偿，补偿帧与学习目标相似。在超分辨率重建网络中，用三维尺度特征提取层和时空残差模块提取补偿帧的图像特征，并采用亚像素卷积，得到高分辨率视频帧。对多帧融合光流网络和视频超分辨率重建网络，同时进行端到端的训练。采集的视频帧之间的时空信息，能够表达视频帧信息融合的特征，重建出效果良好的高分辨率视频帧。可应用于卫星图像、视频监控、医学成像、军事科技等技术领域。