生成对抗式视频超分辨率重建及重建图像真伪性鉴别方法

摘要

本发明公开了一种生成对抗式视频超分辨率重建及重建图像真伪性鉴别方法，在显隐混合约束机制网络中，对输入视频帧分别进行显式的光流估计、运动补偿，以及隐式的长间距相关性计算，共同约束网络以增强视频的时域连贯性。在多通道多尺度结构网络中，将显隐混合约束机制网络输出的多帧分别送入多通道子网络和多尺度子网络，学习低分辨率视频帧中蕴含的帧内空间相关信息和帧间时间相关信息。最后，使用生成对抗训练方法，通过混合损失函数训练整体网络，将多通道多尺度网络产生的低分辨率特征张量图进行融合并放大，得到最终的高分辨率视频帧。本发明能充分利用视频帧中蕴含的时空相关信息，增强视频帧的时域连贯性，恢复逼真的图像细节。