基于广义稀疏的图像超分辨重建方法研究

摘要

在日常生活与生产实践中，图像是应用最广泛的信息载体之一。然而，在实际成像过程中，受光学模糊、运动模糊、欠采样和噪声等退化因素的影响，人们往往很难获得期望的高分辨率图像或图像序列，这给后续的图像处理、分析与理解带来诸多困难，影响人们正确认识客观世界及其规律。如何提高所获图像的空间分辨率，改善图像质量，是图像处理领域极具挑战性的课题。图像超分辨重建技术是解决上述问题较经济而有效的手段之一。利用图像超分辨重建技术，不仅能获得高于现有成像系统空间分辨率的高质量图像，而且能充分利用大量已有的低分辨图像资源。该技术在模式识别、计算机视觉、视频监控、遥感成像以及生活娱乐等方面具有广泛的应用前景，受到国内外学者的广泛关注。
　　 针对超分辨重建面临的挑战性问题，本文利用广义稀疏表示思想，从邻域样本的选择、映射关系的估计、正则化先验的设计以及自相似冗余信息的学习等方面，对基于实例学习和基于重构的图像超分辨重建方法进行了深入研究，主要研究成果为：
　　 (1)提出了一种基于高斯混合模型聚类和部分监督邻域嵌入的实例学习图像超分辨方法。在学习阶段，使用高斯混合模型聚类方法构造类别预测器，用于估计训练集中低分辨图像块的类别信息；在合成阶段，结合类别信息，使用部分监督邻域选择方案调整输入图像块与训练集样本之间的距离，一定程度上克服了传统邻域嵌入超分辨算法在邻域选择方面存在的不足。
　　 (2)针对邻域嵌入超分辨算法低分辨图像块与高分辨图像块在邻域关系不能保持不一致问题，提出了一种基于对偶约束的联合学习超分辨重建方法。首先，通过对偶约束方法将低分辨图像块与对应高分辨图像块构成成组块对，通过联合学习构造低分辨图像块与高分辨图像块的联合特征子空间；然后，在联合特征子空间中进行邻域的选择和低分辨与高分辨图像块之间的映射关系的估计。最后，结合全局约束和一致性先验，进一步提高初始化估计超分辨重建图像的质量。
　　 (3)为提高已有邻域嵌入算法的重建效率，同时解决邻域选择方法存在的不足，提出了一种基于方向梯度直方图(Histograms of Oriented Gradients，HOG)特征聚类的稀疏邻域嵌入的实例学习超分辨方法。为提高重建效率，引入HOG特征描述低分辨图像块的局部几何结构，通过k-means聚类技术将大规模训练集划分成多个结构相似的子类；针对已有邻域嵌入超分辨算法在邻域选择方面存在的不足，提出了一种结合鲁棒性SL0稀疏表示与k/K最近邻策略的稀疏邻域选择算法，能同时实现邻域的选择与重构权值的计算，有效提高了图像超分辨重建的质量。
　　 (4)考虑到实例学习方法和重构方法在超分辨重建方面的互补性，提出了一种基于多尺度字典学习和自适应正则化相结合的图像超分辨方法。为实现基于实例的重建方法，直接从输入的低分辨图像中提取不同尺度的图像块，通过联合学习多个尺度字典，以构建稀疏幻像正则项；为实现基于重构的方法，使用可控核回归技术构造局部先验正则项，以获取图像的局部结构信息；使用非局部均值滤波技术构造非局部先验正则项，以获取图像中相似性冗余性信息。将全局重构约束项、局部与非局部正则项和稀疏幻像正则项相组合，构成一个统一的超分辨重建框架优化求解。在不需要外部训练图像的情况下，提出的方法在保持清晰的图像边缘和恢复丰富的高频细节两方面均能取得较好的效果。
　　 (5)本质上，基于实例学习方法的重建质量很大程度上依赖于训练图像。鉴于此，提出了一种多尺度自相似冗余学习的图像超分辨方法。该方法首先利用低分辨图像不同尺度的自相似冗余结构构造训练图像块对，然后，使用邻域嵌入算法和逐层重建策略，逐步将输入的低分辨图像放大到所需要的高分辨图像。最后，利用非局部均值滤波技术获取图像中相同尺度的自相似冗余信息，通过构造非局部正则项，以进一步提高超分辨重建的质量。
　　 综上所述，本文以信号处理、模式识别为理论基础，以统计学习方法为主要技术手段，提出了五种新的图像超分辨重建方法，有效克服了现有方法存在的不足，在重建清晰的图像边缘和恢复丰富的纹理方面取得了较好的效果，为解决图像超分辨重建问题提供了新的途径。