時空間解像度の異なる3板撮像画像からの高時空間解像度カラー画像生成: 事例学習型超解像の利用

摘要

This paper proposes an example-based super-resolution using two kinds of input-image sequences to get a high-resolution, high-frame-rate image sequence. One sequence consists of high-resolution images with low frame rate; the other sequence consists of low-resolution images with high frame rate. The combination of a color-separating prism and three multiple-resolution sensors simultaneously separated the color and spatio-temporal resolutions. The super-resolution of low-resolution red and blue images reconstructs high-resolution green images by referring to the training dictionary. The training dictionary is given as the pair of a high-resolution green image and low-resolution red-and-blue images.%デジタルスチルカメラに匹敵する空間解像度を持つカラー動画撮像を民生機器で実現するために，解像度とフレームレートの異なるRGB3 チャネルの動画像を用いて高解像度高フレームレートのカラー動画像を生成する手法を提案する．色分解プリズムと解像度の異なる撮像素子の組み合わせで，色と解像度を同時に分解する．間欠的に取得されるGの高解像度画像とRとBの低解像度画像のペアを事例学習して辞書に登録し，毎フレーム取得されるRとBの低解像度画像からGの高解像画像を生成する．1台のカメラで低解像度と高解像度の事例データが取得でき，かつ，ビデオシーケンスの中から撮影シーンに依存した学習辞書を作成できる．