高精度動き推定に基づく高フレームレート画像の統合による高空間解像度画像の合成

摘要

近年，イメージセンサの画素ピッチがレンズの光学限界に近づき，これ以上多画素化を図っても実質的な空間解像度が向上しない状況に陥りつつある．そこで我々は，複数フレームの統合による高空間解像度化処理について検討してきた．一般的に，複数のフレームを統合する方式では高精度な動き推定が不可欠である．しかし，通常フレームレートの画像では動きボケやフレーム間の相関の低さが原因となり，高精度な動き推定が難しい．そこで我々は，高フレームレート画像を利用した高精度かつ低演算量な動き推定方式を提案してきた．本稿では，この高精度動き推定を基に，少ない演算量で高空間解像度の画像を合成する手法について提案し，ソフトウェアによるリアルタイム処理を実現する．また，動き推定処理のハードウェア実装について検討する．