複雑背景中の多色テロップの認識方式の検討

摘要

We propose a caption recognition method for multi-color characters on complex background. Caption characters are used for an efficient search on a large amount of recorded TV programs. In the caption character recognition, the caption appearance section and the area is extracted, the character patterns are extracted from the area, and recognized. This paper focuses on caption character patterns extraction and recognition for multi-color characters on complex background that conventional methods are difficult to recognize them. The proposed method extracts decomposed binary images from input color caption image by color clustering. Then character candidates that are composed of combination of connect components are extracted by using recognized certainty. Finally, characters are selected by beyond-color Dynamic Programming method in which weight on recognition certainty, character alignment, and continuity of color are used. In the character recognition evaluation of one-line multi-color character string on a complex background, a great improvement was achieved from a conventional technique that can recognize only one-color characters on complex background image.%映像中の複雑背景上の多色文字列の認識手法を提案する．大量に録画されたTV 番組の効率的な検索方法としてテロップ文字情報を使用する方法が挙げられる．テロップ文字認識では，テロップ領域と出現区間を求め，求めた領域内部から文字パターンを抽出し認識を行う．従来は，複雑な背景や複数の文字色が使用されるテロップの文字パターン抽出が困難であったため，背景の一様性や文字色に対する制約を設ける必要があった．本報告では，この制約を緩和するための一方式として，カラーテロップ画像を色によって分解し，各色分解画像上に現れる文字候補から文字列を再構成する方式を提案する．文字列の再構成では，各分解画像で得られた文字候補に対する文字認識確信度，文字の並びの連続性，色の連続性をコストとしたDynamic Programming（DP）法によって文字列を構成する文字を選択する．複雑背景上の一行多色文字列の文字認識評価で，従来の一行同一色に対応したテロップ認識技術よりも認識再現率で大幅な向上を実現した．