視覚障害者向けの飲食店メニュー情報取得支援システム

摘要

本研究では利用者に飲食店メニューの情報(品目•価格)を提示するシステムを提案する.対象とする飲食店メニューは，文字が写真などの背景と重ならないメニューと重なるメニューに大別でき，システムはそれぞれについて別々の処理を行う.例えば，文字が写真と重なるメニューに対しては取得した画像からSVMを用いて通貨記号¥や円を検出し，その色を抽出することで文字と背景を分離する.そしてフィルタリング処理を行い，残つた文字列候補に対してOCRにより文字認識し，音声合成により利用者に文字情報を伝達する.5店舗8枚の飲食店メニュー画像を用いた実験により，提案手法の有効性を確認した.%We propose a portable system to provide blind persons with restaurant menu information (food/drink and its price). Restaurant menus are classified into two types, i.e. menus in which characters don't overlap with pictures and those in which characters overlap with pictures. We developed procedures for each menu. For example, for menus with characters on pictures, the system detects currency symbols by using SVM from an obtained image. It separates characters and pictures by extracting colors of currency symbols. Then, it filters out non character string regions and applies OCR to obtained character string regions. Finally, it presents the recognized text to blind persons as voice. Experimental results for 8 images (5 restaurants) shows the effectiveness of the proposed method.