聴覚障害者支援のためのマルチモーダル発話可視化に関する研究

摘要

聴覚障害者のコミュニケーション手段としては手話や筆談，口話法など様々な方法が存在するが，会議などの複数人かつ対面という状況では，それぞれ欠点を持つ．本研究では，聴覚障害者に対する健聴者の発話内容の理解支援のためのマルチモーダル発話可視化アプリケーションを提案する．本研究におけるマルチモーダルな可視化とは，複数の情報の提示·可視化モードを組み合わせた複合的な情報の提示手段のことを指す．音声認識を使った発話内容のテキスト化モードや，専門用語の説明モードなどを利用者自身が選択することで，様々な聴覚障害のレベルやニーズに合わせた情報保障を実現できると考える．さらに予備実験として，Googleが提供しているオープンな音声認識エンジン，Web Speech APIの発話認識精度の評価実験を行う．