単語連鎖書き換え規則を用いた連語書き換え機構

摘要

日本語形態素解析MAJAでは、翻訳処理、音声処理など様々な用途での利用を見越して、日本語文を辞書に収録された基本語(短単位)の組合わせに分割する。しかし、例えば機械翻訳では、格助詞相当の連語、助動詞相当の複合辞などのように長単位で扱ったほうが処理がしゃすい。そのため、形態素解析の後処理として、単語連鎖列から連語となる部分を抽出し、長単位の単語に置き換える手法が必要とされる。