基于格助词和接续特征的藏文自动分词方案

摘要

本文结合藏文各类形态特征,首次提出了一种基于格助词和接续特征(BCCF,Based on Case-auxiliary word and Continuous Feature)的书面藏文自动分词方案.其总体技术特点是:在格助词、接续特征、字性知识库以及词典支持下,进行逐级定位的确定性分词.初步测试表明:这一方案在发现和消除切分歧义、解决未登录词问题,进而在提高藏文分词精度方面具有很高的实用价值.