班智达藏文语料切分词典的建立与算法研究

摘要

随着自然语言信息处理的不断发展和完善,大规模语料文本处理已经成为计算语言学界的一个热门话题.一个重要的原因是从大规模的语料库中能够提取出所需要的知识.而语料文本的处理与加工以语法信息词典作基础.结合藏文语料库切分标注规范,论述了对藏文语料库切分与标注用的藏文语法信息词典的建立和设计,重点讨论了该词典的内容建设、语法信息的标注、索引结构及查找算法.