基于最大熵模型的共指消解研究

摘要

共指是突发事件新闻报道中的常见现象.良好的处理共指现象,是进行信息提取的基本必要过程.本文采用最大熵模型对汉语突发事件新闻报道中的共指现象进行消解,目的是提取出突发事件新闻报道中指向同一实体的名词、代词和名词短语.根据问题特点,算法选择了8类特征作为模型的特征,该模型在20万字的新闻语料上进行训练,在10万字规模的语料上进行测试,最终的测试得到系统的F值为64.5%.