AI时代自然语言处理的逻辑进路及超越

摘要

自然语言处理领域长期存在两种此消彼长、相互竞争的方法进路:理性主义和经验主义.理性主义进路基于规则和推演,虽然能够较好地刻画语言构造生成的无穷机制,但没有面向自然语言的大量真实文本,与人工智能处理自然语言的实际需求脱节.与之相对,经验主义进路基于词库和统计,虽然建构起面向大量真实文本的语料库,能够较好地满足人工智能处理自然语言的实际需求,但无法解释语言构造生产的无穷机制.超越经验主义进路局限和理性主义进路困境之道是将两种进路融合互补,即建构大数据与大知识双轮驱动的自然语言处理新模式,从而攻克人工智能的难关,使机器真正理解自然语言.