基于互信息的语言模型回退平滑算法

张磊; 褚昆; 郭黎利

首页> 中文期刊> 《应用科技》 >基于互信息的语言模型回退平滑算法

基于互信息的语言模型回退平滑算法

AI论文写作 >>

开具论文收录证明 >>

页面导航

摘要
著录项
引文网络
相似文献
相关主题

摘要

针对二元模型,提出了一种基于互信息的回退(MI Back-off)平滑算法.从互信息的角度,分析词之间的搭配关系,根据模型中每个二元对的互信息对其概率进行不同程度的折扣,并利用低阶模型对零概率事件进行补偿,通过极小化困惑度的原则体现新算法的合理性.在不同类别测试集下, 该平滑算法与传统Katz平滑算法相比,模型困惑度下降均超过20%.

著录项

来源
《应用科技》 |2009年第4期|28-31,35|共5页
作者
张磊; 褚昆; 郭黎利;
展开▼
作者单位

哈尔滨工程大学;

信息与通信工程学院;

黑龙江;

哈尔滨;

150001;

哈尔滨工程大学;

信息与通信工程学院;

黑龙江;

哈尔滨;

150001;

哈尔滨工程大学;

信息与通信工程学院;

黑龙江;

哈尔滨;

150001;

展开▼
原文格式 PDF
正文语种 chi
中图分类信息处理（信息加工）;
关键词
中文信息处理; 统计语言模型; 平滑算法; 互信息; 困惑度;

相似文献

中文文献
外文文献
专利

1. 基于互信息的统计语言模型平滑技术 [J] . 黄永文 ,何中市 . 中文信息学报 . 2005,第004期
2. 特定领域的汉语语言模型平滑算法比较研究 [J] . 杨琳 ,张建平 ,颜永红 . 计算机工程与应用 . 2006,第032期
3. 基于互信息的医学图像配准中互信息的计算 [J] . 张见威 ,韩国强 . 生物医学工程学杂志 . 2008,第1期
4. 基于图像块l0梯度最小化的边缘保持平滑算法 [J] . 宋昱 ,孙文赟 . 深圳大学学报（理工版） . 2021,第003期
5. 基于重加权l1范数的边缘保持图像平滑算法 [J] . 宋昱 ,孙文赟 . 华南理工大学学报（自然科学版） . 2021,第006期
6. 基于IMM交互式平滑算法的机动目标跟踪建模和仿真 [C] . Meng Fan-gang ,孟凡刚 ,Mao Zheng . 第15届中国系统仿真技术及其应用学术会议 . 2014
7. 基于互信息的统计语言模型数据平滑算法 [A] . 褚昆 . 2008

基于互信息的语言模型回退平滑算法

摘要

著录项

引文网络

相似文献

相关主题

期刊订阅