城市新闻网络舆情监测分析系统设计与实现

摘要

随着互联网的普及应用，网络舆情信息管理在城市管理中变得越来越重要。一个城市的网络舆情往往会在城市新闻报道中得到体现，因此，需要对网络新闻报道信息进行动态采集和分析。以人工检索和浏览网络新闻的方式已经变得越来越低效，一方面获取舆情信息的范围有限、速度慢，另一方面获取的舆情信息的质量也难以得到保证。因此，快速地自动获取城市网络新闻舆情，并能对这些信息进行分析，已经成为当前城市舆情研究中的热点问题。
　　本文重点研究了网络爬虫技术和CEPR正文抽取算法等在舆情信息获取技术，以及关键词和摘要提取、敏感度计算、地理分析、文本分类和情感倾向性计算等舆情信息文本处理和分析技术。在此基础上，设计并实现了网络舆情信息采集和分析的实验系统。
　　在系统设计和实现方面，本文在借鉴现有的优秀的舆情监测系统基础上，结合城市新闻舆情管理的实际需求，根据城市新闻网络舆情系统业务流程，首先对城市新闻网络舆情系统的需求进行分析，在此基础设计了系统总体方案，给出了系统的详细设计和实现。根据新闻网页的特点，本文重点分析和实现了新闻网页爬虫，解决了新闻的增量获取、新闻的多页合并和正文抽取问题。基于数据挖掘工具 WEKA的基础上，对舆情分析子系统进行了分析和设计。

目录

封面

声明

中文摘要

英文摘要

目录

1 绪论

1.1 研究背景

1.2 研究目的和内容

1.3 国内舆情监控系统现状

1.4 论文的组织结构

2 关键技术研究

2.1 网络爬虫技术分析

2.2 新闻网页内容抽取技术

2.3 SSH2技术

2.4 文本分类技术

2.5 情感分类技术及方法

2.6 WEKA平台及应用

2.7 本章小结

3 需求分析

3.1 系统的业务分析

3.2 系统的功能需求

3.3 系统非功能性需求

3.4 本章小结

4 系统设计

4.1 架构设计

4.2 系统功能设计

4.3 数据库设计

4.4 本章小结

5 系统的实现与测试

5.1 系统的实现

5.2 系统测试

5.3 本章小结

6 总结与展望

6.1 全文总结

6.2 展望

致谢

参考文献