大数据环境下网络舆情预警系统的设计研究

摘要

cqvip:近年来,网络舆情成为了最主要的社会舆情传播方式之一,在大数据环境下,海量的网络舆情信息给网络舆情预警增加了新的挑战。依托爬虫技术对新闻网页、论坛和微博等网站进行信息采集,利用大数据平台Hadoop对采集的数据进行预处理及挖掘分析,所设计的网络舆情预警系统能够完成在大数据环境下,海量的网络舆情信息中网络舆情热点问题的挖掘以及预警等级的自动判别。