基于LDA主题模型的MOOC评论回复特征维度分析

摘要

针对LDA(Latent Dirichlet Allocatiom)主题挖掘算法不太适用于短文本且对于得到的每个主题直接进行凝练和表达很难做到统一化的问题,提出了一种综合特征维度分析的LDA主题挖掘改进算法.首先采用Python和Selenium抓取MOOC(Massive open online course)平台"教育教学"类25门在线课程的评论以及对应回复数据作为源数据,使用中文自然语言处理技术对其进行预处理.然后,基于LDA改进算法实现主题挖掘以及可视化呈现热点聚焦话题的演化趋势.最后,利用共现网络图综合特征维度分析主题分布特征.该研究通过引入自然语言处理技术和改进的LDA主题挖掘算法,构建出一种面向在线课程评论回复文本的主题共现分析方法框架,为在线学习非结构化数据研究提供了理论支持和创新思路.