汽车行业用户观点挖掘与分析

摘要

近年来，汽车行业发展迅猛，伴随互联网时代的迅猛发展产生了崭新的商业模式，广大用户习惯在网络中发表见解并生成了海量的评价文本。如何快速迭代汽车产品并分析用户观点至关重要，传统的调研手段因为样本量小、效率低等缺陷已经无法满足当前快速发展的市场环境，随着机器学习及人工智能的兴起使得高效分析并挖掘这些用户意见成为可能。本文根据以上背景，立足汽车行业利用人工智能方法展开汽车行业的用户观点挖掘，主要工作有以下四个方面：　　1.利用网络爬虫技术，针对各大汽车评论网站特点，设计了相应的爬取方案和策略，通过使用Python3和Scrapy爬虫框架实现了用户在各大汽车网站的评论获取，构建了汽车用户评论观点数据集。　　2.提出了一种基于特征选择混合词嵌入的观点方面词抽取方法。其主要思想是将机器学习中特征选择方法和自然语言处理中词嵌入方法结合起来，通过嵌入式特征选择使模型在训练的过程中自发地寻找观点词汇，并利用词嵌入技术扩容这些词汇。最后，设计模型对比实验来验证所提出算法的有效性，实验结果表明，所提出的方法能很好地抽取用户文本评论中的观点方面词。　　3.构建了一种新型深度学习网络架构MAT(Multi-CNN hierarchical Attention Transformed embedding)模型，实现方面词级别的细粒度情感分析。该模型由双头词嵌入层、LSTM层和具有层级注意力机制的CNN特征抽取模块组成。首先，文本序列通过双头词向量得到文本表示，然后经过特征抽取模块获得文本全局信息和子特征，再由层级注意力筛选重要特征，接着通过参数调优实验确定了模型中超参数的最优值，最后设计了对照模型进行性能比较，实验结果表明所设计的模型在方面词级别情感分析任务中取得了较好的效果。　　4.设计并实现了基于RESTfulAPI的汽车行业观点应用分析服务。首先通过本文提出的算法对汽车用户评论进行分析形成结构化数据，构建汽车行业观点数据库。其次，使用Flask框架结合Echarts技术搭建了汽车行业观点应用分析服务的Web系统。最后，针对不同汽车品牌观点数据进行可视化展示，可为消费者和企业的科学决策提供支持。

目录

声明

目 录

第 1 章 绪 论

1.1 论文研究背景及意义

1.2 国内外研究现状

1.2.1 观点方面词抽取方法研究现状

1.2.2 情感分析算法研究现状

1.3.1 本文研究内容

1.3.2 本文章节安排

1.4 本章小结

第 2 章 数据获取及相关技术

2.1 爬取框架及数据获取

2.1.1 Scrapy框架介绍

2.1.2 数据获取

2.2 中文自然语言处理相关知识

2.2.1 词嵌入

2.2.2 中文分词

2.2.3 深度学习

2.3 观点挖掘基础知识

2.4 本章小结

第 3 章 汽车评论方面词抽取算法

3.1 基于特征选择的方面词抽取方法概述

3.1.1 数据预处理

3.1.2 特征选择算法流程

3.2 实验方案

3.2.1 实验环境

3.2.2 实验数据

3.2.3 评价指标

3.3 对比实验

3.3.1 基线模型

3.3.2 特征选择模型

3.3.3 实验结果

3.4 本章小结

第 4 章 基于深度学习的方面词级别情感分析算法

4.1 模型结构设计

4.1.1 输入层

4.1.2 网络层

4.1.3 输出层

4.1.4 损失函数及优化器

4.2 实验方案

4.2.1 实验数据

4.2.2 评价指标

4.3 参数调优实验

4.3.1 词嵌入方法对比实验

4.3.2 Dropout对比实验

4.3.3 正则化参数对模型的影响

4.3.4 LSTM隐藏层维度对模型的影响

4.3.5 卷积核尺寸对模型的影响

4.3.6 参数汇总

4.4 模型对比实验

4.4.1 基线模型

4.4.2 实验结果

4.5 本章小结

第 5 章 汽车行业观点分析应用服务

5.1 需求分析

5.1.1 功能需求分析

5.1.2 界面需求分析

5.2 系统设计

5.2.1 系统总体架构

5.2.2 数据结构设计

5.2.3 软件结构设计

5.3 详细设计与实现

5.3.1 系统开发环境与工具

5.3.2 RESTful API服务构建

5.3.3可视化服务构建

5.4 本章小结

结论与展望

本文工作总结

未来工作展望

致 谢

参考文献

攻读硕士学位期间发表的论文及科研成果