一种基于多任务学习的对话讽刺和情感联合分析方法

摘要

本发明提出了一种基于多任务学习的对话讽刺和情感联合分析方法，其步骤如下：收集多模态对话情感语料集，对文本标签和每段对话的多模态数据进行预处理，对文本、图像和音频分别进行特征提取；采用多头注意力机制将得到的特征进行融合；将融合特征输入交互学习网络，采用基于软参数共享的多任务学习范式学习讽刺任务和情感任务分别获得其底层表示；以讽刺识别为主任务，情感分析为次任务，运用多任务交互方法，在讽刺检测任务中融入情感分析知识，得到讽刺分类和情感分类的结果。本发明能够有效地捕捉不同模态的全局信息；利用多任务学习框架能够同时学习不同任务之间的关联和差异，并通过多任务间的交互，提高讽刺和情感任务分类的准确率。