多模态信息融合广播电视新闻关键词与摘要联合抽取方法

摘要

本发明提供一种多模态信息融合广播电视新闻关键词与摘要联合抽取方法，包括：A、收集广播电视新闻文本并获取关键词和摘要，构建广播电视新闻关键词与摘要联合抽取数据集；B、构建田字格字形图像库；C、构建并训练多模态信息融合广播电视新闻关键词与摘要联合抽取模型；D、利用训练好的构建多模态信息融合广播电视新闻关键词与摘要联合抽取模型构建三阶段广播电视新闻关键词与摘要联合抽取系统，以对输入的广播电视新闻文本进行关键词和摘要抽取。本发明将关键词和摘要作为联合任务将有助于信息共享与特征融合，并结合田字格字形图像能够提升关键词和摘要的抽取效果。