一种视觉常识推理问答题的答题模型生成方法和系统

摘要

本发明提出一种视觉常识推理问答题答题模型的生成方法和系统，该方法包括：S1、语料预处理，为询问和响应生成文本语义向量，为图像生成图像目标特征向量。S2、融合文本语义向量与图像目标特征向量。S3、响应建模，获得每个候选响应的向量表示ri。S4、将每个候选响应的向量表示关联比较，获得关联响应向量zi。S5、利用关联响应向量zi构建分类器及模型训练。通过本发明，生成的模型降低了对于视觉常识推理问答任务的复杂度，而且响应参考了其他的响应信息，使得机器更容易选择出最优的答案，极大提升了模型的准确度。