根据图像的结构化的知识建模、提取和局部化

摘要

本申请的各实施例涉及根据图像的结构化的知识建模、提取和局部化。描述了用于根据图像对知识建模和从图像提取知识的技术和系统。一种数字媒体环境，被配置为学习和使用模型以自动地和无用户干预地计算输入图像的描述性概括。获得训练数据以使用机器学习来训练模型以便生成用作输入图像的描述性概括的结构化的图像表示。处理图像和关联的文本以从文本提取结构化的语义知识，该结构化的语义知识然后与图像关联。与对应图像一起处理结构化的语义知识以使用机器学习来训练模型，从而使得模型描述结构化的语义知识的文本特征之间的关系。一旦模型被训练，模型就可用于处理输入图像以生成图像的结构化的图像表示。