多媒体分段和索引的基于上下文与内容的信息处理

摘要

公开用于信息处理的方法和系统，例如，用于多媒体分段、索引和检索。所述方法和系统包括使用概率框架进行例如音频/视觉/文本(A/V/T)的多媒体集成。多媒体内容和上下文信息两者均通过概率框架来表示和处理。此框架例如由贝叶斯网络和分级先验表示，所述框架是以图形方式由级描述，每级具有一组层，每层包括表示内容或上下文信息的多个节点。至少第一级的第一层处理诸如A/V/T域中对象的多媒体内容信息或其组合。如下面进一步描述的那样，不同级的其它层描述多媒体上下文信息。每个层都是贝叶斯网络，其中每个层的节点解释下一“更低”层和/或“更低”级的某些特征。节点及其连接一起形成扩充贝叶斯网络。多媒体上下文是正被处理的多媒体信息(音频、视觉、文本)的环境、情况和基础结构。多媒体信息(内容和上下文)在层和级内以不同粒度级和不同抽象级组合。