基于跨模态识别技术的互联网短视频判违装置及方法

摘要

本发明公开了基于跨模态识别技术的互联网短视频判违装置，采用跨模态识别统一框架，包括视频采集模块，用于快速采集视频和下载网上视频并进行解码处理；包括人脸识别模块、物体识别模块、行为识别模块、OCR技术模块、语音识别模块、自然语言处理模块、判违结果显示模块；人脸识别模块、物体识别模块、行为识别模块、OCR技术模块、语音识别模块、自然语言处理模块的处理过程均运行在高性能的GPU计算平台上。本发明具有快速视频采集和判别处理、能判别多种类别的违规视频、能批量大规模处理短视频、能生成近期违规词汇统计图，协助用户做决策、能进行多维度加密，防止违规信息外泄等功能。