基于Hadoop的广播电视节目编目系统的优化

摘要

随着广电统一监管平台的整合,广播电视节目编目系统需要对全国近千套频道的播出节目进行自动编目.Hadoop作为开源的大数据云平台,可通过扩充其功能实现对海量视音频文件的处理.本文分析了广电统一监管平台下节目编目系统现存的问题,提出了基于Hadoop的存储和计算的优化方案,并给出了数据处理主要步骤的实现方法.基于Hadoop的广播电视节目编目系统优化方案，将视频处理的任务分配到不同的节点并行处理。由于是开源云平台，且屏蔽了并行计算底层的实现细节，因此系统开发人员能够更多的关注系统的业务需求，定制大数据编目系统。