Hadoop与ETL技术在视频数据中的应用

摘要

随着城市建设的快速发展,人口和规模急剧扩张,视频作为城市最重要的感知数据,为了更好地服务于公共安全,需要我们对海量视频监控数据迅速完成数据的价值“提纯”并进行深度应用.基于Hadoop技术与ETL技术,通过建立大数据平台、数据交换共享平台和数据集市来实现视频数据清洗与处理业务.视频数据清洗与处理业务重点完成海量视频数据的统一存储、管理、信息共享和提供数据资源服务,并作为应用系统的支撑,针对不同业务建立不同专题,建立完善的视频数据采集、加载、存储、分析和应用展示的架构体系,实现海量视频数据的深度应用.