大数据分析和大数据处理技术研究综述

摘要

首先针对数据分析中数据库处理方式的不同,对数据仓库的各种应用场景,数据挖掘技术的处理过程和数据挖掘面临的主要问题进行了阐述;随后对大数据处理技术的九种典型方法进行了简要综述,包括布隆过滤器、散列法、倒排序、数据库索引与分布式处理等,对各种技术在大数据分析理解过程中的关键作用进行了总结;并对大数据处理和分析面临的计算复杂性、数据复杂性、以及系统复杂性进行分析,对各种典型的业务应用场景,提出了较为理想的应对方案.