Hadoop平台的关联挖掘算法研究

摘要

通过结合云平台的存储能力和并行处理能力，对数据挖掘的Apriori算法进行研究，把传统Apriori算法改进移植于Hadoop平台.改进后的算法在扫描一次数据库后用矩阵的形式表示事务，在生成频繁K项集的过程中只需要把满足条件的事务进行连接并统计支持度，从而减少大数据挖掘中大量无用数据的运算，提高了挖掘效率.