大数据环境下的文旅多维数据分析系统设计与开发

摘要

针对现有大型多维数据分析和可视化工具分析单一场景、生命周期不完善的问题,利用Apache Spark、Apache Kylin等分布式处理技术,设计并实现了一个基于场景的文化旅游大数据分析系统,提供了数据预处理、混合多场景等全生命周期分析功能,并且可视化功能可以使数据在各种计算平台之间自由流通,打破单一数据计算平台的功能限制,整合面向不同文本旅的场景分析功能及其性能优势,可以为不同的文化和旅游业务场景提供高效的查询服务,并通过不同的分布式处理技术达到优化大数据查询和分析性能的效果.