一种网络日志数据同步系统及方法

摘要

本发明公开了一种网络日志数据同步系统及方法，本方案基于日志数据服务单元、本地应用存储服务单元、以及日志数据同步网关三者的配合来实现，日志数据服务单元用于提供存储全量日志数据的服务，并可提供给日志数据同步网关提取；本地应用存储服务单元用于存储日志数据同步网关从日志数据服务单元中提取的日志数据；日志数据同步网关用于将所需的日志数据从日志数据服务单元中同步到本地应用存储服务单元中，同时从本地应用存储服务单元中提取日志数据反馈给日志数据需求前端。本方案可实现将海量日志数据存储在大数据平台中，并按需从大数据平台中的全量数据中获得所需的日志数据。