微服务架构下数据汇聚系统的设计与实现

摘要

本文设计和实现了一个基于微服务架构的数据汇聚系统。系统采用微服务架构进行设计,利用Docker容器技术打包镜像部署,这使系统可随着接入数据量的增加纵向扩展部署微服务实例提高数据处理能力,可随着接入数据种类的增加横向开发新的微服务。通过API网关为数据汇聚微服务系统提供了统一访问入口,在数据发送方和数据汇聚微服务应用之间起到了桥接作用。利用分布式发布订阅消息系统kafka集群作为消息队列,提高了汇聚数据的处理分析效率。通过发送方对采集数据的签名加密传输及接收方的身份及数据验证机制保证了发送方身份不可伪造和采集数据在传输过程中不可篡改这两个安全特性。