一种基于sql的大数据实时计算方法

摘要

本发明涉及一种基于sql的大数据实时计算平台，包括客户端、资源管理器、计算集群、系统存储介质、共享存储器、程序生成模块、语法解析模块、数据仓库和日志数据库，所述客户端通过和计算集群连接，所述客户端还与系统存储介质连接，所述计算集群分别与资源管理器、日志数据库、数据仓库、系统存储介质、共享存储器和语法解析模块连接，所述程序生成模块分别与系统存储介质、共享存储器和语法解析模块连接。使用本发明可使得熟悉sql语句的数据分析人员可以自行开发实时任务，无需专业开发人员介入，降低了技术门槛，并扩展了用户群体。同时各种资源调度机制也提高了实时任务的硬件资源利用率。