数据处理方法、相关装置、相关设备和系统

摘要

本发明公开了一种数据处理方法，包括：根据数据源需要调配的资源信息，以及集群各处理节点的实时资源状况，生成接入指示信息；将所述接入指示信息发送给所述集群各处理节点；以使所述集群各处理节点根据所述接入指示信息接入所述数据源，并根据配置的线程对接入的数据源进行并行处理，输出处理结果；其中，所述集群各处理节点配置了用于处理数据的线程，各个线程之间独立平行地处理数据。本发明还公开了一种数据处理装置、设备和系统，解决了现有技术无法不能满足每日千亿级数据实时处理的要求的技术问题。