基于大数据应用的数据质量检测方法及系统

摘要

本发明提供一种基于大数据应用的数据质量检测方法及系统，该方法包括：获取开发作业的待检测数据；对所述待检测数据进行数据血缘分析，获取所述待检测数据的数据血缘关系；根据所述数据血缘关系和预设指标库，得到所述待检测数据在数据血缘关系中的每个数据写入表，以及每个数据写入表对应的待检测指标；根据所述待检测指标，对每个数据写入表中的数据进行数据质量检测。本发明通过对开发作业产生的数据进行数据血缘分析，获取该数据在数据血缘关系中涉及到的写入表在预设数据质量检测指标库中对应的待检测指标，使得在开发作业运行后可以自动定位需要检测的写入表以及指标，从而简化了数据质量检测过程，大幅度的降低了维护成本。