利用交叉验证进行评定数据标注结果的方法

摘要

本发明涉及一种基于交叉验证(Cross Validation)原理的众包数据标注模型。主要步骤包括：平台对标注员和标注数据以及数据类别进行分类、经由标注员标注数据、继而其标注结果与相同标注数据的不同标注结果进行集中交叉验证来检验标注结果并且选择最优、最优标注结果的标注员将获得报酬。通过标注员之间多次的交叉验证大大的提高了标注数据的准确性和可用性，更有利于降低数据训练过程中由数据拟合程度低、数据准确度低而引起的误差。标注与验证都在平台内部进行而无需其他数据专家来对数据标注结果进行评定，大大降低了获取精确数据的成本。