一种基于主动学习的众包机制辅助排序方法和系统

摘要

本发明提出一种基于主动学习的众包机制辅助排序方法，包括：将收集的答案组成答案对，构成训练数据；从训练数据中选择一组训练数据输入训练集，得到初始分类模型；通过选择策略挑选出高分类贡献度的训练数据进行众包标注；将标注的数据更新到训练集中，得到新的分类模型；若分类模型精度未达到设定值，则继续通过选择策略更新训练集，训练新的分类模型；若分类模型精度达到设定值，则停止更新；将测试集输入精度达标的分类模型，对结果进行打分排序；本发明将具有代表性的样本进行众包标注减少人工标注成本，提高了算法效率。