一种面向内容差异的学术论文评价方法

摘要

当前学者普遍采取被引频次、h指数等外部指标评价学术论文,往往难以反映论文的内容质量,甚至可能引发重“量”轻“质”的趋向,从而抑制学术创新和学科发展。本研究从差异性的视角提出一个新的论文评价指标模型,以图书馆、情报与文献学学科的论文作为研究对象,该模型通过结合具有语义表征的BERT模型和ADC方法测度研究内容层面的论文差异程度,通过空间分布特征分析论文对象的区分能力特征,并从期刊、学者和主题的角度分别探讨论文ADC总体水平差异。实验结果表明,本研究提出的ADC指标模型用于衡量学术论文的内容差异性具有一定的合理性,论文区分能力越强表明其研究内容越具独特性,越弱则说明研究同质性越明显;档案学期刊由于学科术语和研究对象的独特性而明显区别于图书馆学和情报学期刊;高产学者中偏重情报学学科的人数较多,研究热点和前沿应用的论文由于主题更为深入、丰富而表现出更高的区分性,而偏向于介绍传统理论和综述的文章由于内容更加普遍和成熟而表现出较低的区分性。