ORH方法在评价肋骨骨折多阅片者诊断试验中的应用

摘要

目的 通过使用双因素混合效应方差分析的ORH(obuchowski-rockette-hillis,ORH)方法,评价人工智能辅助临床诊断试验多阅片者的诊断结果.方法 选择400例疑似肋骨骨折患者的CT图像,其中经专家(金标准)确诊骨折188例,未骨折212例.分别采用两种不同方式阅片:一是3位低年资医生单独进行阅片;二是先使用人工智能(artifi-cial intelligence,AI)辅助检测软件标记疑似骨折区域后,再由3位低年资医生阅片,简称AI+医生阅片.最后对其灵敏度和特异度进行分析.结果 将单独医生阅片和AI+医生阅片的结果分别与金标准阅片结果进行一致性比较:AI+医生阅片检出骨折灵敏度优于单独医生阅片,AI+医生阅片检出骨折特异度非劣效于单独医生阅片.利用ORH方法分别估计并比较两种阅片方式:AI+医生阅片与单独医生阅片检出骨折灵敏度差值的95％置信区间为0.303(0.273,0.334);特异度差值及置信区间为-0.014(-0.076,0.048).结论 对于多阅片者的肋骨骨折阅片诊断试验,可以使用ORH方法对其进行评价,本文的"AI+医生阅片"方法可以有效地提高低年资医生对肋骨骨折诊断的准确度.