诊断和筛检试验的评价.ppt

诊断和筛检试验的评价;内容： 诊断和筛检试验的基本概念和应用 诊断和筛检试验的评价体系 ROC曲线及其应用;诊断和筛检试验的基本概念和应用;筛检试验;诊 断 试 验;第六页，共六十页，2022年，8月28日;诊断和筛检试验的区别;诊断和筛检试验的评价体系 ;评价的设计程序 ;确定金标准;选择研究对象;同步盲法测试;试验评价的资料整理;;真实性：也称准确性，是指检测结果与真实情况符合的程度。 ;;;;;;;可靠性(reliability)也称重复性、稳定性或精密度。 指在相同条件下，同一观察者(或不同观察者)用同一种检测方法重复检测同一批或同一位受试者，各次结果之间的一致程度。;可靠性评价指标;组内相关系数ICC;1.Fisher的ICC计算方法： 早在1958年，Fisher提出采用该方法来计算组内相关系数：假设共有n名被观察的对象i，i取值1，2，……，n，那么，每名对象观察两次;ICC计算;例17.2 欲评价某方法检测黄曲霉毒素B1(AFB1)血清白蛋白加成物的一致性，某研究者用该方法检测了10名研究对象的血清样本，每份样本重复检测两次，所得数据如表17.4所示。试评价该检测方法的可靠性。;测次;变异来源;kappa系数;中度一致;例17.3 两位医生用B超诊断的方法分别诊断80名肝癌可疑患者患病与否，各次诊断的结果见表17.6，“+”为患肝癌，“–”为未患肝癌，试分析两医生该诊断的一致性。;医生A;医生A;H0：总体kappa值=0，两医生诊断结果无一致性 H1：总体kappa值≠0，两医生诊断结果有一致性 α=0.05;; 查t界值表(附表3)，得P<0.001，结合K值的评价原则，可认为两位医生用B超方法诊断肝癌的一致性达到中度一致。;影响可靠性的主要因素 ;收益(yield)是指通过诊断或筛检试验使原来未被发现的患者得到早期发现、正确诊断和治疗，从而改善预后、延长寿命和工作时间，提高生活质量，以及由此产生的经济效益和社会效益。 ;收益评价指标： ①预测值(predictive value, PV) ②效果;阳性预测值(positive predictive value, PV+)：;诊断试验;阴性预测值(negative predictive value, PV-);;效 果;评价的统计推断 ;;灵敏度和特异度、假阳性率和假阴性率常是两对矛盾的指标。 同一诊断或筛检试验中，常表现为灵敏度提高则特异度降低，假阳性率(误诊率)降低则假阴性率(漏诊率)增加，如表17.9。;理想情况：诊断和筛检试验的灵敏度、特异度均应接近100%，假阳性率(误诊率)和假阴性率(漏诊率)应接近0，即患者和非患者的检测值之间没有重叠。 实际情况：大多数医学检查的正常值和异常值在分布上有重叠，因此，在试验开展之前，应先确定一个临界点(cut off point) 以区分患者和非患者。 ;第五十页，共六十页，2022年，8月28日;第五十一页，共六十页，2022年，8月28日; 对同一种疾病，应用不同的临界点进行诊断会得到不同的结果。因此，要结合临床实际选择符合专业要求、假阳性率(误诊率)和假阴性率(漏诊率)都较小的临界点。 确定临界点常用的方法： 正态分布法 百分位数法 ROC曲线法 ;ROC曲线;最简单的方法是取灵敏度和特异度之和最大的截断点，通常为曲线上尽量靠近左上方的点。;ROC曲线下面积;例17.4设有经韦氏智力量表测验诊断的正常儿童组193人和智力低下儿童41人。某心理医生用丹佛发育筛选检查作为诊断手段，并将诊断结果按肯定正常、可能正常、异常可疑、可能异常和肯定异常分别分为1、2、3、4、5五类，结果见表17.10的第1、2行。试评价该医生用丹佛发育筛选检查进行筛检的价值如何？;;;ROC曲线下面积计算ROC曲线下面积的比较;曲线下面积诊断和筛检试验的评价;内容： 诊断和筛检试验的基本概念和应用 诊断和筛检试验的评价体系 ROC曲线及其应用;诊断和筛检试验的基本概念和应用;筛检试验;诊 断 试 验;第六页，共六十页，2022年，8月28日;诊断和筛检试验的区别;诊断和筛检试验的评价体系 ;评价的设计程序 ;确定金标准;选择研究对象;同步盲法测试;试验评价的资料整理;;真实性：也称准确性，是指检测结果与真实情况符合的程度。 ;;;;;;;可靠性(reliability)也称重复性、稳定性或精密度。 指在相同条件下，同一观察者(或不同观察者)用同一种检测方法重复检测同一批或同一位受试者，各次结果之间的一致程度。;可靠性评价指标;组内相关系数ICC;1.