诊疗试验的临床效能评价专家讲座.pptx

单击此处编辑母版标题样式,单击此处编辑母版文本样式,第二级,第三级,第四级,第五级,*,齐齐哈尔医学院生化教研室,*,第四章 诊疗试验临床效能评价,4/22/2025,1,齐齐哈尔医学院生化教研室,诊疗试验的临床效能评价专家讲座,第1页,第一节 诊疗试验临床效能评价意义和内容,4/22/2025,2,齐齐哈尔医学院生化教研室,诊疗试验的临床效能评价专家讲座,第2页,一、意义,掌握诊疗试验临床效能,着手选择合理、可靠、有效诊疗试验,判断检验结果对于某种诊疗贡献,从而确定和执行合理医疗决议,4/22/2025,3,齐齐哈尔医学院生化教研室,诊疗试验的临床效能评价专家讲座,第3页,二、内容,1.真实性（validity）,反应患病实际情况程度。,真实性,灵敏度（sensitivity）,特异度（specificity）,4/22/2025,4,齐齐哈尔医学院生化教研室,诊疗试验的临床效能评价专家讲座,第4页,2.可靠性（reliability）,一项诊疗试验在完全相同条件下，重复使用时取得相同结果程度（用符合率表示）。,二、内容,100%,*,=,试验总次数,重复试验取得相同结果,次数,符合率,4/22/2025,5,齐齐哈尔医学院生化教研室,诊疗试验的临床效能评价专家讲座,第5页,真实性与可靠性关系示意图,A：准确而可靠 B：准确，但不可靠,C：不准确，但可靠 D：既不准确，又不可靠,4/22/2025,6,齐齐哈尔医学院生化教研室,诊疗试验的临床效能评价专家讲座,第6页,二、内容,3.实用性,包含仪器设备、试剂费用多少、起源、操作难度及效率、效益、效能、不良反应、对患者危险性、患者依从性等。,4/22/2025,7,齐齐哈尔医学院生化教研室,诊疗试验的临床效能评价专家讲座,第7页,第二节 诊疗试验临床效能 评价研究设计,4/22/2025,8,齐齐哈尔医学院生化教研室,诊疗试验的临床效能评价专家讲座,第8页,评价试验是什么？,试验观察内容？,该研究临床实际意义？,这是一个新试验,还是已应用成熟试验？,已经有类似或能够与之竞争试验？,在研究期间，该试验可能会发生改变？,一、确定研究目标,4/22/2025,9,齐齐哈尔医学院生化教研室,诊疗试验的临床效能评价专家讲座,第9页,二、目标患者总体,对照组：金标准证实未患该病人。,病例组：金标准证实患者。,受试对象分为两组,4/22/2025,10,齐齐哈尔医学院生化教研室,诊疗试验的临床效能评价专家讲座,第10页,三、抽样计划,1.探索研究阶段,通常对每个患者采取回顾性抽样计划,2.挑战研究阶段,仔细考虑目标患者总体特征频谱，重点考虑目标患者病理学、临床表现、合并症等。,3.临床研究阶段,患者样本必须真实地代表样本总体。,4/22/2025,11,齐齐哈尔医学院生化教研室,诊疗试验的临床效能评价专家讲座,第11页,四金标准,概念：,指被公认诊疗疾病最可靠方法，金标准能正确地域分受试者患病是否。若金标准选择不妥，可造成错误分类，影响对诊疗试验正确评价。,4/22/2025,12,齐齐哈尔医学院生化教研室,诊疗试验的临床效能评价专家讲座,第12页,五、评价指标,准确度,尤登指数,似然比,预测值,ROC曲线,4/22/2025,13,齐齐哈尔医学院生化教研室,诊疗试验的临床效能评价专家讲座,第13页,六、估算样本量,按照预计总体率样本含量估算方法,“病例组”样本含量n1,“对照组”样本含量n2,计算,4/22/2025,14,齐齐哈尔医学院生化教研室,诊疗试验的临床效能评价专家讲座,第14页,六、估算样本量,举例：,检测血清AFP诊疗原发性肝癌敏感度为60，特异度80。试问应研究多少患者，才能含有统计学意义？,4/22/2025,15,齐齐哈尔医学院生化教研室,诊疗试验的临床效能评价专家讲座,第15页,相同条件下，盲法同时测试。,正确统计学数据处理。,七、防止偏倚,4/22/2025,16,齐齐哈尔医学院生化教研室,诊疗试验的临床效能评价专家讲座,第16页,第三节 诊疗试验临床效能 评价方法,4/22/2025,17,齐齐哈尔医学院生化教研室,诊疗试验的临床效能评价专家讲座,第17页,临床诊疗试验数据与患病情况关系,诊疗试验结果和患某病情况之间可能出现四种关系：,真阳性,（True positive，TP）指经试验而被正确分类患者数目。,假阳性,（False positive，FP）指经试验而被错误分类非患者数目。,真阴性,（True negative，TN）指经试验而被正确分类非患者数目。,假阴性,（False negative，FN）指经试验而被错误分类患者数目。,4/22/2025,18,齐齐哈尔医学院生化教研室,诊疗试验的临床效能评价专家讲座,第18页,一、灵敏度和特异度,诊疗试验,金标准,病例,非病例,累计,阳性,a（真阳性）,b（假阳性）,a+c,阴性,c（假阴性）,d（真阴性）,c+d,累计,a+c,b+d,N,4/22/2025,19,齐齐哈尔医学院生化教研室,诊疗试验的临床效能评价专家讲座,第19页,1.灵敏度（sensitivity,Sen）,又称真阳性率（true positive rate,TPR）,指在患病者中，应用该诊疗试验检验得到阳性结果百分比。,该值愈大，漏诊病例（漏诊率）愈少，其计算公式为：,4/22/2025,20,齐齐哈尔医学院生化教研室,诊疗试验的临床效能评价专家讲座,第20页,理想试验诊疗灵敏度为100%。,灵敏度高诊疗试验，通惯用于,拟诊为严重但疗效好疾病，以防漏诊,拟诊为有一定治疗效果恶性肿瘤，方便早期确诊及时治疗,存在各种可能疾病诊疗，可排除某一诊疗,普查或定时健康体检，能筛选某一疾病,以防漏诊,4/22/2025,21,齐齐哈尔医学院生化教研室,诊疗试验的临床效能评价专家讲座,第21页,2.特异度（specificity,Spe）,又称真阴性率（true negative rate,TNR）,指在非某病者中，应用该试验取得阴性结果百分比,特异度愈高，误诊病例（误诊率）愈少，其计算公式为：,4/22/2025,22,齐齐哈尔医学院生化教研室,诊疗试验的临床效能评价专家讲座,第22页,理想试验诊疗特异性为100%。,特异度高诊疗试验，惯用于,拟诊患有某病概率较大时，方便确诊；,拟诊疾病严重但疗效与预后均不好疾病，以防误诊，尽早解除病人压力；,拟诊疾病严重且根治方法是含有较大损害时，需确诊，以免造成病人无须要损害。,敏感性与特异性均高试验，惯用于病情十分危急，需要尽快作出特殊处理疾病，如急性中毒时抢救。,4/22/2025,23,齐齐哈尔医学院生化教研室,诊疗试验的临床效能评价专家讲座,第23页,3.漏诊率和误诊率,与灵敏度和特异度互补指标是漏诊率和误诊率,漏诊率（），,又称假阴性率（False negative rate，FNR）。反应将患者诊疗错误概率，该值愈小愈好。,误诊率（），,又称假阳性率（False positive rate，FPR）。反应将非患者诊疗错误概率，该值愈小愈好。,漏诊率（）c/ac 1Sen（灵敏度）误诊率（）b/bd 1Spe（特异度）,4/22/2025,24,齐齐哈尔医学院生化教研室,诊疗试验的临床效能评价专家讲座,第24页,灵敏度和特异度关系,特异度（1-）,诊疗界点,对照组,病例组,灵敏度（1-）,漏诊率（）,误诊率（）,4/22/2025,25,齐齐哈尔医学院生化教研室,诊疗试验的临床效能评价专家讲座,第25页,理想诊疗试验,实际诊疗试验,3.诊疗分界点,正常群体与患者群体分布曲线,4/22/2025,26,齐齐哈尔医学院生化教研室,诊疗试验的临床效能评价专家讲座,第26页,4.尤登指数,（Youden,s index）,又称正确指数，是指灵敏度和特异度之和减去1，,表示诊疗试验发觉真正患病和非患病者总能力。,是综合评价真实性指标。理想试验应为1。,其计算公式为：,尤登指数=(Sen+Spe)1,4/22/2025,27,齐齐哈尔医学院生化教研室,诊疗试验的临床效能评价专家讲座,第27页,5.准确度,(accuracy，ACC),又称总符合率、诊疗效率，是指在患病和非患病者中，用诊疗试验能准确划分患者和非患病者百分比。反应诊疗试验正确诊疗患者与非患者能力。,其计算公式为：,理想试验诊疗准确度为100%。准确度高，真实性好。,4/22/2025,28,齐齐哈尔医学院生化教研室,诊疗试验的临床效能评价专家讲座,第28页,二、预测值,（predictive value，PV）,又称预告值，它是表示试验能做出正确判断概率。,分为阳性预测值和阴性预测值。4/22/2025,29,齐齐哈尔医学院生化教研室,诊疗试验的临床效能评价专家讲座,第29页,1.阳性预测值（positive predictive value，PPV）,指真阳性人数占试验结果阳性人数百分比，表示试验结果阳性者属于真病例概率。,4/22/2025,30,齐齐哈尔医学院生化教研室,诊疗试验的临床效能评价专家讲座,第30页,2.阴性预测值（negative predictive value，NPV）,指真阴性人数占试验结果阴性人数百分比，表示试验结果阴性者属于非病例概率。,4/22/2025,31,齐齐哈尔医学院生化教研室,诊疗试验的临床效能评价专家讲座,第31页,灵敏度、特异度、阳性预测值、阴性预测值之间关系,普通说来，试验灵敏度愈高，阴性预测值就愈高；特异度愈高试验，阳性预测值就愈好。,但诊疗试验灵敏度和特异度并不能完全决定试验阳性预测值，在很大程度上与人群某病患病率相关。,4/22/2025,32,齐齐哈尔医学院生化教研室,诊疗试验的临床效能评价专家讲座,第32页,灵敏度、特异度、阳性预测值、阴性预测值之间关系,4/22/2025,33,齐齐哈尔医学院生化教研室,诊疗试验的临床效能评价专家讲座,第33页,三、似然比,（likelihood ratio，LR）,指患病人群中试验结果概率与无病人群中试验结果概率之比。,分阳性似然比和阴性似然比。,4/22/202534,齐齐哈尔医学院生化教研室,诊疗试验的临床效能评价专家讲座,第34页,1.阳性似然比（+LR）,用以描述诊疗性试验阳性时，患病与不患病机会比。若该比值大于1，则患病概率也增大。,4/22/2025,35,齐齐哈尔医学院生化教研室,诊疗试验的临床效能评价专家讲座,第35页,2.阴性似然比（-LR）,用以描述诊疗性试验阴性时，患病与不患病机会比。其比值愈大，则患病概率愈小。,4/22/2025,36,齐齐哈尔医学院生化教研室,诊疗试验的临床效能评价专家讲座,第36页,四、ROC曲线分析,受试者工作特征曲线（receiver operating characteristic,ROC）,以真阳性率（灵敏度）为纵坐标，假阳性率（1-特异度）为横坐标,表示灵敏度与特异度相互关系方法,4/22/2025,37,齐齐哈尔医学院生化教研室,诊疗试验的临床效能评价专家讲座,第37页,四、ROC曲线分析,受试者工作特征曲线（receiver operating characteristic,ROC）,普通选择曲线转弯处，即灵敏度和特异度均较高点为诊疗分界点（cut off point）。,ROC曲线越凸向左上角，表明其诊疗价值越大，越准确。,4/22/2025,38,齐齐哈尔医学院生化教研室,诊疗试验的临床效能评价专家讲座,第38页,四、ROC曲线分析,4/22/2025,39,齐齐哈尔医学院生化教研室,诊疗试验的临床效能评价专家讲座,第39页,选择最正确分界值,诊疗效率分析,对检验结果评价,ROC曲线临床应用,4/22/2025,40,齐齐哈尔医学院生化教研室,诊疗试验的临床效能评价专家讲座,第40页,将多个独立同类诊疗性试验结果合并，可得到sROC(summary ROC curve)曲线。该法与,荟萃分析（,Meta,）,分析方法原理相同，故又称诊疗性试验,荟萃分析,。,目标是对多个同类独立研究结果进行汇总和合并分析，以到达增大样本含量，提升试验效能目标。,五、sROC曲线,4/22/2025,41,齐齐哈尔医学院生化教研室,诊疗试验的临床效能评价专家讲座,第41页,灵敏度、特异度,是试验方法固有指标，其它评价指标都可用它们来推导。,预测值,在指导临床诊疗时比灵敏度、特异度更直观、更轻易了解和应用，但它们与患病率或就诊率相关。,六、临床应用评价指标综合分析,4/22/2025,42,齐齐哈尔医学院生化教研室,诊疗试验的临床效能评价专家讲座,第42页,准确性、尤登指数及诊疗效率,是综合灵敏度、特异度而计算出来。,似然比,表示在某种诊疗性试验某个数值范围内患有或不患有某种疾病概率。它是将灵敏度及特异度很好结合起来指标。,ROC分析方法,是当前公认诊疗试验准确度评价标准方法。,六、临床应用评价指标综合分析,4/22/2025,43,齐齐哈尔医学院生化教研室,诊疗试验的临床效能评价专家讲座,第43页,第四节 提升诊疗试验效率方法,4/22/2025,44,齐齐哈尔医学院生化教研室,诊疗试验的临床效能评价专家讲座,第44页,一、选择患病率高人群（高危人群）,二、采取联合试验方法,1.并联试验2.串联试验,4/22/2025,45,齐齐哈尔医学院生化教研室,诊疗试验的临床效能评价专家讲座,第45页,第五节 参考区间和医学决定水平,4/22/2025,46,齐齐哈尔医学院生化教研室,诊疗试验的临床效能评价专家讲座,第46页,一、建立参考区间步骤,选定足够数量“健康”人（参考个体）作为调查对象。,4/22/2025,47,齐齐哈尔医学院生化教研室,诊疗试验的临床效能评价专家讲座,第47页,参考区间概念、确定和应用流程,4/22/2025,48,齐齐哈尔医学院生化教研室,诊疗试验的临床效能评价专家讲座,第48页,医学决定水平是临床处理患者“阈值”，检验所得数据高于或低于“阈值”时，医生应采取对策。,同一试验能够定几个医学决定水平。,二、医学决定水平,4/22/2025,49,齐齐哈尔医学院生化教研室,诊疗试验的临床效能评价专家讲座,第49页,一个诊疗试验普通确定三个决定水平：,提醒需要制订深入检验计划阈值，相当于待诊值；,提醒需要采取治疗办法界值，相当于确诊值；,提醒预后或需要紧急处理界值。,4/22/2025,50,齐齐哈尔医学院生化教研室,诊疗试验的临床效能评价专家讲座,第50页,医学决定水平与参考区间关系,4/22/2025,51,齐齐哈尔医学院生化教研室,诊疗试验的临床效能评价专家讲座,第51页,危急值,危急值(Panic Values)是累积临床经验而得，它不可能用参考值估出。,比如成人血糖 39.2mmol/L或3.5mmol/L或1.5mmol/L等都属于危急值。,危急值是指需要马上采取临床干预测定值。,4/22/2025,52,齐齐哈尔医学院生化教研室,诊疗试验的临床效能评价专家讲座,第52页,第六节 诊疗试验评价标准,4/22/2025,53,齐齐哈尔医学院生化教研室,诊疗试验的临床效能评价专家讲座,第53页,诊疗性试验评价,临床应用价值评价,方法学评价,4/22/2025,54,齐齐哈尔医学院生化教研室,诊疗试验的临床效能评价专家讲座,第54页,是否将该试验与标准诊疗法（金标准）作过对比研究？,被检验病例是否包含各型病例及个别易于混同病例？,正常参考区间及临界值确定是否可靠、合理？,该试验临床应用价值在不一样单位应用再现性怎样？,一、真实性评价,4/22/2025,55,齐齐哈尔医学院生化教研室,诊疗试验的临床效能评价专家讲座,第55页,是否提供了灵敏度、特异度，有阳性似然比数据（或提供了运算数据），并考查这些数据起源及可靠性？,是否进行了分组或作出分层分析和计算？,二、有效性评价,4/22/2025,56,齐齐哈尔医学院生化教研室,诊疗试验的临床效能评价专家讲座,第56页,该试验在本单位是否能够开展，并能正确进行检测？,该试验实用价值怎样，其结果是否有利于我们对患者处理？,三、实用性评价,4/22/2025,57,齐齐哈尔医学院生化教研室,诊疗试验的临床效能评价专家讲座,第57页,展望,4/22/2025,58,齐齐哈尔医学院生化教研室,诊疗试验的临床效能评价专家讲座,第58页,诊疗试验系统评价（systematic review,SR）是经过全方面搜集世界上全部已发表和未发表研究结果，采取临床流行病学方法严格评价文件，选出符合质量标准文件，对其进行统计学分析，从而对某一个/组诊疗试验准确性进行评价。,当SR采取定量合成方法对资料进行统计学分析时称为荟萃（meta）分析或定量系统分析。,4/22/2025,59,齐齐哈尔医学院生化教研室,诊疗试验的临床效能评价专家讲座,第59页,class is over,4/22/2025,60,齐齐哈尔医学院生化教研室,诊疗试验的临床效能评价专家讲座,第60页,