诊断试验方法的评价基本程序与指标

诊疗试验方法评价第四部分诊断试验方法的评价基本程序与指标第1页

用于临床疾病诊疗试验方法很多，而且伴随科学技术发展，尤其是医学、分子生物学、电子计算机技术发展，越来越多新诊疗试验方法被应用于临床。

诊断试验方法的评价基本程序与指标第2页

评价一个新诊疗试验方法基本程序是与诊疗某病金标准作盲法和同时比较诊断试验方法的评价基本程序与指标第3页第一节评价基本程序（步骤）确立金标准选择研究对象样本大小预计同时评价依据试验检验结果评价诊疗价值诊断试验方法的评价基本程序与指标第4页

一、确立金标准要评价一个新诊疗试验方法，首先要确定一个参考标准即金标准（goldstandard）。金标准是指一个疾病标准诊疗方法，即当前医学界公认、可靠、诊疗某病诊疗方法，应用该标准能较正确区分患某种疾病人和不含有该病人。一项诊疗试验准确程度只有在金标准诊疗病人组和非病人组中进行考评，才能得到正确评价。诊断试验方法的评价基本程序与指标第5页二、选择研究对象

在诊疗试验方法评价中，研究对象包含两组：一是被金标准确诊病例组，另一组是金标准证实无该病人群，即对照组。全部研究对象都要有代表性，病例组和对照组都应代表各自总体。诊断试验方法的评价基本程序与指标第6页三、样本大小预计

评价诊疗试验样本含量用以下公式计算：

n=zα2p(1﹣p)/δ2

注：p为试验预期特异度或灵敏度；δ为允许误差；α为第一类误差概率（α=0.05或0.01），zα值由z界值表查得。诊断试验方法的评价基本程序与指标第7页

四、同步评价用被评价诊疗试验方法对研究对象进行同时检验，采取盲法观察。目：①消除研究对象心理情绪上波动或异常而影响试验结果②防止研究者主观意愿

而影响试验结果。诊断试验方法的评价基本程序与指标第8页五、依据试验检验结果评价诊疗价值如试验结果是定性资料，能够整理成以下表格形式：

诊疗性试验方法评价资料整理表

试验结果金标准合计

有病无病

阳性a（真阳性）

b（假阳性）a+b阴性c（假阴性）

d（真阴性）c+d合计a+cb+dn(a+b+c+d)诊断试验方法的评价基本程序与指标第9页

第二节评价指标

对一个诊疗试验方法评价包含多方面，在技术上主要包含两方面：

可靠性（reliability）

真实性（validity）诊断试验方法的评价基本程序与指标第10页一、可靠性评价

可靠性也称重复性（repeatability）或准确性（precision），指一项试验在相同条件重复使用取得相同结果稳定程度（stsbility）评价诊疗试验方法可靠性经过测量变异大小来判断。诊断试验方法的评价基本程序与指标第11页㈠结果是定量数据可靠性判定

变异系数（coefficientofvariation,CV）判定定量数据可靠性：

变异系数（CV）=标准差/算数均数诊断试验方法的评价基本程序与指标第12页㈡结果是定性数据可靠性判定

⒈符合率：即粗一致率（crudeagreement,CA）是指试验结果与金标准结果一致性

CA=(真阳性+真阴性)/受试者总人数=(a+d)/(a+b+c+d)×100%

符合率受人为原因影响较多，普通用调整符合率（adjustedagreement,AA）：

AA=1/4[a/(a+c)+d/(b+d)+a/(a+b)+d/(c+d)]×100%诊断试验方法的评价基本程序与指标第13页⒉Kappa值：表示两种试验一致性程度

观察一致率(P0)：

P0=(a+d）/(a+b+c+d)

机遇一致率(Pc)：

Pc=｛[(a+b)(a+c)/(a+b+c+d)]+[(c+d)(b+d)/(a+b+c+d)]｝/(a+b+c+d)

Kappa=(P0－Pc)/(1－Pc)

Kappa值越高，表示一致性程度越好。Kappa值（在0~1之间）：0.75~1之间为一致性高

0.40~0.74为普通

0.39以下为一致性差诊断试验方法的评价基本程序与指标第14页二、真实性评价任何检验或测量结果与金标准相比，有以下四种情况：正确结果：①真正有病人试验结果阳性（真阳性a）

②真正无病人试验结果阴性（真阴性d）错误结果：①真正有病人试验结果阴性（假阴性c）②真正无病人试验结果阳性（假阳性b）真实性是指测量值与实际值符合程度诊断试验方法的评价基本程序与指标第15页

一项试验方法得出正确结果越多，则该试验真实性越高。评价试验方法真实性包含两个方面，即对有病和无病识别能力。主要评价指标以下：⒈灵敏度（sensitivity）⒉特异度（specificity）⒊似然比（likelihoodratio,LR）⒋Youden指数（Youden’sIndex,YI）诊断试验方法的评价基本程序与指标第16页⒈灵敏度（sensitivity）

灵敏度(真阳性率)是真正有病人中试验结果阳性百分率，其表示试验方法对疾病检出能力。

灵敏度越高，说明试验方法对疾病检出能力越强，病人漏诊机会越少。与灵敏度相正确是漏诊率(假阴性率)

。

灵敏度(Se)=真阳性/(真阳性+假阴性)×100%=a/(a+c)×100%漏诊率=1﹣灵敏度=假阴性/(真阳性+假阴性)×100%=c/(a+c)×100%诊断试验方法的评价基本程序与指标第17页⒉特异度（specificity）

特异度(真阴性率)是无病人中试验结果阴性百分率，其表示试验方法对无病检出能力。特异度越高，说明试验方法对无病判断能力越强，无病人被误诊机会越少。与特异度相正确是误诊率(假阳性率)。特异度(Sp)=真阴性/(真阴性+假阳性)×100%=d/(b+d)×100%误诊率=1﹣特异度=假阳性/(真阴性+假阳性)×100%=b/(b+d)×100%诊断试验方法的评价基本程序与指标第18页⒊似然比（likelihoodratio,LR）

①阳性似然比(＋LR)=真阳性率/假阳性率=灵敏度/误诊率阳性似然比指正确判断阳性可能性是错判阳性可能性倍数，表明诊疗试验结果呈阳性时患病与不患病百分比，其比值越大，试验诊疗价值越高。

②阴性似然比(－LR)=假阴性率/真阴性率=漏诊率/特异度阴性似然比指错判阴性可能性是正确判断阴性可能性倍数，表明诊疗试验结果呈阴性时患病与不患病百分比，其比值越小，试验诊疗价值越高。诊断试验方法的评价基本程序与指标第19页⒋Youden指数（Youden’sIndex,YI）

灵敏度和特异度是反应一项诊疗试验两个基本指标，二者之和减去一，即为Youden指数。

Youden指数（YI）越大，试验真实性越高。Youden指数(YI)=灵敏度＋特异度－1=a/(a+c)+d/(b+d)﹣1=1﹣漏诊率﹣误诊率Youden指数也称正确指数诊断试验方法的评价基本程序与指标第20页举例：见教材P243

302例高度疑为肝癌病人肝穿刺活检（金标准），病理汇报明确诊疗为肝癌234例，非肝癌68例。对上述病人行血中甲胎蛋白检测，结果为，阳性236例（其中肝癌者205例），阴性66例（其中肝癌者29例），试评价甲胎蛋白检测作为诊疗肝癌价值。请计算相关指标，并对数据结果作出恰当解释。

甲胎蛋白诊疗肝癌评价资料整理表甲胎蛋白肝癌（肝穿刺）合计试验结果

有病无病阳性

205(真阳性)31(假阳性)236阴性29(假阴性)37(真阴性)66

合计23468302解答：1、资料可整理为以下表格：诊断试验方法的评价基本程序与指标第21页2、计算相关指标及评价⑴可靠性评价

定性数据可靠性判定用符合率和一致性评价：①符合率(CA)=(真阳性+真阴性)/受试者总人数=(205+37)/302=80.13%②调整符合率(AA)=1/4[真阳性/(真阳性+假阴性)+真阴性/(假阳性+真阴性)+真阳性/(真阳性+假阳性)+真阴性/(假阴性+真阴性)]×100%=1/4[205/(205+29)+37/(31+37)+205/(205+31)+37/(29+37)]×100%=1/4[205/234+37/68+205/236+37/68]×100%=71.24%③Kappa值=(P0－Pc)/(1－Pc)

P0=(a+d）/(a+b+c+d)=（205+37）/302=0.8013Pc=｛[(a+b)(a+c)/(a+b+c+d)]+[(c+d)(b+d)/(a+b+c+d)]｝/(a+b+c+d)=[(236×234)/302+(66×68)/302]/302=(55224+4488)/91204=0.6547

Kappa=(0.8013－0.6547)/(1－0.6547)=0.1466/0.3453=0.4246

因为0.40＜Kappa＜0.74，表示两种试验一致性程度为普通，所以，甲胎蛋白检测作为诊疗肝癌指标可靠性普通。

诊断试验方法的评价基本程序与指标第22页⑵真实性评价

真实性判定用灵敏度、特异度、Youden指数等评价①灵敏度（Se）=真阳性/(真阳性+假阴性)×100%=205/234×100%=87.61%漏诊率(假阴性率)=1﹣灵敏度=假阴性/(真阳性+假阴性)×100%=12.39%②特异度（Sp）=真阴性/(真阴性+假阳性)×100=37/68×100%=54.41%误诊率(假阳性率)=1﹣特异度=假阳性/(真阴性+假阳性)×100%=45.59%③阳性似然比=真阳性率/假阳性率=灵敏度/误诊率=0.8761/0.4559=1.92④Youden指数（YI）=灵敏度＋特异度-1=0.8761+0.5441-1=0.4202表明甲胎蛋白检测作为诊疗肝癌指标敏感性较高，而判断为无病及正确指数为普通。诊断试验方法的评价基本程序与指标第23页举例：论文：强迫震荡法呼吸系统有效阻力频率依赖性测定及临床应用目标：提出一个检出小气道早期病变新方法（R2HZ-4HZ－R5HZ-7HZ）金标准：现有诊疗小气道早期病变很好指标（FEF25-75%；FEF75-85%；V50；V25）之正常组均值±1.65标准差（95%可信限）为异常判断标准结果见下表：

表1二组R2HZ-4HZ－R5HZ-7HZ测定值组别例数R2HZ-4HZ－R5HZ-7HZ正常组450.42±0.115吸烟组440.75±0.256

表2二组五项指标检出异常例数和异常率（%）组别例数FEF25-75%FEF75-85%V50V25R2HZ-4H－R5HZ-7HZ正常组453（6.7）1（2.2）2（4.4）2（4.4）3（6.7）吸烟组4410（22.7）1（2.3）9（20.5）6（13.6）16（36.4）注：两组对象均为男性，体检正常，六个月内胸片正常，年纪有可比性；唯吸烟组吸烟年限10-30年，吸烟量10-20支/日

试分析新方法（R2HZ-4HZ－R5HZ-7HZ）是否是检出小气道早期病变好指标诊断试验方法的评价基本程序与指标第24页解答：

1.可靠性评价：定量数据可靠性判定用变异系数评价：变异系数（CV）=标准差/算数均数，依据表1数据计算，两组R2HZ-4H－R5HZ-7HZ测定值CV均很小，表明该指标是可靠。

2.真实性评价：真实性判定用灵敏度、特异度等评价⑴灵敏度：灵敏度（Se）=真阳性/(真阳性+假阴性)×100%▲

Se（FEF25-75%）=22.7%▲Se（FEF75-85%）=2.3%▲Se（V50）=20.5%▲Se（V25）=13.6%▲Se（R2HZ-4H－R5HZ-7HZ）=36.4%

显示R2HZ-4H－R5HZ-7HZ检出小气道早期病变灵敏度显著高于其它四项指标⑵特异度：特异度（Sp）=真阴性/(真阴性+假阳性)×100%△Sp（FEF25-75%）=93.3%△Sp（FEF75-85%）=97.8%△Sp（V50）=95.6%△Sp（V25）=95.6%△Sp（R2HZ-4H－R5HZ-7HZ）=93.3%

显示R2HZ-4H－R5HZ-7HZ对无小气道早期病变判断能力与其它四项指标相近所以，能够得出结论，新方法（R2HZ-4HZ－R5HZ-7HZ）是检出小气道早期病变较敏感好指标。诊断试验方法的评价基本程序与指标第25页第三节预测值

在试验结果（阳性或阴性）已知条件下，有没有疾病概率称为试验预测值（predicativevalue,PV）。当一个试验对一个人群进行检验时，仅了解其灵敏度和特异度是不够，还必须了解：

△

试验结果阳性人中患有这种疾病概率，即阳性预测值（positivep