卫健委临检中心 精密度和正确度性能验证 卫健委临床检验中心 张传宝

14:43:451精密度和正确度性能验证卫生部临床检验中心张传宝14:43:452主要内容•

前言•

术语和定义•

精密度验证•

正确度验证•

小结14:43:453前言

Why

When

Who14:43:454前言--Why《医疗机构临床实验室管理办法》

(2006)

第三章

医疗机构临床实验室质量管理

第二十四条

医疗机构临床实验室应当保证检测系统的完整性和有效性，对需要校准的检验仪器、检验项目和对临床检验结果有影响的辅助设备定期进行校准。《医疗机构临床实验室管理办法》三级甲等医院考核检查表

3章24条：

20.1

是否对检测系统(仪器设备、试剂、校准品)进行了有效性的评价？包括对准确度、精密度、分析测量范围、参考范围、分析干扰等的评估。

20.2

每个项目是否具备详尽的校准程序？是否记录了校准结果?

20.3是否能提供校准品的溯源证明?

20.4是否建立了分析测量范围的验证程序?

20.5是否验证了分析测量范围?5相关法规或标准要求•

ISO

15189医学实验室——质量和能力要求(2012)：•

5.5检测程序•

5.5.1检测程序的选择、验证和确认•

总则•

实验室应选择针对预期用途进行过确认的检测程序，...•

检验程序验证•

未做修改的经确认的检测程序，在常规使用之前，实验室应进行独立验证•

实验室应从制造商或方法开发者获得用以核实检测程序性能特征的信息•

实验室进行的独立验证应通过获取客观证据（以性能指标形式）证实检测程序的性能要求得以满足6相关法规或标准要求•

ISO

15189医学实验室——质量和能力要求(2012)：•

检测程序的确认•

实验室应对以下检测程序进行确认：•

a)

非标方法；•

b)

实验室自行设计或建立的方法；•

c)

超预期范围使用的标准方法；•

d)

修改过的确认方法•

确认应尽量全面，通过客观证据（以性能指标形式）证实针对预期用途的特定要求得以满足•

注：检测程序的性能指标包括：正确性、准确性、精密度、测量不确定度、分析特异性、分析灵敏度、检测限、定量限、测量区间、诊断特异度和诊断敏感度14:43:457前言--WhyThe

U.S.CLIA

RulesSec.

493.1253

Standard:

Establishment

and

verification

of

performance

specifications(a)

Applicability.

Laboratories

are

not

required

to

verify

or

establish

performance

specifications

for

anytest

system

used

by

the

laboratory

before

April

24,

2003.(b)

--(1)

Verification

of

performance

specifications.

Each

laboratory

that

introduces

an

unmodified,

FDA-cleared

or

approvedtestsystemmust

do

the

following

before

reportingpatienttest

results:(i)

Demonstrate

that

it

can

obtain

performance

specifications

comparable

to

those

established

by

themanufacturerforthe

following

performancecharacteristics:(A)

Accuracy(trueness)FDA批准的方法(B)

Precision(C)Reportablerangeof

test

resultsfor

thetest

system(ii)

Verify

that

the

manufacturer's

reference

intervals

(normal

values)

are

appropriate

for

thelaboratory'spatientpopulation.(2)

Establishment

of

performance

specifications.

Each

laboratory

that

modifies

an

FDA-cleared

orapproved

test

system,

or

introduces

a

test

system

not

subject

to

FDA

clearance

or

approval

(includingmethods

developed

in-house

and

standardized

methods

such

as

text

book

procedures,

Gram

stain,

orpotassium

hydroxide

preparations),

or

uses

a

test

system

in

which

performance

specifications

are

notprovided

by

the

manufacturer

must,

before

reporting

patient

test

results,

establish

for

each

test

systemthe

performance

specifications

for

the

following

performance

characteristics,

as

applicable:(i)

Accuracy（Trueness）.(ii)

Precision.a)FDA批准方法修改(iii)

Analytical

sensitivity.b)

未经FDA批准方法(iv)

Analytical

specificity

to

include

interfering

substances.(v)

Reportable

range

of

test

results

for

the

test

system.(vi)

Reference

intervals

(normal

values).c)经批准，但厂家未提供性能指标(vii)

Anyother

performance

characteristic

required

for

test

performance.14:43:458前言-WHEN方法/系统首次在实验室使用；EQA/PT

结果未通过，采取纠正措施后；14:43:459前言-WHO

&

WHERE

实验室列出方法的性能指标要求（法规或者临床要求）；

实验室选择合适的方法/系统，其性能指标需满足实验室的要求；

实验室验证分析系统在实验室能否达到厂家的性能指标。14:43:4510前言-How中华人民共和国卫生行业标准

WS/T420-2013

《临床实验室对商品定量试剂盒分析性能的验证》14:43:4511主要内容•

前言•

术语和定义•

精密度验证•

正确度验证•

小结14:43:4512术语和定义

准确度

正确度

精密度

溯源性

互通性14:43:4513术语和定义

准确度(accuracy):一次测量的结果与被测量真值的接近程度。

正确度(trueness):真实度，大量测量的均值与真值的接近程度。

精密度(precision):

在规定条件下获得的独立测量结果之间的接近程度。

重复性(repeatability)

中间精密度(intermediate

precision)

重现性(reproducibility)

实验室内精密度（within-lab

precision)

不能用数字表示其优劣，只能用“良好”、“不足”等词汇描述，

其反义概念可以用数字表示，分别为不确定度、偏差标准差或变异系数

。陈文祥、申子瑜、郭健、杨振华,临床检验量值溯源中的重要术语与概念及有关问题中华检验医学杂志2005年2月第28卷第2期14:43:4514质量指标与质量管理临床检验分析质量参数变异系数(CV)：不精密度，随机误差偏倚(B)：不正确的程度，系统误差总误差(TE)：不准确度，TE

=

B+1.65CV14:43:451514:43:451614:43:4517正确还是准确？14:43:4518术语和定义溯源性(

Traceability)

测量结果或标准的值通过连续的比较链与一定的参考标准相联系的属性,参考标准通常是国家或国际标准,比较链中的每一步比较都有给定的不确定度。

解决测量结果的正确性问题，即测量均值与真值的一致程度。

溯源性不解决正确度以外的测量质量问题。14:43:4519符合理解溯源•

溯源一定能解决正确度问题？•

什么是正确的溯源？14:43:4520AFP-WHO/NIBSC14:43:4521AFP-BCR-48614:43:4522国家标准物质-AFP名称编号浓度(IU/mL)

不确定度(IU/mL)GBW(E)090653GBW(E)090654GBW(E)0906523.093.22.85.4冰冻人血清甲胎蛋白标准物质2.61X1032.3X10214:43:4523概念--溯源性：校准物1分析物ALBCA溯源性NIST927aNISTSRM915NIST911bCHOLCRNISTSRM914aNISTSRM917aNISTSRM929GLUMG14:43:4524术语和定义互通性建立溯源性的一个重要问题是溯源链中任何水平的校准物必须对于其相邻的上下两个测量程序具有互通性。即用两程序测量此校准物所得结果的数字关系，与用这两个程序测量实际样品所得结果的数字关系一致。14:43:4525概念--基质效应（互通性）1000□

新鲜冰冻人血清样品＋

制备物800600400200002004006008001000比对方法测定值14:43:4526概念--多系统/“通用”/多值校准物•

白蛋白（BCG）检测系统Abbott

Architechc8000BayerTechnicon

RA50COBAS

INTEGRA靶值（g/L）30.928.929.3HITACHISERIES30.5ILab

30029.3Konelab29.8OLYMPUS

AU400/500/600/80027.9SYNCHRON

CX4/5/7/9/LX20VITAL

AB

SELECTRA29.130.614:43:4527主要内容•

前言•

术语和定义•

精密度验证•

正确度验证•

小结14:43:4528精密度验证要求：•

熟练使用仪器步骤•

实验前准备•

实验与数据处理•

结果判断14:43:4529精密度验证

样本类型：

厂家质控品或校准品

自制样本

样本浓度

至少含二个浓度水平。

应尽可能与厂家精密度评价时所用样本的浓度一致。14:43:453014:43:4531精密度验证

样本类型：

厂家质控品或校准品

自制样本

样本浓度

至少含二个浓度水平。

应尽可能与厂家精密度评价时所用样本的浓度一致。应确定医学决定水平处的精密度14:43:4532精密度验证医学决定水平（/Article/200908/2009-08-10/147872.shtml）五十、α-胎儿球蛋白（AFP）参考值0～25ug/L决定水平25ug/L临床意义及措施当发生睾丸癌时，血清AFP常超过25ug/L1000ug/L60%以上的肝细胞癌或睾丸的非精原细胞的生殖细胞瘤患者AFP超过此值，而一般肝疾患如肝炎、肝硬化等，仅30%以下的病人超过此值。所以，当水平在鉴别两类肝病中有决定性作用，另当胎儿有神经管缺陷时，母体血清AFP更高于此值。14:43:4533精密度验证-概述实验周期•

精密度验证应进行5d，每天一个批次。实验方法•

校准方法•

校准频率•

室内质控•

样本测量：每一批次对各浓度样本分别重复测量3次。14:43:4534数据处理测量数据有效性判断•

实验日质控数据确认：按室内质控规则评价数据有效性。•

离群值判断标准：单次测量数据超出总均值±4SD。•

数据剔除量：小于总测量数据量的5%(数据超过20个时)。有效数据处理•

填表•

重复标准差•

期间标准差14:43:4535数据处理--填表项目第1批第2批第3批第4批第5批2/20TF2/21JL2/22GG2/23KW2/24SR日期/操作人员第一次测量结果：

X1第二次测量结果：

X2第三次测量结果：

X3每批测量结果之和：每批测量结果均值：푋푑140140140420140.00138139138415143144144431143143142428142143141426138.3

143.7

142.7

142.00.1089

0.4489

0.1089

0.000每批第一次测量结果与每批测量结果均值之差的平方：(X

-푋

）21푑每批第二次测量结果与每批测量结果均值之差的平方：000.4489

0.1089

0.1089

1.00000.1089

0.1089

0.4489

1.0000(X

-푋

）22푑每批第三次测量结果与每批测量结果均值之差的平方：(X

-푋

）23푑14:43:4536数据处理--填表项目第1批第2批第3批第4批第5批每批单次测量结果与每批测量结果均值之差的平方和：00.66670.66670.6667

2.0000每批测量批内方差：00.3330.3330.3331.000每批测量结果均值与总均值之差的平方：1.76899.0005.47561.7956

0.4489注：表中：n——每批重复测量次数（3）；X

——每批单次测量结果；푖푋

——每批测量结果均值；푑푠푑

——每批测量重复标准差；푟푢푛푋——总均值，即所有批次测量结果均值。141.3314:43:4537数据处理--重复标准差（S푟）14:43:4538数据处理--填表项目第1批第2批第3批第4批第5批每批单次测量结果与每批测量结果均值之差的平方和：2.000000.6667

0.6667

0.6667每批测量批内方差：00.333

0.333

0.333

1.000每批测量结果均值与总均值之差的平方：0.4481.7689

9.000

5.4756

1.79569注：表中：n——每批重复测量次数（3）；X

——每批单次测量结果；푖푋

——每批测量结果均值；푑푠푑

——每批测量重复标准差；푟푢푛푋——总均值，即所有批次测量结果均值。141.3314:43:4539数据处理--期间标准差（Sb）•

计算总均值（푋）=141.33

计算批间方差S푏214:43:4540数据处理--填表项目第1批第2批第3批第4批第5批每批单次测量结果与每批测量结果均值之差的平方和：00.66670.66670.6667

2.0000每批测量批内方差：00.3330.3330.3331.000每批测量结果均值与总均值之差的平方：1.76899.0005.47561.7956

0.4489注：表中：n——每批重复测量次数（3）；X

——每批单次测量结果；푖푋

——每批测量结果均值；푑푠푑

——每批测量重复标准差；푟푢푛푋——总均值，即所有批次测量结果均值。141.3314:43:4541数据处理--期间标准差（Sl）•

Sl-实验室内（精密度）标准差14:43:4542数据处理--重复标准差（S푟）14:43:4543数据处理--期间标准差（Sb）•

计算总均值（푋）=141.33

计算批间方差S푏214:43:4544数据处理--期间标准差（Sl）•

Sl-实验室内（精密度）标准差•

重复性标准差14:43:4545结果判读重复精密度（S푟）12计算值S

（0.632mg/dL）<厂家声称值σ

(1.0mg/dL)푟푟表明厂家声称的重复精密度可靠，不需要再计算验证值实验室内标准差（푺풍）计算值푺

（2.21mg/dL）>厂家声称值σ

(2.0mg/dL)풍풍需计算验证值14:43:4546验证值的计算重复精密度验证值

v:自由度=D.(n-1)

=

5x2

=

10

C:a

=0.05，自由度为10，卡方（Chi-Square)分布的临界值验证值=实验室内精密度验证值验证值=14:43:4547精密度验证--重复精密度验证值计算Sr

<厂家指标，验证通过Sr

>厂家指标：

计算验证值=

v:自由度=D.(n-1)=5x2

=10

C:a=0.05，自由度为10，卡方（Chi-Square)分布的临界值，为20.48。本实验中，Sr

=

0.63，厂家指标是1，验证通过。14:43:4548精密度验证—实验室内精密度验证Sl<厂家指标，验证通过Sl>厂家指标：

计算验证值14:43:4549精密度验证—实验室内精密度验证值计算计算有效自由度：C=11.14验证值14:43:4550精密度验证—实验室内精密度验证Sl

<厂家指标，验证通过；Sl

>厂家指标：

计算验证值•

结论：实验结果虽然超过厂商指标，但是小于验证值，故认为实验结果同厂商申明的实验室内精密度一致，验证通过。14:43:4551主要内容•

前言•

术语和定义•

精密度验证•

正确度验证•

小结14:43:4552正确度验证1用患者样本与其他检验方法/试剂盒进行正确度验证23用参考物质进行正确度验证正确度验证计划-NCCL

EQA14:43:4553正确度验证--用患者样本进行比较利用临床病人样本，比较两个测量程序间的结果

确认和建立bias：EP9-Method

comparisonandbiasestimationusingpatient

samples.

比对测量程序的选择−

厂家申明中用到的测量程序：厂家声称标准−

现有测量程序（欲改动、用到新仪器上时）陈文祥、申子瑜、郭健、杨振华,临床检验量值溯源中的重要术语与概念及有关问题中华检验医学杂志2005年2月第28卷第2期14:43:4554正确度验证—用患者样本进行比较样本测量周期和测量次数

20份患者样本

4-7样本/天，3-5天

每个样本测量一次

与精密度验证同时进行

避免已知干扰物质

应根据项目特点规定储存条件，冷冻样本应避免反复冻融比较实验实验方法测量结果分析

用两个测量程序对样本进行重复测定

弃去偏差异常大样本，重新测定另一样本；

查找导致异常偏差的原因。

校准方法

校准频率

室内质控14:43:4555正确度验证—用患者样本进行比较数据处理结果判读判读标准如果b（

푏

）绝对值≤厂家.

计算两个方法间的绝对偏移（푏）rel声称值,则验证厂家声称值可靠。.

绘制偏移图如果b（

푏

）绝对值＞厂家rel声称值,则需要计算验证区间.

绝对偏移标准差（Sb）验证区间的计算绝对偏移验证区间相对偏移验证区间•

相对偏移:brel•

相对偏移标准差：Srel(b)14:43:4556正确度验证--用患者样本进行比较项目厂家指标：实验程序

比对程序GLU2浓度：126单位：

mg/dLbi%bi76127256303297712126229425-16-3.53.512.2512.2572.2542.252.25-1.304.96-2.293.0616.00-0.862.440.002.581.090.424.351.30-1.980.003.709.26-1.084.411.1647.222.3614.27-3.6613.406.762.60-4.650.70-69-8.56.521.620.4941.513.64-3.220.08186.0510.370.013454234841-31-5.5-1.5-2.57.530.252.25154398931543889206.25-2.360.225.5710156.252.250.05-1.5-1.50.5-1.27-1.941.991.61240722396912.253.7630.253.96312993081013751625441.52.25-1.06-4.34-2.361.341.12-20-4.5-2.53.520.256.2518.845.5737516859612.256.251.8052.56.9047.6111.834.20183213436185204431-29-4.56.520.2542.256.25-3.442.0552.5-1.201.44和502.54.33357346.06平均值标准差14:43:4557正确度验证--用患者样本进行比较偏倚图：葡萄糖测量程序比对12.5107.552.50-2.5-5-7.50100200300400500比对程序测定值14:43:4558计算

α=0.01,0.05

自由度n-1=19

查双侧概率（α）或单侧（α/2），自由度19的t值。

计算验证限：14:43:4559t值表n’P(2):P(1):0.50.2510.20.10.10.056.3142.920.050.02512.7064.3033.1822.7762.5712.4472.3652.3062.2622.2282.2012.1792.160.020.010.010.00563.6579.9255.8414.6044.0323.7073.4993.3553.253.1693.1063.0553.0122.9772.9472.9212.8982.8782.8612.84512345678910111213141516171819203.0781.8861.6381.5331.4761.441.4151.3971.3831.3721.3631.3561.3531.8216.9654.5413.7473.3653.1432.9982.8962.8212.7642.7182.6812.652.6242.6022.5832.5672.5522.5392.5280.8160.7650.7410.7270.7180.7110.7060.7030.70.6970.6950.6940.6920.6910.692.3532.1322.0151.9431.8951.861.8331.8121.7961.7821.7711.7611.7531.7461.741.3451.3411.3371.3331.332.1452.1312.120.6890.6880.6880.6872.111.7341.7291.7252.1012.0932.0861.3281.32514:43:4560计算14:43:4561判断

如果偏倚小于厂家指标（实验室指标），验证通过；

如果偏倚大于厂家指标，但是在验证限的范围内，验证通过。

用户可增加10-20样本，用所有样本的结果来进行统计，以增加统计效能。

如果偏移不在验证限范围内，验证不通过，联系厂家以求协助。14:43:4562结论14:43:4563正确度验证1用患者样本与其他检验方法/试剂盒进行正确度验证23用参考物质进行正确度验证正确度验证计划-NCCL

EQA14:43:4564正确度验证—测量参考物质参考物质：一种材料或者物质，其一种或多种特性值足够均匀并被良好确定，用于校准测量系统性、评价测量床徐或为材料赋值。包括校准物质（calibration

material）和正确性质控物质（truenesscontrolmaterial)。具有校准和评价测量系统两个主要功能。有证参考物质：附有证书的参考物质，其一种或多种特性值用可建立溯源的程序确定，使之可溯源至准确复现的表示该特性值的测量单位，每种确定的特性值都有给定置信水平的不确定度。陈文祥、申子瑜、郭健、杨振华,临床检验量值溯源中的重要术语与概念及有关问题中华检验医学杂志2005年2月第28卷第2期14:43:4565BIPM-JCTLM14:43:456614:43:4567AFP-WHO/NIBSC14:43:456814:43:4569AFP-BCR-48614:43:4570国家标准物质-AFP名称编号浓度(IU/mL)

不确定度(IU/mL)GBW(E)090653GBW(E)090654GBW(E)0906523.093.22.85.4冰冻人血清甲胎蛋白标准物质2.61X1032.3X10214:43:4571例-201X年产筛EQA结果（AFP）变异系数（%）批号组实验室数

平均值中位数标准差最大值最小值201511缺省组2831012.011.840.012.711.84.912.111.740.112.711.96.81.250.671.350.840.823.016.085.804.416.744.1228.4410.405.6815.113.245.014.54.611.139.010.3Abbott系统组Beckman系统组

1357.486.58Roche系统组DPC系统组46248参考物质：EQA材料组内均值：40ug/L组内SD：1.73ug/L组实验室数：135潍坊康华系统组缺省组201512282101664624874.473.073.280.776.442.774.173.373.380.477.661.0Abbott系统组Beckman系统组Roche系统组DPC系统组7.946.038.355.3966.5982.884.6109.481.665.661.459.770.366.22.9潍坊康华系统组14:43:4572实验数据设备：BECKMAN

分析物：AFP定值40单位ug/L试剂/批号：

639940-01校准品/批号：EQA201511定值数量135

标准差1.73测定结果xi批1，日期/操作者12月7日12月8日12月9日12月12日12月13日3738-0.70.30.490.09测定值X1测定值X2批2，日期/操作者测定值X339371.3-0.71.690.49测定值X4批3，日期/操作者测定值X538360.3-1.70.092.89测定值X6批4，日期/操作者测定值X739381.30.31.690.09测定值X8批5，日期/操作者测定值X938370.3-0.70.090.49测定值X10377所有测定结果总和均值37.714:43:4573正确度验证--测定参考物质计算均值，37.7mg/dL计算标准不确定度参考物质：EQA材料组内均值：40mg/dL组内SD：1.73mg/dL组实验室数：13514:43:4574正确度验证--测定参考物质（EQA样本）计算

设定a=0.01或0.05

假定参考物质定值无偏倚；

自由度2n-1=9

查双侧概率（a）或单侧（a/2），自由度9的t值。

自由度，2n-1（2次重复，n批）=2x5-1=9

t

=2.262,

t

,

=3.250.05,90.01

914:43:4575正确度验证--测定参考物质（EQA样本）t值表n’P(2):P(1):0.50.2510.20.10.10.050.020.010.010.005

0.002

0.0010.050.0250.005

0.0025

0.001

0.0005123.078

6.314

12.706

31.821

63.657

127.321

318.309

636.6192.92

4.303

6.965

9.925

14.089

22.327

31.5990.765

1.638

2.353

3.182

4.541

5.841

7.453

10.215

12.9240.741

1.533

2.132

2.776

3.747

4.604

5.598

7.173

8.610.727

1.476

2.015

2.571

3.365

4.032

4.773

5.893

6.8690.718

1.44

1.943

2.447

3.143

3.707

4.317

5.208

5.9590.711

1.415

1.895

2.365

2.998

3.499

4.029

4.785

5.4080.706

1.397

1.86

2.306

2.896

3.355

3.833

4.501

5.0410.703

1.383

1.833

2.262

2.821

3.25

3.69

4.297

4.7810.7

1.372

1.812

2.228

2.764

3.169

3.581

4.144

4.5870.697

1.363

1.796

2.201

2.718

3.106

3.497

4.025

4.4370.816

1.88634567891011120.695

1.356

1.782

2