检测系统分析性能验证及确认课件

1、检测系统分析性能验证及确认宋鉴清2022/9/271检测系统分析性能验证及确认宋鉴清2022/9/241-论语卫灵公 2022/9/272-论语卫灵公 2022/9/242检测系统：是指完成一个检验项目所涉及的仪器、试剂、校准品、操作程序、质控品、样品、质量控制、保养计划、操作者等的组合。检测系统的用途：为患者提供准确的检验结果。2022/9/273检测系统：是指完成一个检验项目所涉及的仪器、试剂、校准品、操要记住：单单一个试剂盒上的所谓分析性能，一定不就是试剂盒的！因为只有试剂没有仪器的合作，就没有这些分析性能！同样，仪器厂商宣传的那些分析性能一定是在该仪器上使用了某个厂商的试剂盒才具有的！

2、因此所有的分析性能一定是一个检测系统的！不是试剂盒的、也不是某个仪器的！2022/9/274要记住：单单一个试剂盒上的所谓分析性能，一定不就是试剂盒的！常见检测系统配套检测系统-性能验证： A+A+A 封闭系统 A+B+B 配套开放系统自建检测系统-性能确认： A+B+C 非配套开放系统2022/9/275常见检测系统配套检测系统-性能验证：2022/9/245LDH 乳酸脱氢酶性能特征(罗氏)-12022/9/276LDH 乳酸脱氢酶性能特征(罗氏)-12022/9/246LDH 乳酸脱氢酶性能特征(罗氏)-22022/9/277LDH 乳酸脱氢酶性能特征(罗氏)-22022/9/247IS

3、O 15189认可准则的要求2022/9/278ISO 15189认可准则的要求2022/9/2482022/9/2792022/9/249验证（verification）确认（validation）定义通过提供客观证据证明给定项目满足规定的要求通过提供客观证据对特定的预期用途或应用要求已得到满足的认定。适用范围配套检测系统固定组合的检测系统标准方法。非标准方法、实验室设计或制定的方法、超出预定范围使用的标准方法和修改过的确认方法（自建检测系统）。完成者临床实验室独立完成厂商，方法的研究和开发者，或临床实验室。性能指标精密度，正确度，可报告范围，有时还有检出限。精密度，正确度，可报告范围，检出

4、限，干扰，携带污染等。目的满足厂商声明或预期用途。满足检验预期用途的特定要求。CNAS CL02：2012 5.5.1.3性能验证与确认的区别2022/9/2710验证（verification）确认（validation性能验证项目的选择（一）5.5检验方法和程序的分析性能验证内容至少应包括正确度、精密度和可报告范围。 CNAS-CL38：2012医学实验室质量和能力认可准则在临床化学检验领域的应用说明5.5检验方法和程序的分析性能验证内容至少应包括：检出限，精密度（包括重复性和中间精密度）、符合率，并 应明确检验项目的预期用途，如筛查、诊断、确认。CNAS-CL39：2012医学实验室质量

5、和能力认可准则在临床免疫学检验领域的应用说明2022/9/2711性能验证项目的选择（一）5.5检验方法和程序的分析性能验证内性能验证项目的选择（二）5.5尿液干化学分析仪性能验证的内容至少应包括阴性和阳性符合率CNAS-CL41：2012医学实验室质量和能力认可准则在体液学检验领域的应用说明5.5血液分析仪的性能验证内容至少应包括正确度、精密度、可报告范围等。CNAS-CL43：2012医学实验室质量和能力认可准则在临床血液学检验领域的应用说明2022/9/2712性能验证项目的选择（二）5.5尿液干化学分析仪性能验证的内容WS/T 403-2012临床生物化学检验常规项目分析质量指标WS/

6、T 406-2012临床血液学检验常规项目分析质量要求WS/T 408-2012临床化学设备线性评价指南WS/T 492-2016临床检验定量测定项目精密度与正确度性能验证2022/9/2713WS/T 403-2012临床生物化学检验常规项目分析质量EP5-A3 .Evaluation of precision of quantitative measurement procedures; approved guideline-third edition. 2014 EP15-A3. User verification of precision and estimation of bias；

7、approved guideline-third edition.2014EP9-A2. Method Comparison and Bias Estimation Using Patient Samples;Approved GuidelineSecond Edition EP6 A. Evaluation of the Linearity of Quantitative Measurement rocedures:A Statistical Approach; Approved GuidelineEP10 A2. Preliminary Evaluation of Quantitive C

8、linical of Laboratory Methods; Approved GuidelineSecond Edition.2022/9/2714EP5-A3 .Evaluation of precisio2022/9/27152022/9/2415性能验证相关的基本概念精密度（precision）:在规定的条件下，对同一或类似被测对象重复测量所得示指或测得值间的一致程度。精密度的度量通常以不精密度（SD、方差或CV）表示。批（Run）：在检测系统真实性和精密度稳定的间隔期，一般不超过24小时或不少于2小时。正确度(trueness)：无穷多次重复测量所得量值的平均值与一个参考量值间的一致

9、程度。与系统测量误差有关，与随机测量误差无关，以偏倚（Bias）表示。准确度(accuracy)：单次检测结果与参考值间的一致程度，以总误差（TE）表示。2022/9/2716性能验证相关的基本概念精密度（precision）:在规定的性能验证相关的基本概念线性（linearity）：检测样本时，在一定范围内可以直接按比例关系得出分析物含量的能力。总误差(total error)：实验室用某方法在多次独立检测中分析某样品所得各个结果值与靶值之差在一定置信区间内的最大允许范围。灵敏度(analytical sensitivity)：校准曲线的斜率，即对于规定量的变化分析程序产生信号的变化。检测限

10、(detection limit)：分析程序具有适当的确定检出的分析物的最小浓度或量。检测限依赖于空白读数大小。2022/9/2717性能验证相关的基本概念线性（linearity）：检测样本时性能验证的实施过程 对检验程序的性能验证涉及到多方面工作，为了得到可靠结果，实验室负责人或实验主持人应对此项工作有一个概括了解，先制定一个方案，包括如下工作： 1、性能验证项目的选择、质量目标确定、性能验证方案制定及实施工作计划； 2、实验前准备（人员培训、仪器维护及校准、样本留取及制备）； 3、实验操作、数据收集、处理； 4、结论。2022/9/2718性能验证的实施过程 对检验程序的性能验证涉及到多

11、方面工分析质量指标的确定分析质量指标（analytical quality specifications）;又称质量目标（quality goals）、质量规范（quality specification）、质量标准（quality standards）和分析性能目标（analytical performance goals）。判断临床检验结果精密度、正确度和准确度水平高低的指标，或临床检验结果应达到的精密度、正确度和准确度要求，通常用不精密度、偏倚和总误差来表示。2022/9/2719分析质量指标的确定分析质量指标（analytical qua层次模式设定策略协议条款1评价分析性能对特定床决

12、策的影响特定临床情况下的质量规范2评价分析性能对一般临床决策的影响A.基于生物变异的一般质量规范B.基于医疗观点的一般质量规范3专业建议A.国家或国际专家小组指南B.个别或学会工作组专家指南4由法规机构或室间质量评价组织者制定的质量规范A.由法规机构制定的质量规范B.由室间质量评价组织者制定的质量规范5已发表的当前技术水平数据A.已发表的能力验证和室间质量评价的数据B.已发表的特定的方法学设定质量目标的层次模式和方法2022/9/2720层次模式设定策略协议条款1评价分析性能对特定床决策的影响特定质量目标2022/9/2721质量目标2022/9/2421精密度验证 2022/9/2722精密

13、度验证 2022/9/2422采用2个浓度的质控物，每天分析1个批次，每个浓度重复检测4次，连续5天。数据经过离群值检验，收集220=40个有效数据，并通过统计分析评价方法计算总精密度和批内精密度，与允许范围进行比较，判断结果是否接受。将估计的批内精密度和室内精密度与本室规定的相应的允许范围(CV批内1/4总允许误差，CV总行业标准)比较，判断验证是否通（同时参考CLIA规定的TEa、厂商声明）。 参考临床检验方法学评价EP15-A2WS/T 492-20162022/9/2723采用2个浓度的质控物，每天分析1个批次，每个浓度重复检测4次方法精密度分析方案结果汇总仪器名称：日立7600-21

14、0项目浓度水平浓度水平精密度CV%允许范围判定结果验证值判定结果精密度CV%允许范围判定结果验证值判定结果CACV批内0.77%1.25%通过0.0621 通过CV批内1.20%1.25%通过0.0783 通过CV总1.41%2.0%通过0.1254 通过CV总1.77%2.0%通过0.1258 通过PCV批内1.20%2.50%通过0.0444 通过CV批内1.17%2.50%通过0.0579 通过CV总1.38%4.0%通过0.0584 通过CV总2.01%4.0%通过0.1130 通过MGCV批内1.59%3.75%通过0.0678 通过CV批内1.24%3.75%通过0.1008 通过

15、CV总2.56%5.5%通过0.1261 通过CV总2.43%5.5%通过0.2103 通过2022/9/2724方法精密度分析方案结果汇总仪器名称：日立7600-210临床血液学批内精密度 试验方案批内精密度以连续检测结果的变异系数为评价指标，使用1份正常浓度水平的临床标本，按常规方法重复检测11次，计算后10次的算术平均值、标准差及变异系数，与允许的变异系数进行比较，判断结果是否接受。（参考WS/T 406-2012临床血液学检验常规项目分析质量要求）2022/9/2725临床血液学批内精密度 2022/9/27262022/9/2426日间精密度 试验方案日间精密度以室内质控在控结果的变

16、异系数为评价指标，使用Sysmex配套质控品（低值、中值、高值）当前批号累积的变异系数，与允许的变异系数进行比较，判断结果是否接受。（参考WS/T 406-2012临床血液学检验常规项目分析质量要求）临床血液学2022/9/2727日间精密度 2022/9/27282022/9/2428临床案例12022/9/2729临床案例12022/9/2429临床案例12022/9/2730临床案例12022/9/2430临床案例1钙更换试剂A试剂B试剂2022/9/2731临床案例1钙更换试剂A试剂B试剂2022/9/2431正确度验证 2022/9/2732正确度验证 2022/9/2432WS/T

17、 406-2012临床血液学检验常规项目分析质量要求WS/T 492-2016临床检验定量项目精密度与正确度性能验证EP9-A3:Measurement procedure comparison and bias estimation using patient samples; approved guideline- third edition. 2013EP9-A2：Method Comparison and Bias Estimation Using Patient Samples; Approved Guideline - Second Edition，2002EP15-A2：User

18、 Verification of Performance for Precision and Trueness ,2005EP15-A3. User verification of precision and estimation of bias；approved guideline-third edition.20142022/9/2733WS/T 406-2012临床血液学检验常规项目分析质量要临床血液学1试验过程1.1 样本的准备选取10份检测结果在参考区间内的新鲜临床样本。1.2 试验步骤 10份标本分别在该仪器上检测2次，记录各项目20次检测结果，计算均值； 相同样本在临检室标准仪器

19、（J-3001-LJ）上同样检测2次，记录各项目20次检测结果，计算均值，设为靶值； 该仪器检测结果均值与靶值计算偏倚。1.3 质量控制 整个试验阶段检测仪器状态正常，各批次质控结果均符合要求。2 试验数据分析 各试验数据的统计分析方法参考临床血液学检验常规项目分析质量要求。3 试验结果的判定标准各项目的偏倚应符合表6的要求。2022/9/2734临床血液学1试验过程2022/9/24342022/9/27352022/9/24352022/9/27362022/9/24362022/9/27372022/9/2437正确度初步评价 先用5个定值PT样品进行正确度初步评价，每个样品测量1次，计

20、算5个样品与靶值之间的平均偏倚，若允许偏差（卫生行业标准）初步评价通过，直接进行正确度确认；若不通过则进行校准，初步评价通过后再进行正确度确认。2022/9/2738正确度初步评价2022/9/2438检测PT样品5份，每个样品重复测量3次，计算每个样品均值与靶值的相对偏倚；检测参考方法定值的新鲜血清样品5份，每个样品重复测量3次，计算每个样品重复测量的均值与靶值的相对偏倚；用实验方法和参考方法同时检测40份新鲜样品，每天测量10个样品，每个样品测量1次，连续4天。以参考方法结果为横座标X，实验方法为纵座标Y，绘制散点图，计算回归方程，计算参考区间两端和医学决定水平处的相对偏倚。 （-EP9-

21、A3）偏倚允许偏差，正确度得到确认。确认实验方法2022/9/2739检测PT样品5份，每个样品重复测量3次，计算每个样品均值与靶有证参考物质（CRMs）：已用参考方法或决定性方法定值，可从美国国家标准局（NIST）或其他国际组织认可的提供者获得;从能力验证试验（PT）中获得的参考物：如CAP和卫生部检验中心能力验证试验中提供的调查品;厂商提供的正确度确认物或质控物;室间质量评价计划中使用的质控物;由第三方提供的已用不同方法定值的物质。定值参考物质检测的回收实验2022/9/2740有证参考物质（CRMs）：已用参考方法或决定性方法定值，可从比 对 2022/9/2741比 对 2022/9/

22、2441试验方案收集样本20份，其浓度应均匀分布整个分析测量范围。采用试验方法和比较方法分别检测20份样本，试验持续4天，每天测定5份样本。每种方法对于每个样本重复测定2次，将样本按1、2、3、4、5的顺序进行第一次测定，再按反向顺序测定第二次。顺序中的样本浓度尽量随机排列。其测定结果经过方法内、方法间离群值检验，X值合适范围检验，离散度均匀性检查等步骤，绘制散点图，粗略分析方法间是否呈线性关系。通过线性回归分析估计在医学决定水平处的预期偏倚的95%可信区间大小；或者如数据离散度均匀，可计算各浓度的平均偏倚及平均百分比偏倚大小。将两种偏倚与偏倚的允许范围进行比较以判定是否符合要求。参考临床检验

23、方法学评价EP9-A2WS/T 407-2012 医疗机构内定量检验结果的可比性验证指南2022/9/2742试验方案2022/9/2442 皮肌炎是一种引起皮肤、肌肉、心、肺、肾等多脏器严重损害的，全身性疾病，而且不少患者同时伴有恶性肿瘤。它的1症状表现如下： 1、早期皮肌炎患者，还往往伴有全身不适症状，如-全身肌肉酸痛，软弱无力，上楼梯时感觉两腿费力；举手梳理头发时，举高手臂很吃力；抬头转头缓慢而费力。皮肌炎图片皮肌炎的症状表现 皮肌炎是一种引起皮肤、肌肉、心、肺、肾等多脏器严重方法内离群值检验实验方法差值绝对值的均值：0.19 接受限为前者4倍：0.77 实验方法相对差值绝对值的均值：0

24、.02 接受限为前者4倍：0.07 比较方法差值绝对值的均值：0.21 接受限为前者4倍：0.85 比较方法相对差值绝对值的均值：0.02 接受限为前者4倍：0.08 方法间离群值检验E值：0.22 E的控制限=4*E=0.878E值：0.0146 E的控制限=4*E=0.0585 X值合适范围的检验2022/9/2744方法内离群值检验实验方法差值绝对值的均值：0.19 接受限为2022/9/27452022/9/2445CNAS-CL38：2012医学实验室质量和能力认可准则在临床化学检验领域的应用说明2022/9/2746CNAS-CL38：2012医学实验室质量和能力认可准则在质控数据

25、比对分析临床案例22022/9/2747质控数据比对分析临床案例22022/9/2447临床案例22022/9/2748临床案例22022/9/2448临床案例22022/9/2749临床案例22022/9/2449临床案例22022/9/2750临床案例22022/9/2450临床案例22022/9/2751临床案例22022/9/2451临床案例22022/9/2752临床案例22022/9/2452临床案例22022/9/2753临床案例22022/9/2453可报告范围临床可报告范围分析测量范围2022/9/2754可报告范围临床可报告范围分析测量范围2022/9/2454线性评价方法

26、目测法:主观、粗略、不能确定每个点的线性程度；改良Doumas方法（平均斜率法）； CAP设备委员会（IRC）采用的多项式回归分析方法(CAP-IRC法)；CLSI EP-6A法（定量检验方法的线性评价）。2022/9/2755线性评价方法目测法:主观、粗略、不能确定每个点的线性程度；2样本来源病人标本；低浓度的标本（或推荐的稀释液）稀释高浓度标本；病人样本中添加分析物（如CaCl2、Glu)、加入量原则上少于总体积的10%；商业质控物/校准物/线性验证物质。2022/9/2756样本来源病人标本；2022/9/2456项目名称线性范围水平1质控均值水平2质控均值钾1.5-10.0 4.017

27、.519钙0.05-52.413.24血糖0.11-41.66.8419.85肌酐92总蛋白1-13052.2760.95丙氨酸氨基转移酶4-100083195.3肌酸激酶3-2300233.1623.9低密度脂蛋白0.026-18.103.0794.57淀粉酶3-1500130.9262.5胆固醇 0.13-20.77 4.8117.3132022/9/2757项目名称线性范围水平1质控均值水平2质控均值钾1.5-10.线性：0.11-41.66.8419.85？6.8419.852022/9/2758线性：0.11-41.66.8419.85？6.8419平均斜率

28、法评价分析测量范围（改良Doumas方法）试验方案选取接近仪器标注的分析测量范围上限（其样本浓度不低于标定分析范围上限的85%）和下限的两个分析浓度的样本(H和L)，按照1L、0.8L0.2H、0.6L+0.4H、0.4L+0.6H、0.2L+0.8H、1H的比例关系配制6个系列浓度的样本。对每个混合样本进行多次(至少2次)检测。经统计后拟合回归线ybx+a。试验结果的判定标准将拟合回归线的相关系数r0.975（r20.95），b值在10.05范围作为判断标准。部分参考临床检验质量管理技术基础（冯仁丰）、EP62022/9/2759平均斜率法评价分析测量范围（改良Doumas方法）试验方202

29、2/9/27602022/9/2460方法分析测量范围分析方案结果汇总仪器名称：日立7600平均斜率法编号项目厂商标注的测量范围实验室验证的测量范围验证结果1ALKP112000.00 931.50 呈线性2TG0.0111.290.05 13.49 呈线性3TC0.1320.770.00 8.32 呈线性4GGT210002.00 992.00 呈线性5DBIL0.7342.10.60 301.50 呈线性2022/9/2761方法分析测量范围分析方案结果汇总仪器名称：日立7600平均CLSI EP-6A法（定量检验方法的线性评价）2022/9/2762CLSI EP-6A法（定量检验方法的线性评价）2022/92022/9/27632022/9/24632022/9/276420