医学统计学第二十三章常用综合评价方法课件

常用综合评价方法

SyntheticalEvaluation

第二十三章11/17/2022医学统计学

常用综合评价方法

SyntheticalEvalua1ContentConcept

Process

Selectionandweightestimationofevaluationindex

Analytichierarchyprocess,AHPTopsisRanksumratio,RSR11/17/2022医学统计学ContentConcept11/10/2022医学统计学2例如，某人英语考试成绩58分是否对照某标准判断此结果是否评价（evaluation)仅是描述，反映现状11/17/2022医学统计学例如，某人英语考试成绩58分是否对照某标准判断此结果是否评31.基本概念Syntheticalevaluation综合评价Definition:利用多项指标对某个评价对象的某种属性进行定性、定量评估，或者对多个评价对象的属性进行定性、定量评估，可对优劣顺序排序。Application:对比，择优Purpose:支持决策（基础、预防、临床、管理中广泛应用）11/17/2022医学统计学1.基本概念Syntheticalevaluation综42.1综合评价的一般步骤对某事件进行多因素综合评价的过程，实质上就是科学研究与决策的过程，原则上应包括设计、收集资料和分析资料几个基本阶段，实施中应着重注意以下几个基本环节。①选择恰当的评价指标(evaluationindicator)②确定各评价指标权重③合理确定各单个指标的评价等级(evaluationgrade)及其界限④建立综合评价模型(syntheticalevaluationmodel)⑤确定多指标综合评价的等级数量界限，并根据实践对已建立模型考察、修改及完善。研究目的11/17/2022医学统计学2.1综合评价的一般步骤对某事件进行多因素综合评价的过程，52.1例：学生综合测评（综合评分）评价指标：德育总分、智育总分、体育总分（加分：CET）权重：方案1：德育0.3智育0.6体育0.1方案2：德育0.1智育0.8体育0.1方案3：德育0.3智育0.6体育0.1加分评价模型：评分法、总分为100，加分不封顶，累加法。评价结果:

学生甲：德育90智育70体育80学生乙：德育70智育80体育7011/17/2022医学统计学2.1例：学生综合测评（综合评分）评价指标：德育总分、智育总611/17/2022医学统计学11/10/2022医学统计学72.2综合评价一般步骤示例研制新生儿缺氧状况的Apgar评分方法研究目的据专业知识，选择5个指标①心率②呼吸③肌张力④反射⑤皮肤颜色

5个指标具有相等权重选择指标确定权重以累加法累计总分：8～10分为正常；4～7分为轻度缺氧；0～3分为重度缺氧。

确定指标评价等级及界限建立模型11/17/2022医学统计学2.2综合评价一般步骤示例研制新生儿缺氧状况的Apgar83.1评价指标的基本要求基本要求①代表性：各层次指标能最好地表达所代表的层次。②确定性：指指标值确定，其高低在评价中有确切含义。③区别能力/灵敏性：即指标值有一定的波动范围，而且其高低在评价中有确切的含义。④独立性：即选入的指标各有所用，相互不能替代。选择综合评价指标11/17/2022医学统计学3.1评价指标的基本要求基本要求①代表性：各层次指标93.2系统分析法及文献资料

分析优选法筛选指标缺乏有关历史资料，或指标难以数量化时系统分析法(systematicanalysismethod)：是一种常用的凭经验挑选指标的方法，首先将所有备选指标按系统（或属性、类别）划分，再通过座谈或填调查表的方法获得对各指标的专家评分，确定主次，再从各系统内挑选主要的指标作为评价指标。

文献资料分析优选法：即全面查阅有关评价指标设置的文献资料，分析各指标的优缺点并加以取舍。

11/17/2022医学统计学3.2系统分析法及文献资料

分析优选法筛选指标缺乏有关历史103.3常用客观筛选指标方法逐个指标进行假设检验的方法：是在掌握有关历史资料基础上，依照可能的评价结果将评价对象分组，并对各指标进行假设检验，挑选有统计意义的指标作为评价指标。多元回归与逐步回归法：多元回归分析挑选标准化偏回归系数绝对值较大或偏回归系数假设检验有显著性的指标作为评价指标；逐步回归有自动挑选主要影响指标的功能，是目前最常用的指标挑选方法。指标聚类法：在存在众多指标的情况下，可将相似指标聚成类，再从每类中找一个典型指标作为代表，从而用少量几个典型指标作为评价指标来代表原来众多的指标建立评价模型。11/17/2022医学统计学3.3常用客观筛选指标方法逐个指标进行假设检验的方法：是在113.4指标筛选建议在实际工作中，往往综合使用多种方法进行指标筛选，在获得较为满意的专业解释的基础上，优先考虑那些被多种方法同时选入的指标。

11/17/2022医学统计学3.4指标筛选建议在实际工作中，往往综合使用多种方法进行123.5评价指标的权重估计

确定指标权重方法主观定权法客观定权法专家评分法成对比较法Saaty权重法秩和比法相关系数法其它方法模糊定权法熵权法定权带有一定的主观性，用不同方法确定的权重分配，可能不尽一致，这将导致权重分配的不确定性，最终可能导致评价结果的不确定性。因而在实际工作中，不论用哪种方法确定权重分配，都应当依赖于较为合理的专业解释。11/17/2022医学统计学3.5评价指标的权重估计确定指标权重方法主观定权法客观133.6专家评分法评分方式1）专家个人判断即分别征求专家个人意见，在专家各自单独给评价指标的相对重要性打分的基础上，进行统计处理，以确定各指标的权重。

优点：专家打分时不受外界影响，没有心理压力，可以最大限度地发挥个人创造能力。

缺点：仅凭个人判断，易受专家知识深度与广度的影响，难免带有片面性。

2）专家会议即召开所有被挑选专家，以集体讨论的方式进行评分，然后再以统计手段确定各指标的权重。

优点：可以交换意见，相互启发，弥补个人之不足。

缺点：主要表现在易受心理因素的影响，如屈从于权威和大多数人的意见，受劝说性意见的影响，不愿公开修正已发表的意见等等。11/17/2022医学统计学3.6专家评分法评分方式1）专家个人判断即分146个专家对4个评价指标的评价结果得分不考虑专家权威程度：权重分别是0.41,0.31,0.18,0.1011/17/2022医学统计学6个专家对4个评价指标的评价结果得分不考虑专家权威程度：权重153.7专家评分法可靠性评估常用指标

在实际工作中，常用专家的擅长系数和专家意见一致性系数等指标来估计专家评分方法所定权重分配的相对合理性。1)．擅长系数：某一评估专家的水平可用对擅长领域中所提问题作出正确应答的概率，即所谓“擅长系数”。计算公式为：

其中，q为擅长系数,p为错答率。理想的“绝对正确”评估专家，p=0,q=1。通常在选择评估专家时,其擅长系数q不应低于0.80。11/17/2022医学统计学3.7专家评分法可靠性评估常用指标166个专家对4个评价指标的评价结果的一致性系数计算表11/17/2022医学统计学6个专家对4个评价指标的评价结果的一致性系数计算表11/10172）专家意见一致性系数:设参与权重评估的专家数为m，待评价指标数为n，则反映m个专家对全部n个指标权重评估的一致程度的指标称为一致性系数，以w表示,其计算公式为：一致性系数在0～1之间取值，越接近于1，表示所有专家对全部评价指标评分的协调程度越好。当然，一致性系数越大越好，这说明各评价因子的权重估计较为稳定可靠。当有相同秩时，要对w进行校正：式中

11/17/2022医学统计学2）专家意见一致性系数:设参与权重评估的专家数为m，待评价183.7常用的客观定权方法某些统计方法分析结果，可提供有关因素权重分配的客观信息:多元回归分析及逐步回归分析中，各自变量的标准化偏回归系数值以及由此而推算的贡献率；计数资料判别分析中的指数，计量资料判别分析中各因子的贡献率；主成分分析中得到的因子载荷和贡献率。某些特定的统计方法例如去某死因后期望寿命的增量、减寿年数(PotentialYearsofLifeLost,PYLL)都可为各死因的相对重要性提供有关权重分配的信息献率。11/17/2022医学统计学3.7常用的客观定权方法某些统计方法分析结果，可提供有关193.8组合权重及其计算方法组合权重(combinedweight)当评价指标可分层时，即某项或某几项评价指标可再分为次级评价指标时，则次级评价指标的权重既应考虑其本身在所有次级评价指标中的权重分配，又要考虑其高层评价指标在所有评价指标中的权重分配。组合权重有两种求法：代数和法乘积法

11/17/2022医学统计学3.8组合权重及其计算方法组合权重(combinedw20组合权重计算表11/17/2022医学统计学组合权重计算表11/10/2022医学统计学213.9权重估计注意事项权重估计仍不是很完美，权重估计结果应满足专业解释；尽量在专业领域中寻找专业评分方法；尽量排除试验者和受试者的主观性，尽量选用客观方法；采用多种方法进行权重，在获得较为满意的专业解释的基础上，优先考虑多个方法同时选入的指标。11/17/2022医学统计学3.9权重估计注意事项权重估计仍不是很完美，权重估计结果22几种常用综合评价方法现有的统计方法：主要为多元统计方法，如多元回归、逐步回归分析、判别分析、因子分析、时间序列分析等。模糊多元分析方法：由模糊数学发展而来，包括模糊聚类、模糊判别、模糊综合评价等方法。3．简易方法：主要包括综合评分法、综合指数法、层次分析法、Topsis法、秩和比法等。

特点：①简单实用；②适用于各种资料；③存在一定的局限性。11/17/2022医学统计学几种常用综合评价方法现有的统计方法：主要为多元统计方法，234.1层次分析法概念

层次分析法(AnalyticHierarchyProcess,简称AHP)：由美国科学家T.L.Saaty于20世纪70年代提出,是用系统分析的方法，对评价对象依评价目的所确定的总评价目标进行连续性分解,得到各级（各层）评价目标，并以最下层指标作为衡量目标达到程度的评价指标。然后依据这些指标计算出一综合评分指数对评价对象的总评价目标进行评价，依其大小来确定评价对象的优劣等级。11/17/2022医学统计学4.1层次分析法概念层次分析法(AnalyticH244.2层次分析法示例例4：拟采用层次分析法建立一个评价综合医院工作质量的综合指标，并采用该指标对某市6所综合医院的工作质量进行综合评价。医院工作质量综合评价的基本步骤：

1）对总评价目标进行连续性分解以得到不同层次的评价目标，将各层评价目标用图有机地标示出来，即建立目标树图，见图1。

11/17/2022医学统计学4.2层次分析法示例例4：拟采用层次分析法建立一个评价综254.3建立目标图11/17/2022医学统计学4.3建立目标图11/10/2022医学统计学264.4计算权重系数2)对目标树自上而下分层次一一对比打分，建立成对比较判断优选矩阵。各层评分标准见表3,表4为第一层子目标成对比较判断优选矩阵。表3目标树图各层次评分标准

对比打分相对重要程度

说

明1同等重要

两者对目标的贡献相同3略为重要

根据经验一个比另一个评价稍有利5基本重要

根据经验一个比另一个评价更为有利7确实重要

一个比另一个评价更有利，且在实践中证明9绝对重要

重要程度明显两相邻程度的中间值

需要折衷时采用表4第一层子目标成对比较判断优选矩阵

医疗工作护理工作膳食供应医疗工作1(a11)3(a12)5(a13)护理工作1/3(a12)1(a22)3(a23)膳食供应1/5(a13)1/3(a23)1(a33)11/17/2022医学统计学4.4计算权重系数2)对目标树自上而下分层次一一对比274.4计算权重系数(续1)(2)按公式计算初始权重系数得(3)按公式计算归一化权重系数得

用同样方法可获得其他分层中各项目指标的权重系数，现以医疗工作一项为例说明，见表5。11/17/2022医学统计学4.4计算权重系数(续1)(2)按公式284.4计算权重系数(续2)表5医疗工作第二层、第三层子目标权重系数

层

次评价目标及权重系数

第二层医疗制度医疗质量病床使用

0.16340.53960.2970第三层疗

效重症收容

0.66700.3330(4)计算各个评价指标的组合权重系数，见图2。膳食供应优良率的组合权重系数C1=0.1047护理制度优良执行率的组合权重系数C2=0.2583……

治疗有效率的组合权重系数C6=0.229211/17/2022医学统计学4.4计算权重系数(续2)表5医疗工作第二层、第294.4计算权重系数(续3)图2乘积法求各层次评价指标的组合权重11/17/2022医学统计学4.4计算权重系数(续3)图2乘积法求各层次评价指标304.5求综合评分指数(5)对评价对象的总评价目标进行综合评估。综合评分指数GI的计算公式如下：其中Pi为第i个评价指标的测量值，ｍ为评价指标的个数。例4某市有6所综合医院，试对其医院工作质量进行综合评价,医院的6项评价指标分别为病床使用率(P1)95%，治疗有效率(P2)88.1%，重症收容率(P3)15.4%，医疗制度执行优良率(P4)74.7%，护理制度执行优良率(P5)54.7%，膳食供应优良率(P6)41.3%,其综合评分指数为：其他医院综合评分指数GI的计算结果见表6。

11/17/2022医学统计学4.5求综合评分指数(5)对评价对象的总评价目标进行综合314.5求综合评分指数(续1）由表6工作质量顺位可见，A医院工作质量最佳，D医院工作质量最差。表6某市6所医院工作质量的综合评价表

评价指标

组合权重

医院

ABCDEF病床使用率0.189295.092.094.895.689.177.4治疗有效率0.229288.191.290.094.093.692.2重症收容率0.114515.48.37.93.19.53.7医疗制度执行优良率0.104174.753.461.950.061.967.1护理制度执行优良率0.258354.720.726.120.027.435.5膳食供应优良率0.104741.341.422.820.034.030.3综合评分指数66.254.555.052.556.555.5工作质量顺位15462311/17/2022医学统计学4.5求综合评分指数(续1）由表6工作质量顺位可见，A医324.6层次分析法评价1、应用层次分析法时，注意在计算归一化权重系数后，应检验所计算得出的权重系数是否符合逻辑。通常用一致性指标检验该项目的相对优先顺序有无逻辑混乱，一般认为，当CI<0.10时，可能无逻辑混乱，即计算得的各项权重可以接受。按下述公式可计算

一致性指标：其中m为受检验层次的子目标数，为最大特征根,为该层子目标成对比较判断优选矩阵的特征根。11/17/2022医学统计学4.6层次分析法评价1、应用层次分析法时，注意在计算归一334.6层次分析法评价（续1）

2、为了度量不同阶判断矩阵是否具有满意的一致性，我们还需引入判断矩阵的平均随机一致性指标值。对于1，2阶判断矩阵，只是形式上的，因为1，2阶判断矩阵总具有完全一致性。当阶数大于2时，判断矩阵一致性指标与同阶平均随机一致性指标之比称为随机一致性比率，记为CR，其计算公式为：如本例第一层：11/17/2022医学统计学4.6层次分析法评价（续1）2、为了度量不同阶判断矩阵344.6层次分析法评价（续2）对于1～9阶判断矩阵，RI值见表7。表71～9阶平均随机一致性指标的取值

阶数

123456789RI0.000.000.580.901.121.241.321.411.45当CR＜0.10时，即认为判断矩阵具有满意的一致性，否则就需要调整判断矩阵，并使之具有满意的一致性。以本例第一层为例：认为第一层子目标各项权重判断无逻辑错误。依此类推，运用此法逐步检测每一层子目标权重系数，判断它们是否都合乎逻辑。11/17/2022医学统计学4.6层次分析法评价（续2）对于1～9阶判断矩阵，RI值355.1Topsis法Topsis法（Topsismethod）:是系统工程中有限方案多目标决策分析的一种常用方法，可用于效益评价、卫生决策和卫生事业管理等多个领域。本法对样本资料无特殊要求，使用灵活简便，故应用日趋广泛。11/17/2022医学统计学5.1Topsis法Topsis法（Topsisme365.2Topsis法示例例5

5个煤矿煤尘对呼吸系统危害的研究资料见表8,拟综合粉尘几何平均浓度、游离SiO2含量和煤肺患病率3个指标进行综合评价。表85个煤矿测定结果与煤肺患病率

厂矿

粉尘几何平均浓度（mg/m3）

游离SiO2含量（%）

煤肺患病率（%）

白沙湘永煤矿

50.84.38.7沈阳田师傅煤矿

200.04.97.2抚顺龙凤煤矿

71.42.55.0大同同家山煤矿

98.53.72.7扎诺尔南山煤矿

10.22.40.311/17/2022医学统计学5.2Topsis法示例例55个煤矿煤尘对呼吸375.3Topsis法基本步骤1、评价指标同趋势化，Topsis法进行评价时，要求所有指标变化方向一致（即所谓同趋势化），将高优指标转化为低优指标，或将低优指标转化为高优指标，通常采用后一种方式。转化方法常用倒数法，即令原始数据中低优指标Xij(i=1,2…，n；j=1,2…m),通过

变换而转化成高优指标，然后建立同趋势化后的原始数据表，如表9。表9指标转化值

厂矿

粉尘几何平均浓度（mg/m3）

游离SiO2含量（%）

煤肺患病率（%）

白沙湘永煤矿

1.968523.255811.4943沈阳田师傅煤矿

0.500020.408213.8889抚顺龙凤煤矿

1.400640.000020.0000大同同家山煤矿

1.015227.027037.0370扎诺尔南山煤矿

9.803941.666733.333311/17/2022医学统计学5.3Topsis法基本步骤1、评价指标同趋势化，Top385.3Topsis法基本步骤（续1）2、对同趋势化后的原始数据矩阵进行归一化处理，并建立相应矩阵。其指标转换公式为：或式中Xij表示第i个评价对象在第j个指标上的取值，

表示经倒数转换后的第i个评价对象在第j个指标上的取值。由此得出经归一化处理后的A矩阵为：如本例对白沙湘永煤矿粉尘几何平均浓度归一化处理如下：11/17/2022医学统计学5.3Topsis法基本步骤（续1）2、对同趋势化后的原395.3Topsis法基本步骤（续2）表10归一化矩阵值

厂矿

粉尘几何平均浓度（mg/m3）

游离SiO2含量（%）

煤肺患病率（%）

白沙湘永煤矿

0.19370.32810.0342沈阳田师傅煤矿

0.04920.28790.0413抚顺龙凤煤矿

0.13780.56430.0594大同同家山煤矿

0.09990.38130.1101扎诺尔南山煤矿

0.96490.58790.9907归一化处理后的结果矩阵见下表：3．据A矩阵得到最优值向量和最劣值向量，即有限方案中的最优方案和最劣方案为：11/17/2022医学统计学5.3Topsis法基本步骤（续2）表10归405.3Topsis法基本步骤（续3）4.分别计算诸评价对象所有各指标值与最优方案及最劣方案的距离与：式中与分别表示第i个评价对象与最优方案及最劣方案的距离；表示某个评价对象i在第j个指标的取值。

例如，大同同家山煤矿如下，其余结果见表11。11/17/2022医学统计学5.3Topsis法基本步骤（续3）4.分别计算诸评价41表11不同厂矿指标值与最优值的相对接近程度及排序结果

厂矿排序结果

白沙湘永煤矿1.22580.15000.10673沈阳田师傅煤矿1.35270.00710.00525抚顺龙凤煤矿1.24570.29140.18962大同同家山煤矿1.25150.13060.09454扎诺尔南山煤矿0.00001.35771.000015.3Topsis法基本步骤（续4）5．计算诸评价对象与最优方案的接近程度Ci，其计算公式如下：

在0与1之间取值，愈接近1，表示该评价对象越接近最优水平；反之，愈接近0，表示该评价对象越接近最劣水平。

6．按大小将各评价对象排序，值越大，表示综合效益越好。如表11所示，以扎诺尔南山煤矿最优，即对呼吸系统危害最小；而沈阳田师傅煤矿最劣。11/17/2022医学统计学表11不同厂矿指标值与最优值的相对接近程度及排序结果425.4加权Topsis法以上例子是在等权或没有考虑权重的情况下计算所得的，当我们进行权重估计时，各指标与最优方案及最劣方案距离的计算公式应改为：其中为第j个指标的权重系数。11/17/2022医学统计学5.4加权Topsis法以上例子是在等权或没有考虑权重的43基本思想：基于归一化后的原始数据矩阵，找出有限方案中的最优方案和最劣方案（分别用最优向量和最劣向量表示），然后分别计算诸评价对象与最优方案和最劣方案间的距离，获得各评价对象与最优方案的相对接近程度，以此作为评价优劣的依据。基本步骤：①指标同趋势化；②归一化处理；③寻找最优方案与最劣方案；④计算评价对象与最优方案和最劣方案间的距离；

⑤计算各评价对象与最优方案的接近程度；⑥依接近程度对各评价对象进行排序，确定评价效果。

5.5Topsis法总结11/17/2022医学统计学基本思想：基于归一化后的原始数据矩阵，找出有限方案中的最优方446.1秩和比法的概念秩和比（RankSumRatio，RSR）指行（或列）秩次的平均值，是一个非参数统计量，具有0~1连续变量的特征。在综合评价中，秩和比综合了多项评价指标的信息，表明多个评价指标的综合水平，RSR值越大越优。

秩和比法指利用RSR进行统计分析的一组方法。其基本思想是：在一个行列矩阵中，通过秩转换，获得无量纲统计量；在此基础上，运用参数统计分析的概念与方法，研究的分布；以RSR值对评价对象的优劣直接排序或分档排序。11/17/2022医学统计学6.1秩和比法的概念秩和比（RankSumRatio，456.2RSR的计算公式1．在一个n行(n个评价对象)m列（m个评价指标）矩阵中，RSR的计算公式为:

式中ί=1，2…n;j=1,2…m,第i行第j列元素的秩。

2．当各评价指标的权重不同时，计算加权秩和比，其计算公式为：其中，i=1，2…n;j=1,2…m,为第i行第j列元素的秩，为第j个评价指标的权重，。11/17/2022医学统计学6.2RSR的计算公式1．在一个n行(n个评价对象)466.3秩和比法基本步骤示例

例6

某省10个地区孕产妇保健工作的产前检查率X1(%)、孕产妇死亡率X2(1/10万)、围产儿死亡率X3(‰)资料见表13第(1)、(3)、(5)栏，拟综合上述3个指标进行综合评价。11/17/2022医学统计学6.3秩和比法基本步骤示例例6某省10个地区孕产妇47秩和比法的基本步骤：（1）列原始数据表：将个评价对象的个评价指标列成行列的原始数据表，见表13第(1)、(3)、(5)栏。（2）编秩：编出每个指标各对象的秩，其中高优指标从小到大编秩，低优指标从大到小编秩，同一指标数值相同者编平均秩。根据专业知识，产前检查率为高优指标，指标值越大其秩越高；孕产妇死亡率、围产儿死亡率均为低优指标，指标值越大其秩越低。编秩结果见表13第(2)、(4)、(6)栏。6.3秩和比法基本步骤示例(续1)11/17/2022医学统计学秩和比法的基本步骤：6.3秩和比法基本步骤示例(续1)11486.3秩和比法基本步骤示例(续2)表13某省10个地区孕产妇保健工作的各项指标值地区编码

产前检查率（%）孕产妇死亡率（1/10万）

围产儿死亡率（‰）RSR排序X1R1X2R2X3R3(1)(2)(3)(4)(5)(6)(7)A99.541060.27216.1560.60004B96.52759.67320.1020.40008C99.36943.91715.6070.76672D92.83358.99417.0450.40008E91.71235.40815.0180.60004F95.35544.71613.9390.66673G96.09649.81517.4340.50007H99.27831.69913.89100.90001I94.76422.911019.8730.56676J84.80181.49123.6310.10001011/17/2022医学统计学6.3秩和比法基本步骤示例(续2)表13某省1496.3秩和比法基本步骤示例(续3)（3）计算秩和比

根据RSR值对评价对象的优劣进行直接排序：根据以下公式计算孕产妇保健工作的RSR，结果见表12第(7)栏。例如对A地区：余类推。据第(7)栏数据，可直接对10个地区的孕产妇保健工作排序。显然，孕产妇保健工作综合评价相对最劣的为J地区，其次为B、D地区，相对最优的为H地区。11/17/2022医学统计学6.3秩和比法基本步骤示例(续3)（3）计算秩和比根据506.3秩和比法基本步骤示例(续4)（4）确定RSR的分布

RSR的分布是指用概率单位Probit表达的值特定的向下累计频率。其方法为：

①编制RSR频数分布表，列出各组频数ƒ，计算各组累计频数∑

ƒ；

②确定各组RSR的秩次范围R及平均秩次；

③计算向下累计频率；

④将百分率P换算为概率单位Probit，Probit为百分率P对应的标准正态离差u（可查第520页u界值表）加5。例如百分率P=0.0250对应的标准正态离差u=-1.96，其相应的概率单位Probit为5-1.96=3.04；百分率P=0.9750对应的标准正态离差u=1.96，其相应的概率单位Probit为5+1.96=6.96。孕产妇保健工作的RSR分布见表14。

11/17/2022医学统计学6.3秩和比法基本步骤示例(续4)（4）确定RSR的分布516.3秩和比法基本步骤示例(续5)（5）计算回归方程：以累计频率所对应的概率单位值Probit为自变量，以RSR值为应变量，计算回归方程：

Probit。表14RSR值的分布

RSRķ

ƒRProbit

(1)(2)(3)(4)(5)(6)(7)0.1000111110.03.720.4000232,32.525.04.330.5000144440.04.750.5667155550.05.000.6000276,76.565.05.390.6667188880.05.840.7667199990.06.280.9000110=n101097.5※6.9611/17/2022医学统计学6.3秩和比法基本步骤示例(续5)（5）计算回归方程：以累526.3秩和比法基本步骤示例(续6)本例据表14第(1)、(7)栏求得方程:

：（6）分档排序

根据值对评价对象进行分档排序。分档依据为标准正态离差，其范围以设定-3~3为宜。常用分档情况下的百分位数临界值及其对应的概率单位Probit值见表15。依据各分档情况下概率单位Probit值，按照回归方程推算所对应的RSR估计值对评价对象进行分档排序。具体分档数由研究者根据实际情况决定。11/17/2022医学统计学6.3秩和比法基本步骤示例(续6)本例据表14第(1)、(53

本例将孕产妇保健工作拟分上、中、下三档。参照表15，以相应概率单位Probit值代入上述回归方程推算所对应的估计值。根据估计值进行分档排序。如本例J地区的RSRj=0.1000，概率单位Probit=3.72；代入上述回归方程得：因此J地区分档等级为下，余类推，结果见表16。6.3秩和比法基本步骤示例(续7)11/17/2022医学统计学本例将孕产妇保健工作拟分上、中、下三档。参照54表15常用分档情况下的百分位数Pχ临界值及其对应的概率单位Probit值

分档数

百分位数Pχ

Probit

分档数

百分位数PχProbit

3<P15.866<46<P2.275<3

P15.866～4～

P2.275～3～

P84.134～6～

P615.866～4～4<P6.681<3.5

P50～5～

P6.681～3.5～

P84.134～6～

P50～5～

P97.725～7～

P93.319～6.5～7<P1.618<2.865<P3.593<3.2

P1.618～2.86～

P3.593～3.2～

P10.027～3.72～

P27.425～4.4～P33.360～4.57～

P72.575～5.6～P67.003～5.44～

P96.407～6.8～P89.973～6.28～

P98.382～7.14～6.3秩和比法基本步骤示例(续8)11/17/2022医学统计学表15常用分档情况下的百分位数Pχ临界值及其对应的概556.4秩和比法基本步骤示例(续9)表16某省10个地区孕产妇保健工作分档排序等级

Probit

分档排序结果

下＜＜4＜0.2774J中~4~0.2774~B，D，A，E，G，I，F上＞6~＞0.7214C，H

由表16分档排序结果可看出，10个地区中孕妇保健工作做得最差的为J地区，中档为B、D、A、E、G、I、F，而C、H为上档。11/17/2022医学统计学6.4秩和比法基本步骤示例(续9)表16某省10个地561.无误差的估计方法:只能进行描述,无法进行统计推断2.评价指标和权重的不确定性3.各种评价方法对同一批评价对象结果不一致综合评价方法的局限性：11/17/2022医学统计学1.无误差的估计方法:只能进行描述,无法进行统计推断2.评价57子目标评价指标图5医院工作质量评价目标树图膳食质量医院工作质量膳食供应医疗工作护理工作医疗制度护理制度医疗质量病床使用疗效重症收容重症收容率供应优良率执行优良率有效率病床使用率执行优良率评价总目标11/17/2022医学统计学子目标图5医院工作质量评价目标树图膳食质量医院工作质量58例1：住房分配的决策某高校现有2名职工申请一套住房，校方将参考以下几个指标进行分配。职称/职务工龄家庭人口独生子女双职工A教授教授20年4人是否B处长处长20年6人否是赋值教授=10分处长=8分每年计1分每人计1分是=3分否=0分是=2分否=0分表1某高校职工住房分配个人情况及赋值11/17/2022医学统计学例1：住房分配的决策职称/职务工龄家庭人口独生子女双职工A教59住房分配方案评价指标体系名称主要指标附加指标职称/职务工龄家庭人口独生子女双职工赋值教授=10分处长=8分每年计1分每人计1分是=3分否=0分是=2分否=0分方案1内容√√√√权重0.50.30.2方案2内容√√√√权重0.20.30.5方案3内容√√√√权重0.50.30.2方案4内容√√√√权重0.20.30.5方案5内容√√√权重0.50.30.2方案6内容√√√权重0.20.30.5表2不同的住房分配方案的选择11/17/2022医学统计学住房分配方案评价指标体系名称主要指标附加指标职称/职务工龄家60指标名称职称/职务工龄家庭人口独生子女双职工综合得分个人情况A教授教授20年4人是否B处长处长20年6人否是方案1A教授10×0.520×0.34×0.2314.8B处长8×0.520×0.36×0.2011.2方案2A教授10×0.220×0.34×0.5313.0B处长8×0.220×0.36×0.5010.6方案3A教授10×0.520×0.34×0.2011.8B处长8×0.520×0.36×0.2213.2方案4A教授10×0.220×0.34×0.5010.0B处长8×0.220×0.36×0.5212.6方案5A教授10×0.520×0.34×0.211.8B处长8×0.520×0.36×0.211.2方案6A教授10×0.220×0.34×0.510.0B处长8×0.220×0.36×0.510.6表36种不同住房分配方案的结果11/17/2022医学统计学指标名称职称/职务工龄家庭人口独生子女双职工个人情况A教授教61图16种不同住房分配方案的结果11/17/2022医学统计学图16种不同住房分配方案的结果11/10/2022625种方法对我国碘缺乏病防治效果的综合评价

9个评价指标：X1（合格碘盐食用率），X2（尿碘中位数），…,X9(甲肿率).

31个评价对象:北京,天津,…,湖南,…。11/17/2022医学统计学5种方法对我国碘缺乏病防治效果的综合评价9个评价指标：X163

省市RSR法密切值法TOSISI法灰色关联法改进灰色关联法RSR排序C值排序C值排序关联值排序关联值排序北京0.655991.136780.6623170.7998100.788615天津0.5323181.2280120.6758160.7463180.755018吉林0.5394172.7840240.6434180.7587170.747319江西0.711530.747350.766780.833460.81668湖南0.6022111.2157100.728990.809980.86762……………河北0.811810.509120.819720.892710.83605内蒙0.690061.051860.777960.850450.90611江苏0.790320.000010.818930.857640.84064安徽0.664971.2567130.899210.887520.861135种方法对我国碘缺乏病防治效果的综合评价结果11/17/2022医学统计学省市RSR法密切值法64谢谢！11/17/2022医学统计学谢谢！11/10/2022医学统计学65

常用综合评价方法

SyntheticalEvaluation

第二十三章11/17/2022医学统计学

常用综合评价方法

SyntheticalEvalua66ContentConcept

Process

Selectionandweightestimationofevaluationindex

Analytichierarchyprocess,AHPTopsisRanksumratio,RSR11/17/2022医学统计学ContentConcept11/10/2022医学统计学67例如，某人英语考试成绩58分是否对照某标准判断此结果是否评价（evaluation)仅是描述，反映现状11/17/2022医学统计学例如，某人英语考试成绩58分是否对照某标准判断此结果是否评681.基本概念Syntheticalevaluation综合评价Definition:利用多项指标对某个评价对象的某种属性进行定性、定量评估，或者对多个评价对象的属性进行定性、定量评估，可对优劣顺序排序。Application:对比，择优Purpose:支持决策（基础、预防、临床、管理中广泛应用）11/17/2022医学统计学1.基本概念Syntheticalevaluation综692.1综合评价的一般步骤对某事件进行多因素综合评价的过程，实质上就是科学研究与决策的过程，原则上应包括设计、收集资料和分析资料几个基本阶段，实施中应着重注意以下几个基本环节。①选择恰当的评价指标(evaluationindicator)②确定各评价指标权重③合理确定各单个指标的评价等级(evaluationgrade)及其界限④建立综合评价模型(syntheticalevaluationmodel)⑤确定多指标综合评价的等级数量界限，并根据实践对已建立模型考察、修改及完善。研究目的11/17/2022医学统计学2.1综合评价的一般步骤对某事件进行多因素综合评价的过程，702.1例：学生综合测评（综合评分）评价指标：德育总分、智育总分、体育总分（加分：CET）权重：方案1：德育0.3智育0.6体育0.1方案2：德育0.1智育0.8体育0.1方案3：德育0.3智育0.6体育0.1加分评价模型：评分法、总分为100，加分不封顶，累加法。评价结果:

学生甲：德育90智育70体育80学生乙：德育70智育80体育7011/17/2022医学统计学2.1例：学生综合测评（综合评分）评价指标：德育总分、智育总7111/17/2022医学统计学11/10/2022医学统计学722.2综合评价一般步骤示例研制新生儿缺氧状况的Apgar评分方法研究目的据专业知识，选择5个指标①心率②呼吸③肌张力④反射⑤皮肤颜色

5个指标具有相等权重选择指标确定权重以累加法累计总分：8～10分为正常；4～7分为轻度缺氧；0～3分为重度缺氧。

确定指标评价等级及界限建立模型11/17/2022医学统计学2.2综合评价一般步骤示例研制新生儿缺氧状况的Apgar733.1评价指标的基本要求基本要求①代表性：各层次指标能最好地表达所代表的层次。②确定性：指指标值确定，其高低在评价中有确切含义。③区别能力/灵敏性：即指标值有一定的波动范围，而且其高低在评价中有确切的含义。④独立性：即选入的指标各有所用，相互不能替代。选择综合评价指标11/17/2022医学统计学3.1评价指标的基本要求基本要求①代表性：各层次指标743.2系统分析法及文献资料

分析优选法筛选指标缺乏有关历史资料，或指标难以数量化时系统分析法(systematicanalysismethod)：是一种常用的凭经验挑选指标的方法，首先将所有备选指标按系统（或属性、类别）划分，再通过座谈或填调查表的方法获得对各指标的专家评分，确定主次，再从各系统内挑选主要的指标作为评价指标。

文献资料分析优选法：即全面查阅有关评价指标设置的文献资料，分析各指标的优缺点并加以取舍。

11/17/2022医学统计学3.2系统分析法及文献资料

分析优选法筛选指标缺乏有关历史753.3常用客观筛选指标方法逐个指标进行假设检验的方法：是在掌握有关历史资料基础上，依照可能的评价结果将评价对象分组，并对各指标进行假设检验，挑选有统计意义的指标作为评价指标。多元回归与逐步回归法：多元回归分析挑选标准化偏回归系数绝对值较大或偏回归系数假设检验有显著性的指标作为评价指标；逐步回归有自动挑选主要影响指标的功能，是目前最常用的指标挑选方法。指标聚类法：在存在众多指标的情况下，可将相似指标聚成类，再从每类中找一个典型指标作为代表，从而用少量几个典型指标作为评价指标来代表原来众多的指标建立评价模型。11/17/2022医学统计学3.3常用客观筛选指标方法逐个指标进行假设检验的方法：是在763.4指标筛选建议在实际工作中，往往综合使用多种方法进行指标筛选，在获得较为满意的专业解释的基础上，优先考虑那些被多种方法同时选入的指标。

11/17/2022医学统计学3.4指标筛选建议在实际工作中，往往综合使用多种方法进行773.5评价指标的权重估计

确定指标权重方法主观定权法客观定权法专家评分法成对比较法Saaty权重法秩和比法相关系数法其它方法模糊定权法熵权法定权带有一定的主观性，用不同方法确定的权重分配，可能不尽一致，这将导致权重分配的不确定性，最终可能导致评价结果的不确定性。因而在实际工作中，不论用哪种方法确定权重分配，都应当依赖于较为合理的专业解释。11/17/2022医学统计学3.5评价指标的权重估计确定指标权重方法主观定权法客观783.6专家评分法评分方式1）专家个人判断即分别征求专家个人意见，在专家各自单独给评价指标的相对重要性打分的基础上，进行统计处理，以确定各指标的权重。

优点：专家打分时不受外界影响，没有心理压力，可以最大限度地发挥个人创造能力。

缺点：仅凭个人判断，易受专家知识深度与广度的影响，难免带有片面性。

2）专家会议即召开所有被挑选专家，以集体讨论的方式进行评分，然后再以统计手段确定各指标的权重。

优点：可以交换意见，相互启发，弥补个人之不足。

缺点：主要表现在易受心理因素的影响，如屈从于权威和大多数人的意见，受劝说性意见的影响，不愿公开修正已发表的意见等等。11/17/2022医学统计学3.6专家评分法评分方式1）专家个人判断即分796个专家对4个评价指标的评价结果得分不考虑专家权威程度：权重分别是0.41,0.31,0.18,0.1011/17/2022医学统计学6个专家对4个评价指标的评价结果得分不考虑专家权威程度：权重803.7专家评分法可靠性评估常用指标

在实际工作中，常用专家的擅长系数和专家意见一致性系数等指标来估计专家评分方法所定权重分配的相对合理性。1)．擅长系数：某一评估专家的水平可用对擅长领域中所提问题作出正确应答的概率，即所谓“擅长系数”。计算公式为：

其中，q为擅长系数,p为错答率。理想的“绝对正确”评估专家，p=0,q=1。通常在选择评估专家时,其擅长系数q不应低于0.80。11/17/2022医学统计学3.7专家评分法可靠性评估常用指标816个专家对4个评价指标的评价结果的一致性系数计算表11/17/2022医学统计学6个专家对4个评价指标的评价结果的一致性系数计算表11/10822）专家意见一致性系数:设参与权重评估的专家数为m，待评价指标数为n，则反映m个专家对全部n个指标权重评估的一致程度的指标称为一致性系数，以w表示,其计算公式为：一致性系数在0～1之间取值，越接近于1，表示所有专家对全部评价指标评分的协调程度越好。当然，一致性系数越大越好，这说明各评价因子的权重估计较为稳定可靠。当有相同秩时，要对w进行校正：式中

11/17/2022医学统计学2）专家意见一致性系数:设参与权重评估的专家数为m，待评价833.7常用的客观定权方法某些统计方法分析结果，可提供有关因素权重分配的客观信息:多元回归分析及逐步回归分析中，各自变量的标准化偏回归系数值以及由此而推算的贡献率；计数资料判别分析中的指数，计量资料判别分析中各因子的贡献率；主成分分析中得到的因子载荷和贡献率。某些特定的统计方法例如去某死因后期望寿命的增量、减寿年数(PotentialYearsofLifeLost,PYLL)都可为各死因的相对重要性提供有关权重分配的信息献率。11/17/2022医学统计学3.7常用的客观定权方法某些统计方法分析结果，可提供有关843.8组合权重及其计算方法组合权重(combinedweight)当评价指标可分层时，即某项或某几项评价指标可再分为次级评价指标时，则次级评价指标的权重既应考虑其本身在所有次级评价指标中的权重分配，又要考虑其高层评价指标在所有评价指标中的权重分配。组合权重有两种求法：代数和法乘积法

11/17/2022医学统计学3.8组合权重及其计算方法组合权重(combinedw85组合权重计算表11/17/2022医学统计学组合权重计算表11/10/2022医学统计学863.9权重估计注意事项权重估计仍不是很完美，权重估计结果应满足专业解释；尽量在专业领域中寻找专业评分方法；尽量排除试验者和受试者的主观性，尽量选用客观方法；采用多种方法进行权重，在获得较为满意的专业解释的基础上，优先考虑多个方法同时选入的指标。11/17/2022医学统计学3.9权重估计注意事项权重估计仍不是很完美，权重估计结果87几种常用综合评价方法现有的统计方法：主要为多元统计方法，如多元回归、逐步回归分析、判别分析、因子分析、时间序列分析等。模糊多元分析方法：由模糊数学发展而来，包括模糊聚类、模糊判别、模糊综合评价等方法。3．简易方法：主要包括综合评分法、综合指数法、层次分析法、Topsis法、秩和比法等。

特点：①简单实用；②适用于各种资料；③存在一定的局限性。11/17/2022医学统计学几种常用综合评价方法现有的统计方法：主要为多元统计方法，884.1层次分析法概念

层次分析法(AnalyticHierarchyProcess,简称AHP)：由美国科学家T.L.Saaty于20世纪70年代提出,是用系统分析的方法，对评价对象依评价目的所确定的总评价目标进行连续性分解,得到各级（各层）评价目标，并以最下层指标作为衡量目标达到程度的评价指标。然后依据这些指标计算出一综合评分指数对评价对象的总评价目标进行评价，依其大小来确定评价对象的优劣等级。11/17/2022医学统计学4.1层次分析法概念层次分析法(AnalyticH894.2层次分析法示例例4：拟采用层次分析法建立一个评价综合医院工作质量的综合指标，并采用该指标对某市6所综合医院的工作质量进行综合评价。医院工作质量综合评价的基本步骤：

1）对总评价目标进行连续性分解以得到不同层次的评价目标，将各层评价目标用图有机地标示出来，即建立目标树图，见图1。

11/17/2022医学统计学4.2层次分析法示例例4：拟采用层次分析法建立一个评价综904.3建立目标图11/17/2022医学统计学4.3建立目标图11/10/2022医学统计学914.4计算权重系数2)对目标树自上而下分层次一一对比打分，建立成对比较判断优选矩阵。各层评分标准见表3,表4为第一层子目标成对比较判断优选矩阵。表3目标树图各层次评分标准

对比打分相对重要程度

说

明1同等重要

两者对目标的贡献相同3略为重要

根据经验一个比另一个评价稍有利5基本重要

根据经验一个比另一个评价更为有利7确实重要

一个比另一个评价更有利，且在实践中证明9绝对重要

重要程度明显两相邻程度的中间值

需要折衷时采用表4第一层子目标成对比较判断优选矩阵

医疗工作护理工作膳食供应医疗工作1(a11)3(a12)5(a13)护理工作1/3(a12)1(a22)3(a23)膳食供应1/5(a13)1/3(a23)1(a33)11/17/2022医学统计学4.4计算权重系数2)对目标树自上而下分层次一一对比924.4计算权重系数(续1)(2)按公式计算初始权重系数得(3)按公式计算归一化权重系数得

用同样方法可获得其他分层中各项目指标的权重系数，现以医疗工作一项为例说明，见表5。11/17/2022医学统计学4.4计算权重系数(续1)(2)按公式934.4计算权重系数(续2)表5医疗工作第二层、第三层子目标权重系数

层

次评价目标及权重系数

第二层医疗制度医疗质量病床使用

0.16340.53960.2970第三层疗

效重症收容

0.66700.3330(4)计算各个评价指标的组合权重系数，见图2。膳食供应优良率的组合权重系数C1=0.1047护理制度优良执行率的组合权重系数C2=0.2583……

治疗有效率的组合权重系数C6=0.229211/17/2022医学统计学4.4计算权重系数(续2)表5医疗工作第二层、第944.4计算权重系数(续3)图2乘积法求各层次评价指标的组合权重11/17/2022医学统计学4.4计算权重系数(续3)图2乘积法求各层次评价指标954.5求综合评分指数(5)对评价对象的总评价目标进行综合评估。综合评分指数GI的计算公式如下：其中Pi为第i个评价指标的测量值，ｍ为评价指标的个数。例4某市有6所综合医院，试对其医院工作质量进行综合评价,医院的6项评价指标分别为病床使用率(P1)95%，治疗有效率(P2)88.1%，重症收容率(P3)15.4%，医疗制度执行优良率(P4)74.7%，护理制度执行优良率(P5)54.7%，膳食供应优良率(P6)41.3%,其综合评分指数为：其他医院综合评分指数GI的计算结果见表6。

11/17/2022医学统计学4.5求综合评分指数(5)对评价对象的总评价目标进行综合964.5求综合评分指数(续1）由表6工作质量顺位可见，A医院工作质量最佳，D医院工作质量最差。表6某市6所医院工作质量的综合评价表

评价指标

组合权重

医院

ABCDEF病床使用率0.189295.092.094.895.689.177.4治疗有效率0.229288.191.290.094.093.692.2重症收容率0.114515.48.37.93.19.53.7医疗制度执行优良率0.104174.753.461.950.061.967.1护理制度执行优良率0.258354.720.726.120.027.435.5膳食供应优良率0.104741.341.422.820.034.030.3综合评分指数66.254.555.052.556.555.5工作质量顺位15462311/17/2022医学统计学4.5求综合评分指数(续1）由表6工作质量顺位可见，A医974.6层次分析法评价1、应用层次分析法时，注意在计算归一化权重系数后，应检验所计算得出的权重系数是否符合逻辑。通常用一致性指标检验该项目的相对优先顺序有无逻辑混乱，一般认为，当CI<0.10时，可能无逻辑混乱，即计算得的各项权重可以接受。按下述公式可计算

一致性指标：其中m为受检验层次的子目标数，为最大特征根,为该层子目标成对比较判断优选矩阵的特征根。11/17/2022医学统计学4.6层次分析法评价1、应用层次分析法时，注意在计算归一984.6层次分析法评价（续1）

2、为了度量不同阶判断矩阵是否具有满意的一致性，我们还需引入判断矩阵的平均随机一致性指标值。对于1，2阶判断矩阵，只是形式上的，因为1，2阶判断矩阵总具有完全一致性。当阶数大于2时，判断矩阵一致性指标与同阶平均随机一致性指标之比称为随机一致性比率，记为CR，其计算公式为：如本例第一层：11/17/2022医学统计学4.6层次分析法评价（续1）2、为了度量不同阶判断矩阵994.6层次分析法评价（续2）对于1～9阶判断矩阵，RI值见表7。表71～9阶平均随机一致性指标的取值

阶数

123456789RI0.000.000.580.901.121.241.321.411.45当CR＜0.10时，即认为判断矩阵具有满意的一致性，否则就需要调整判断矩阵，并使之具有满意的一致性。以本例第一层为例：认为第一层子目标各项权重判断无逻辑错误。依此类推，运用此法逐步检测每一层子目标权重系数，判断它们是否都合乎逻辑。11/17/2022医学统计学4.6层次分析法评价（续2）对于1～9阶判断矩阵，RI值1005.1Topsis法Topsis法（Topsismethod）:是系统工程中有限方案多目标决策分析的一种常用方法，可用于效益评价、卫生决策和卫生事业管理等多个领域。本法对样本资料无特殊要求，使用灵活简便，故应用日趋广泛。11/17/2022医学统计学5.1Topsis法Topsis法（Topsisme1015.2Topsis法示例例5

5个煤矿煤尘对呼吸系统危害的研究资料见表8,拟综合粉尘几何平均浓度、游离SiO2含量和煤肺患病率3个指标进行综合评价。表85个煤矿测定结果与煤肺患病率

厂矿

粉尘几何平均浓度（mg/m3）

游离SiO2含量（%）

煤肺患病率（%）

白沙湘永煤矿

50.84.38.7沈阳田师傅煤矿

200.0