RCT文献质量评价讲义专家讲座

RCT文件质量评价RCT文献质量评价讲义专家讲座第1页严格文件评价

－－证据质量RCT文献质量评价讲义专家讲座第2页Meta-分析基本步骤提出问题，制订研究计划检索资料选择符合纳入标准研究纳入研究质量评价提取纳入文件数据信息资料统计学处理敏感性分析形成结果汇报RCT文献质量评价讲义专家讲座第3页Toolsforassessingqualityandriskofbias

Scales（评分）,inwhichvariouscomponentsofqualityarescoredandcombinedtogiveasummaryscore;Checklists（清单、分类）,inwhichspecificquestionsareasked

RCT文献质量评价讲义专家讲座第4页Cochranehandbook5_0_1第八章:Table8.5.c:Criteriaforjudgingriskofbiasinthe‘Riskofbias’assessmenttoolRCT文献质量评价讲义专家讲座第5页AssessmentofriskofbiasSequencegeneration（随机分配方案产生）Allocationconcealment（分配方案隐藏）Blinding（盲法）Incompleteoutcomedata（结果数据不完整）Selectiveoutcomereporting（选择性汇报结果）Otherbias（其它影响真实性原因：无其它偏倚）RCT文献质量评价讲义专家讲座第6页Foreachentry,ananswer‘Yes’indicatesalowriskofbias,andananswer‘No’indicateshighriskofbias,

and‘Unclear’indicatesunclearorunknownriskofbias.RCT文献质量评价讲义专家讲座第7页(1)Wastheallocationsequenceadequatelygenerated?Lowriskofbias:arandomcomponentinthesequencegenerationprocesswasreported.Highriskofbias:anon-randomcomponentinthesequencegenerationprocesswasreported.Uncertainriskofbias:insufficientinformationaboutthesequencegenerationprocesstopermitjudgmentof'Yes'or'No'.RCT文献质量评价讲义专家讲座第8页（1）随机分配方案产生

正确：采取随机数字表、计算机产生随机数字、抛硬币、掷骰子或抽签等方法不正确：按患者生日、住院日或住院号等末尾数字奇数或偶数交替分配方法；或者依据医生、患者、试验检验结果或干预办法可取得性分配患者入组不清楚：依据干预办法可取得性文中信息不详，难以判断正确是否

RCT文献质量评价讲义专家讲座第9页(2)

Wasallocationadequatelyconcealed?Lowriskofbias:concealedallocationwascompletedbyclearlydescribedmethodssothateitherparticipantsorinvestigatorscouldnotforeseeassignment.Highriskofbias:participantsorinvestigatorsenrollingparticipantscouldpossiblyforeseeassignmentsUncertainriskofbias:insufficientinformationtopermitjudgmentof'Yes'or'No'ofconcealmentRCT文献质量评价讲义专家讲座第10页（2）分配方案隐藏

完善：中心随机，包含采取电话、网络和药房控制随机按次序编号或编码相同容器按次序编码、密封、不透光信封不完善：公开随机分配序列如列出随机数字未密封、透光或未按次序编号信封交替分配依据住院号、生日等末尾数字奇数或偶数不清楚：未提及分配方案隐藏提供信息不能判断是否完善，如使用信封，但未描述是否按次序编码、密封、不透光RCT文献质量评价讲义专家讲座第11页随机分配方案隐藏随机分配受试对象过程中，受试对象和选择合格受试对象研究人员不能预先知道随即分配方案，目标在于预防选择性偏倚未隐藏分配方案或分配方案隐藏不完善试验，经常夸大治疗效果（30％－41％）RCT文献质量评价讲义专家讲座第12页(3)

Wasknowledgeoftheallocatedintervention(s)adequatelypreventedduringthestudy?

（Blinding?）

Lowriskofbias:blindingofparticipantsandkeystudypersonnel,ortheoutcomemeasurementwasnotlikelytobeinfluencedbylackofblinding;Highriskofbias:noblindingofparticipantsandkeystudypersonnel,ortheoutcomemeasurementwaslikelytobeinfluencedbylackofblindingUncertainriskofbias:insufficientinformationtopermitjudgmentof"Yes"or"No"ofblindingRCT文献质量评价讲义专家讲座第13页盲法(Blindness)临床试验中，试验研究者或受试者，都不知道试验对象分配情况，即不知道受试对象在试验组还是对照组，接收是试验办法还是对照办法。盲法主要用于研究办法实施者、结果测量，也可用于资料分析和汇报目标：防止测量性偏倚RCT文献质量评价讲义专家讲座第14页盲法分类单盲（Single－blind）：只是受试对象不知道他们是在试验组或对照组。检验人员、病理医师等不知道受试对象诊疗情况也属于单盲。双盲（Double-blind）：受试对象和试验办法实施者双方都不知道干预办法分组情况。三盲（Triple-blind）：受试对象、研究者和资料分析或汇报者都不知道受试对象分配在哪一组和接收哪一个干预办法。RCT文献质量评价讲义专家讲座第15页不能把“分配隐藏”与盲法混同分配隐藏实质是产生随机序列者和决定分配序别者不能参加纳入受试者，也不宜参加以后试验过程，尤其不能参加结果测量。隐蔽分组（分配隐藏）和盲法概念、实施与汇报吴泰相刘关键中国循证医学杂志,,7(3):222~225.RCT文献质量评价讲义专家讲座第16页盲法正确：没有采取盲法，但结果判断和测量不会受影响对患者和主要研究人员采取盲法，且盲法不会被破坏对结果测量者采取盲法，未对患者和主要研究人员采取盲法，但不会造成偏倚不正确：未采取盲法或盲法不完善，结果判断或测量会受影响对患者和主要研究人员采取盲法，但盲法可能被破坏对患者和主要研究人员均未采取盲法，可能造成偏倚：不清楚信息不全，难以判断是否正确文中未提及盲法RCT文献质量评价讲义专家讲座第17页(4)

Wereincompleteoutcomedataadequatelyaddressed?Lowriskofbias:nomissingoutcomedata,orthedataexistbutdonothaveanimpactonobservedclinicaleffects.Highriskofbias:missingoutcomedatadoexistandhaveanimpactonobservedclinicaleffects.Uncertainriskofbias:insufficientreportingofattritionandexclusionstopermitjudgmentof"Yes"or"No"ofmissingdataanditseffects.RCT文献质量评价讲义专家讲座第18页结果数据不完整

完整：无缺失数据；缺失数据不影响结果分析（生存分析中缺失值）；组间缺失人数和原因相同；缺失数据不足以对效应值产生主要影响；缺失数据采取恰当方法赋值不完整：组间缺失人数和原因不平衡；缺失数据足以对效应值产生主要影响；采取“as-treated”分析(实际治疗分析

)，但改变随机入组时干预办法人数较多；不恰当应用简单赋值不清楚：信息不全，难以判断数据是否完整（缺失人数或原因未汇报）；文中未提及数据完整性问题

RCT文献质量评价讲义专家讲座第19页(5)Arereportsofthestudyfreeofanysuggestionofselectiveoutcomereporting?Lowriskofbias:alloutcomesofinterestinthereviewhavebeenreportedinapre-specifiedwaybytheauthorsHighriskofbias:notalloutcomesofinterestinthereviewhavebeenreportedinapre-specifiedwaybytheauthorsUncertainriskofbias:insufficientinformationtopermitjudgmentof'Yes'or'No'ofthisquestion.RCT文献质量评价讲义专家讲座第20页选择性汇报结果

无选择性汇报结果：有研究方案，且系统评价关心方案中预先指定结果指标（主要和次要结果）都有汇报；没有研究方案，但全部期望结局指标，包含在发表文件中预先指定指标都有汇报有选择性汇报结果：未汇报全部预先指定主要结局指标；汇报一个或多个主要结局指标采取预先未指定测量和分析方法；汇报一个或多个主要结局指标未预先指定；系统评价关心一个或多个结局指标汇报不完善，以致不能纳入行meta-分析；未汇报主要结局指标不清楚：信息不全，难以判断是否存在选择性汇报结果

RCT文献质量评价讲义专家讲座第21页(6)Wasthestudyapparentlyfreeofotherproblemsthatcouldplaceitatriskofbias?Lowriskofbias:thestudyappearstobefreeriskofbias.Highriskofbias:thereisatleastoneimportantriskofbiasexistinginthestudy.Uncertainriskofbias:insufficientinformationtoassesswhetheranimportantriskofbiasexists.RCT文献质量评价讲义专家讲座第22页其它影响真实性原因：无其它偏倚无：纳入研究无其它偏倚起源有：最少存在一个主要偏倚风险与使用研究设计方案相关偏倚提前终止研究（数据原因或正规终止标准）显著基线不平衡声称有坑骗行为其它问题不清楚信息不全，难以判断是否存在主要偏倚发觉问题是否造成偏倚，理由或依据不足RCT文献质量评价讲义专家讲座第23页Summaryassessmentsoftheriskofbiasforeachstudy

Lowriskofbias:Lowriskofbiasforallkeydomains;anyplausiblebiasisunlikelytoseriouslyalterthestudyresults.Unclearriskofbias:Unclearriskofbiasforoneormorekeydomains;anyplausiblebiasraisessomedoubtaboutthestudyresults.Highriskofbias:Highriskofbiasforoneormorekeydomains,anyplausiblebiasmayseriouslyweakenconfidenceintheresults.RCT文献质量评价讲义专家讲座第24页总分评分细则在各个方面将试验评为A(是)、B(不清楚)、C(否)3级在这里，能够把A、B和C分别解读为Low,Moderate和HighriskofbiasRCT文献质量评价讲义专家讲座第25页如各评价条目均为A级,则为低度偏倚,发生各种偏倚可能性最小,全部评价指标都有详细描述;质量评为A级;若有一个条目或多个条目为B,则该试验有发生对应偏倚中等度可能性,全部评价指标中最少有1项指标提及但未详细描述;质量评为B级;如其中有一个条目或多个条目为C,则该试验有发生对应偏倚高度可能性,全部评价指标中最少1项指标为不充分或未使用;质量评为C级;RCT文献质量评价讲义专家讲座第26页RCT文献质量评价讲义专家讲座第27页EntryJudgementDescriptionAdequatesequencegeneration?Yes.Quote:“patientswererandomlyallocated.”

Comment:Probablydone,sinceearlierreportsfromthesameinvestigatorsclearlydescribeuseofrandomsequences(Cartwright1980).

Allocationconcealment?No.Quote:“...usingatableofrandomnumbers.”

Comment:Probablynotdone.Blinding?(Patient-reportedoutcomes)Yes.Quote:“doubleblind,doubledummy”;“Highandlowdosetabletsorcapsuleswereindistinguishableinallaspectsoftheiroutwardappearance.Foreachdruganidenticallymatchedplacebowasavailable(thesuccessofblindingwasevaluatedbyexaminingthedrugsbeforedistribution).”

Comment:Probablydone.RCT文献质量评价讲义专家讲座第28页Blinding?(Mortality)Yes.Obtainedfrommedicalrecords;reviewauthorsdonotbelievethiswillintroducebias.Incompleteoutcomedataaddressed?(Short-termoutcomes(2-6wks))No.4weeks:17/110missingfrominterventiongroup(9dueto'lackofefficacy');7/113missingfromcontrolgroup(2dueto'lackofefficacy').Incompleteoutcomedataaddressed?(Longer-termoutcomes(>6wks))No.12weeks:31/110missingfrominterventiong