传播学社会研究方法-CH2测量概念化与操作化

测量、概念化与操作化：

在研究者抽象的设想与经验现实之间建立起清晰的联系

测量(measure)概念化(conceptualization)操作化(operationalization)1你认为这些说法正确吗？现代社会恋人之间爱情的成分越多，物质的成分就越少；反之亦然。当个人的受教育程度提高，其对他人的偏见会显著减少。网民的网络技能越高那么其从互联网上获益越多。越赞同“党的新闻事业〞理念的新闻工作者，越可能在其报道中为民说话。2Outlineofthisclass

AnoutlineofconceptualizationandoperationalizationinresearchConcept1 Theorization Concept2

Validity Validity

Measure1 EmpiricalAnalysis Measure2&ReliabilityReliability&3抽象建构抽象建构概念定义概念定义指标或测量指标或测量概念化概念化操作化操作化假设因果关系验证经验假设思辩/逻辑过程实证过程理论层面操作层面经验层面4理论、概念与测量实施一个研究之时必须考虑/询问以下问题：该研究涵该了哪些关键概念？研究者是如何界定关键概念？概念化的挑战关键概念发源于何处？由既有理论生发？既有的理论/研究如何对该概念和其他概念间的关系予以说明？理论化的挑战该研究在如何测量这些关键概念？操作化的挑战5PerceivedPopularityoftheInternetAdoptionoftheInternetUseoftheInternetIndividualCharacteristicsPerceivedCharacteristicoftheInternetPerceivedNeedfortheInternetZhu,J.J.H.,&He,Z.(2002).

Perceivedcharacteristics,perceivedneeds,andperceivedpopularity:AdoptionanduseoftheInternetinChina.CommunicationResearch,29(4):466-495.6测量当社会研究者检验假设、评估解释、为理论提供经验支持或系统的研究某个应用议题或社会世界的某些领域时，他们将测量概念和变量，如智力、社会孤独感、网络依赖、网络成瘾、广告信息卷入度、媒介色情信息限制支持度、关于媒介暴力内容的态度等。定量研究者远远比定性研究者更为关心测量。测量是资料采集前的独立步骤，为此开展出一系列专门的术语和技巧。定量研究者采用演绎取向而不是归纳路径：从概念开始，通过精确细致的测量来捕捉它，并以数字形式来表示。7测量、概念化和操作化日常生活中人们有意无意的测量非物质世界，但通常是用并不太精确的术语；而在物质世界中科学家的测量延展了人类的感觉。测量是根据法那么，对研究对象或事件分配假设干数字。定量和定性研究者在测量中，都适用两个过程：概念化和操作化。测量的显在工具，常常表现为量表(scales)。8测量层次测量有四个层次：定类(nominal)、定序(ordinal)、定距(interval)和定比(ratio)。测量层次(levelofmeasurement)，说明了连续和离散变量之间的差异。一个变量在何种层次上被测量，直接取决于其被概念化的过程以及研究者所采用的资料采集方法的类型。层次不同的类型排列等级受测类别间的距离真正的零点定类是定序是是定距是是是定比是是是是9观念、概念化和概念由于每个人头脑中的印象并不能直接用来交流，因此人们用每份资料的标签来交流彼此观察到的事物和代表事物的观念。和观念(conception)有关的标签使人们可以相互交流，且使人们可就标签的含义达成共识。达成共识的过程被称为(广义的)“概念化〞(conceptualization)，达成共识的结果就是概念(concept)。概念是一组观念。10概念化Conceptualization概念化Referstotheprocessthroughwhichwespecifypreciselywhatwemeanwhenweuseparticularterms概念化是捕捉一个设想并通过赋予它一个概念或理论定义的方式来提炼它，即概念化是彻底想通想透设想/概念的意义的过程Relativelyabstract11操作化Operationalization操作化Referstothespecificationofresearchproceduresthatwillresultinempiricalobservationsrepresentingthoseconceptsintherealworld连接概念定义与一套特别的测量技术或程序Hastobeconcreteandprecise操作定义，即通过研究者执行的特定操作行为产生的定义，可以是一份调查问卷、在实地场景中观察事件的方法、在大量媒体中测量信息内容的方法等。12概念化与操作化的衔接OperationalizationshouldfollowandmatchconceptualizationWemeasureathinginaspecificmannerbecausewehavedefinedthethinginaspecificway13对“大学质量〞的概念化与操作化Example1:QualityofUniversityIsWuhanUniversityagooduniversity?IsitbetterthanornotasgoodasHUST?Conceptualdefinition:Asaneducationalinstitution,auniversityisgoodtotheextentthatitsuccessfullytransmitsadvancedlevelknowledgetopeopleinasocietyOperationalization:%offacultymemberswithPh.D.sTeacher-to-studentratioAvailabilityofadvancedteachingfacilitiesThesizeofthelibrary14对“大学质量〞的概念化与操作化Conceptualdefinition:Asaresearchinstitution,auniversityisgoodtotheextentthatitsuccessfullyproducesadvancedknowledgeOperationalization:%offacultymemberswithPh.D.sSizeofgraduateschoolResearchoutputoffacultymembersAvailabilityofresearchfundingAdvancedresearchfacilitiesThesizeofthelibrary15“播送收听〞的概念化与操作化Example2:FrequencyofradiolisteningWhatcountsas“listening〞?E.g.,amountoftimespentlisteningtotheradio,includingwhenradioservesasbackground16“媒介可信度〞的概念化与操作化媒介可信度(Mediacredibility):概念定义：可信度是为受传者所感受到的信源或传播媒介的一种品质，即不管其传播的内容为何而能令受传者无可争辩的信赖(West,1994)。一个向公众提供了准确及公正无偏的信息的信源，可被认为是可信的(Hass,1981)。操作定义：构建基于5级李克特量表的以下四个题项(items)：“整体上来看，电视(报纸/播送)新闻•••••(1)个人感觉值得信赖；(2)根本上是真实的；(3)立场公正，不试图以主观意志影响人；(4)解释得比较全面、完整〞。17“物质主义倾向〞的操作化贝尔克的物质主义量表租一辆车比买一辆车对我更有吸引力；〔R〕我对那些也许应当扔掉的东西总是恋恋不忘；即使是价值很小的东西被偷了，我也会非常不安；我掉了东西之后不会特别不安；〔R〕较之于大多数人，我较少把自己的东西锁起来；我宁愿买某间东西而不愿从朋友处借来一用；我很担忧别人把我拥有的东西借走；旅游时我喜欢照很多照片；我从不丢弃东西。18“互联网采纳〞的操作化Internetadoption.Asdescribedabove,weconceptualizetheadoptionoftheInternetasanominalvariableoffourcategoriesthataremutuallyexclusiveatagivenpointintimebutdynamicallytransitoryovertime.Tomeasureit,weaskedtwoquestionsinthesurvey:“AreyoucurrentlyusingtheInternet?〞and“Ifnot,howlikelywillyoubeusingitinthenext12months?〞Therespondentswereexplicitlytoldthat“usingtheInternet〞includesnotonlysurfingtheWebbutalsoreceivingandsendinge-mailmessages,onlinechatting,shopping,tradingstocks,andotheronlineactivities.Basedontheiranswerstothetwoquestions,respondentswereeachassignedtooneofthefourcategories:(a)ContinuousAdopters(whoarecurrentlyusingtheInternet),(b)DiscontinuedAdopters(whohadusedtheInternetbutstoppedusingit),(c)PotentialAdopters(whohavenotusedbutarelikelytousetheInternetwithinayear),and(d)UnlikelyAdopters(whohavenotusedandarenotlikelytousetheInternetanytimesoon).19Journalisticroles.Thesevariablesweremeasuredbyaskingtherespondentstoindicateona5-pointLikert-typescale,from1(notatallimportant)to5(veryimportant),howimportanteachfunctiondescribedinastatementwas.BasedonourconceptualanalysisofhowmediaroleswerebeingdiscussedamongChina’sjournalists,abatteryof18statementswasdeveloped.SomeofthemwereadaptedfromWeaverandWilhoit(1996),andotherswerecreatedbasedontheuniquesituationinChina.Fiveoftheitemsweredesignedtoassessthemediaentertainmentrole.Buttheydidnotgroupintoasinglefactor,nordidtheyloadcleanlyonanyoftheotherfourfactors.Thesewereeliminatedfromthesubsequentanalysis.Theremaining13formedfourcleanfactorsinanexploratoryfactoranalysis.ThefourfactorscorrespondtothefourrolesspecifiedinWeaverandWilhoit:interpretive,disseminator,adversarial,andpopularadvocacy.12Basedonthisresult,fourindiceswerecreatedbyaveragingacrosstheitemsineachfactor.Eachindexyieldedanacceptablelevelofreliability(seeAppendixBfordetails).MeasurementofJournalisticroles2021测量并非所有概念都可以被测量，如潜意识、虚假意识、文学价值等，但是这些概念有助于人们思考问题。测量无所谓对错，但有好坏之分，好的测量具有以下特征：概念化的阐述清晰、意义明确易于被操作化与研究中的理论设想具有连惯性符合研究的目的与具体情景22“没有任何神奇的手法可以把建构转变为精确的概念定义，这需要仔细的思考、直接的观察和与其他人交换意见、阅读其他人所思所言，以及尝试各种可能的定义。〞单独的一个设想可能同时有数个定义，人们对于这些定义不一定会有完全相同的看法。概念定义常常会与理论架构/范式，以及研究的目的相关，譬如如何界定“社会阶级〞？如何界定“好的大学〞？“媒介暴力〞、“传播攻击性〞？某些概念极为抽象和复杂，本身包含了许屡次级概念或不同的维度/层面，此种概念常常被称为“构念〞(construct)。如何概念化？23如何概念化？尽可能多的在既有文献和研究中寻找自己所关注的那个概念，当搜集到不同的定义、不同层面的定义与相关的概念之后，就可以看到这个核心观念的界限范围。在此根底上，可以自己为某一个概念下定义，尤其是，需要列出这个概念所需要表达的外延或外在表征，尤其是当这个设想所表达的是一种态度/感觉/心理状态，这些外延的变化范围，如自高到低等，它们有助于实现操作化。24测量品质两个标准：信度(reliability)和效度(validity)。信度：在不同的时点上屡次测量，产生一致结果的可能性。譬如，同一份问卷，同一个受访者填写两次结果会一样么？它涉及到测量的稳定性、内在一致性和等价性。你喜欢看武侠片么？“喜欢〞、“不喜欢〞、“说不清楚〞。请在0-100之间标出你喜欢看武侠片的程度？陈述(statement/item)愈是具体实在，那么测量的信度愈高客观的观察一般会产生更有信度的结果看恐怖片受到惊吓的程度：询问vs皮肤测试问受访者的年龄vs查验其身份证25改善测量信度清晰概念化所有设想：尤其对复杂的概念或构念必须如此前测－后测法：同样的受访者施以两次测量，将测量的结果算术平均多指标测量：将各个指标的分值加总E.g.,AttentiontonewsmediaDoyoupayattentiontonewsontelevision?Doyoupayattentiontonewsinthenewspapers?DoyoupayattentiontonewsontheInternet?Doyoupayattentiontonewsonradio?使用成熟量表：少用自建量表，但在借鉴成熟量表时需要对其加以改造，尤其要注意文化差异问题提高测量层次：尽可能用最精确的等级来测量设想Research-workerreliabilityInterviewertraininginsurveySupervisinginterviewersinasurveyandrandomcheckingofcompletedinterviewsInter-coderreliabilityincontentanalysis26多指标测量自变量测量因变量测量经验关联？a1a2a3b2b1b3AB27题号项目均值标准差I-Tr**因子载荷Alpha网络知识.75IK1我知道“蠕虫”这种网络病毒？.39.49.46.54IK2我知道怎么去对付“蠕虫”这种网络病毒？.20.40.49.58IK3我知道什么是“置顶”？.57.50.46.46*IK4我知道如何将帖子“置顶”？.37.48.38.39*IK5我知道什么是Cookies？.46.50.44.55IK6我知道如何使用Cookies？.23.42.49.60IK7我知道什么是“代理服务器”？.52.50.49.59IK8我知道如何设置“代理服务器”？.26.44.47.58IK9我知道什么是网络视频中的“缓冲”？.91.29.21.20*IK10我知道怎么应付网络视频中的“缓冲”这一现象？.53.50.29.31*网络经历EX1您使用网络大约有多少个月？44.9527.57网络自我效能感.78SE1我有信心能在网上搜索到自己所需的信息3.76.82.52.65SE2我有信心通过网络来解决实际问题3.38.83.65.79SE3我有把握通过网络与人较好的交流3.36.86.43.48*SE4我有信心通过网络来完成需要做的事情3.37.79.53.61SE5我觉得自己可较好的使用网络设备3.25.87.57.62SE6即使身边没有人帮助，我也能通过网络完成相关工作3.21.88.53.57复合测量28复合测量2930研究效度研究的效度主要有两个：内在效度(internalvalidity)vs.外在效度(externalvalidity)。统计效度。内在效度：某一个研究设计是否严谨(能排除任何可能混淆的变项)。外在效度：某一个研究结果能否概化(generalize)至现实情境，或更大现实世界范围中，也称之生态效度(ecologyvalidity)。研究最好能兼顾内外在效度，不过通常此二效度很难兼顾。内在效度愈强，其外在效度愈弱；外在效度愈强，其内在效度愈弱。31测量效度Validityreferstotheextenttowhichanempiricalmeasureadequatelyreflectsthemeaningoftheconceptunderconsideration,orinotherwords,theextenttowhichtheoperationaldefinitionfollowstheconceptualdefinition,orinotherwords,Whetheryouaremeasuringwhatyouwanttomeasure所有的效度都在试图答复一个问题：我们是否测量到了我们想测的东西ExamplesofmeasureswithproblematicvalidityAttitudetowardsAmericancultureWhetheronelikesMcDonald’sornot32测量效度FamiliaritywithnewmediatechnologiesNumberofhoursusingtheInternetperdayWillingnesstoexpressanopinionThenumberofdon’tknowanswersgiveninasurveysettingDeferencetogovernmentalauthorityMeasuredbypeople’sattitudetowardsgovernmentalregulationregardingwearingofseatbelt33效度就其核心，测量效度是设想与其指标间的吻合程度，触及的是概念与操作定义两者之间有多契合的问题。然而，“我们永远无法得到绝对效度的原因，是因为设想都是抽象的概念，而指标那么是具体的观察。在我们对于这个世界的精神图画与我们在特定时空下所做的特定事物之间，是存在一定距离的。〞效度是程度问题(validitycanbeconsideredasamatterofdegree)。效度是动态过程的一局部，会随着证据的积累与时俱增。如果没有效度，所有的测量会变得毫无疑义。34效度类别外表效度内容效度效标效度并发效度预测效度建构效度收敛效度互斥效度35外表效度(facevalidity)涵义：外表上来看，人们会相信定义与测量方法是相符的么？用最简单的也是最根本的主观判断的方法，一般根据测量量表所选的题项来判断，仅从外表上来观察判断其是否能够代表想要测量的设想/构念。也有人认为外表效度与内容效度不同。36内容效度(contentvalidity)涵义：测量工具将定义下的所有内容都代表出来了么？一个概念定义含有数个观念：它是包含观念与概念的一个“空间〞，测量工具应该是概念空间中所有观念或区域的样本或代表。Thedegreetowhichthemeasurehascapturedtherangeofmeaningsrepresentedbytheconcept.37效标效度(criterionvalidity)亦称效标关联效度、独立标准效度、准那么效度、参照物效度，····逻辑：效标是一个与量表有密切关联的独立标准，将量表所测特性看成因变量，将效标看成自变量，所测特性与效标密切相关的量表才是有效的量表。效标效度的分析方法：考察所测特性(因变量)与效标(自变量)是否有显著的相关(相关分析)或是对效标的不同取值，特性的值是否表，现出显著的差异。难处：效标确实定并不是一件容易的事，择效标一般要根据某种的理论、或某种已经得到肯定的结论。38效标效度台湾的“兰屿民众传播行为与现代化程度之研究〞，用离岛经验作为测量雅美族人现代化程度的效标。再如：员工士气与工作满意度、电视广告收看与物质主义。依效标取得时间的不同，效标关联效度又区分为“同时(并发)效度〞(concurrentvalidity)与“预测效度〞(predicativevalidity)二种。39建构效度(constructvalidity)针对多重指标的测量工具。关注的是：如果这个测量工具有效，不同的指标产生的是一致结果么？尤其是，当众多指标测量的是一个构念的不同维度/层面，测量的结果与预想的情形是否一样？建构效度分为：收敛效度或趋同效度(convergentvalidity)和区分效度/互斥效度/歧异效度(discriminantvalidity)。同一个设想的多个测量指标，产生相同的测量结果或类似的模式；不同设想的多个测量指标产生不同甚至相反的结果或负相关。40相对优越性相对不利性形象可察性易用性公众的移动电话创新特征感知理论构想相对优越性-易用性-可察性相对不利性形象公众的移动电话创新特征感知真实世界建构效度的例子41题项因子一因子二因子三移动电话可以让我随时随地联系我想要联系的人.822－.119.026移动电话让我的工作更有效率、生活更加便利.867－.033.050移动电话用起来很简单.580－.396.300我很快就学会了怎样用移动电话.560－.472.242用移动电话的好处是很明显的.786－.056.193我觉得很容易向别人介绍用移动电话的好处.751－.314.200用移动电话是时尚的标志.091－.163.904如果不用移动电话，我会觉得很没有面子.227－.163.867