心理学和生活学习与行为分析和学习理论

1、心理学和生活学习与行为分析和学习理论12一、学习概说学习在出生前就开始了，是有机体适应环境的一个必要条件。生活在不断变化的环境中，必须经常调节自己的行为以求得与环境的平衡。学习既包含认知因素：感知、记忆、思维等，也涉及动机、情绪、社会行为以及人格等基本问题。3一、学习概说学习贯穿个体生命的全过程。学习是一个古老而长新的问题。终生学习，学习型组织.学习问题在信息时代具有更加显著的意义。 41、先哲们对学习的看法学习问题是哲学中知识论或认识论(epistemology)的主题。认识论关心两大问题：一是知识的起源问题，即学习问题；二是知识的真理性问题，什么样的知识是可靠的，什么是知识真理性的最终依据

2、。5认识论两大传统：经验论：17洛克人类的知识完全来自后天的学习，学得的经验构成观念，观念通过联想变成知识。观念汇集成知识的过程就是观念联想association of ideas 狗的大致形象是一个观念，狗的读音是一个观念，毛、四条腿等形成关于狗的知识。6认识论两大传统：联想心理学association psychology用观念的联想来解释人的学习过程。19世纪末，演变成为联结主义connectionism ，不是观念之间的联想，而是刺激与反应之间的联结，逐渐演变为后来的行为主义。7认识论两大传统：理性主义：17笛卡儿；18康德。知识来源于先天的观念形式，经验虽然有助于知识的构成，但知识不

3、是经验的累积。先验论transcendentalism 官能心理学faculty psychology 完形心理学认知心理学。8What is Learning?LearningProcess based on experience that results in a relatively permanent change in behavior or behavioral patternslearning是因经验而使行为或行为潜势产生较为持久（相对一致的）改变的过程。9行为或行为潜能的改变行为潜能如学习50个单词，掌握了28个，还有22个，再次学习22个时候，会更快，说明潜能的变化。学习-表

4、现差异（learning-performance distinction）.10相对一致的变化在不同发场合保持表现出相对的一致性。运动技能-下滑-恢复。11学习是由经验引起的经验既指个体通过直接作用于客观现实的过程本身，也指这一过程所得到的结果。经验既包括有准备的系统的学习经验，也包括偶然的，如看见交通事故。不是由于疲劳和疾病，药物，酒精等。不是由于自然的成熟12学习理论的流派学习理论是对学习规律和学习条件的系统论述，研究动物和人为什么学习、怎样学习和学习什么。传统学习理论包括两大流派或范式：联结主义VS认知学派建构主义13本节知识定位-学习理论的流派学习理论联结主义S-R理论认知学派建构主义

5、巴甫洛夫/经典条件学习/狗桑代克/S-R联结/猫斯金纳/操作条件学习/鼠14强调复杂行为是建立在条件联系上的复合反应，学习就是在刺激与反应之间建立联结的过程。S-R理论。代表任务有巴甫洛夫、桑代克与斯金纳等。学习的联结理论15Behaviorism and Behavior AnalysisJohn Watson (1878-1958) 19191924预测和控制行为B. F. Skinner (1904-1990)激进的行为主义,1972所有的行为都是学习形式的产物Behavior analysis16经典条件作用Classical Conditioning因为对动物消化腺的创造性研究获19

6、04年诺贝尔生理学奖。意外发现，Charles Sherrington的反对（心因性的解释）。Ivan Pavlov, 1849-193617Pavlovs ExperimentsReflexUnconditioned stimulus (UCS)Unconditioned response (UCR)Conditioned stimulus (CS)Conditioned response (CR)18Pavlovs Experiments19经典条件作用-接近就能够建立条件反应？Conditioned Response的获得Acquisition时间进程：接近延迟：CSUCS 最好痕迹：C

7、S UCS同时：CS UCS 很差倒摄：UCSCS 最差20Processes of Conditioning习得 Acquisition消退 Extinction自发恢复 Spontaneous recovery21Processes of Conditioning泛化/类化 Stimulus generalizationAutomatic extension of conditioned responding to similar stimuli分化/辨别 Stimuli discriminationLearning to respond differently to stimuli th

8、at differ from the CS22泛化/类化 分化/辨别 23有了接近和顺序就可以建立条件反射？相倚 Contingency （P168）Robert Rescorla 1966STEP1：穿梭箱学会跳跃逃避电击跳跃的频率作为测量恐惧的指标STEP2：G1：UCS（电击） CS（声音）独立G2： UCS（电击） CS（声音）相倚STEP3：回到穿梭箱24除了相倚还有CS的信息性相倚-信息性Leon Kamin,1969G1:CS1声-逃避CS1声-CS2灯-逃避G2：CS1声-CS2灯-逃避相倚：G1，G2同G1：CS1声G2：CS1声=CS2灯信息性： （P169） CS1blo

9、cking阻断CS2降低了CS2的信息性25Applications of Classical Conditioning情绪与偏好 Emotions and preferences无意识的CS与UCS的联结恐惧条件作用有时一次匹配就够小阿尔伯特学校恐惧症(school phobia)或教室恐惧症(classroom phobia)广告：热情、性感-产品26Applications of Classical Conditioning：吸毒过量导致死亡？（ P171 ）为什么吸毒者在陌生环境中容易毒品过量而死？毒品UCS 对抗反应UCR情境CS对抗反应CR逐渐地，需要一定的药量克服补偿反应，才会出

10、现“正”效应。在不熟悉情境用药，没有补偿反应。27Applications of Classical Conditioning： （P171） 在预期注射葡萄糖的情境中注射海洛因更容易导致死亡？STEP1：CS1UCS（海洛因）CS2葡萄糖让所有老鼠形成抗药性STEP2：两倍注射海洛因CS1CS2死亡率：32%64%CS1海洛因CS2葡萄糖CS12倍海洛因CS22倍海洛因28Applications of Classical Conditioning：免疫能力可以学习？免疫反应是自动的？Robert Ader, 1981:G1：CS(糖精)削弱免疫药物CY，UCSG2：糖精G1，G2都只得到糖

11、精G1中老鼠免疫力低，给糖精竟会导致死亡心理神经免疫学psychoneuroimmunology安慰剂替代药物确保副作用不会条件学习经典条件作用远比我们想象的复杂。29Operant Conditioning：对行为结果的学习俄国的狗-美国的猫和老鼠30Operant Conditioning桑代克的猫：stimulus-response(S-R)connection所有其他未成功的冲动消失了，导向成功的特定冲动则因愉快的结果而保留下来Thorndike,189831Operant Conditioning俄国的狗-美国的猫和老鼠Law of effectPower of a stimulus

12、 to evoke a response is strengthened when the response is followed by a reward and weakened when it is not followed by a rewardOperant Conditioning桑代克的学习理论1学习是刺激与反应之间联结的形成；2试误说：联结是通过不断地尝试与错误的过程而建立的；学习的基本方式是尝试错误学习，学习的进程是一种渐进的、盲目的尝试与逐渐减少错误的过程，在此过程中，随着错误反应的逐渐减少和正确反应的逐渐增加，而最终在刺激和反应之间形成牢固的联结。Operant Cond

13、itioning桑代克的学习理论3学习遵循一定的规律效果律：形成联结后，同时或随后得到满意的情境，联结就增强。快乐原则练习律：刺激与反应之间的联结随着练习次数的增多而增强。用进废退准备律：34Operant Conditioning桑代克的学习理论4学习是直接的刺激与反应之间的联结桑代克根据自己的研究结果，认为学习是直接的联结而不是由思考或推理为媒介而来，即学习遵循精简原则，而不是推理原则。Operant Conditioning桑代克的学习理论桑代克并无条件反射的说法，其理论只是客观主义地强调外部因素，但也注意内部因素。因此桑代克并不是一个行为主义者，并非所有的联结论者都是行为主义。他的准备

14、律以及后来提出的一些规律事实上已经违背了联结主义的机械观点。比如，极性：联结一旦形成，顺着原来形成的方向则易于回忆，逆着则难以回忆。TABLIE-桌子，英译汉容易。Operant Conditioning桑代克的学习理论评价：第一个系统的教育心理学理论，他所提出的试误说、学习律一直是争论的焦点，促进了学习理论的发展。桑代克、加涅和奥苏伯尔是系统的。托尔曼：学习心理学的首要问题是同意或不同意桑代克的问题。虽然他的理论受到很多的批评，但E R HILGARD说：在科学领域内，批评是颂扬的最高形式，微不足道的理论很少受到批评，他们只是受到轻视，在冷落中悄然离世。Operant Conditionin

15、g斯金纳的操作性条件作用华生坚持，没有刺激就没有反应。斯金纳(B. F. Skinner,1904-1990) 区分出两类反应：刺激引发的反应和自发反应，它不是由特定的刺激引起。引发反应-应答行为-经典条件反射-反射学习自发反应-操作行为-操作条件反射-操作学习结果对行为的影响，操纵结果塑造行为38Operant ConditioningOperant conditioningLearning in which the probability of a response is changed by a change in its consequences39Operant Conditioni

16、ng(B. F. Skinner,1904-1990)40Operant Conditioning斯金纳的操作性条件作用41Operant Conditioning斯金纳的操作性条件作用白鼠压杠杆-反应-食物-刺激，这一过程叫强化，食物来强化压杠杆的反应。斯金纳将反射分为经典条件反射和操作条件的反射。那么两种学习有什么不同？42形成经典或操作条件反射的学习都是无意识学习两种条件反射的区别经典条件反射 S-R 操作条件反射R-S 反应的性质 早先就有的反应(流口水) 新的有效行为(踩机关) 强化的性质 在反应之前(灯光食物口水)强化伴随着条件刺激强化不是奖赏 在反应之后(踩机关食物)强化伴随着反

17、应强化是奖赏 强化的作用 建立条件刺激物与无条件刺激物之间的联系(灯光食物) 奖励有效的行为 学习的内容 刺激物之间的信号关系(灯光是食物出现的信号) 有效的行为 43Operant ConditioningReinforcement contingencies强化物Reinforcer与行为相倚的-随时间推移能够增加行为出现可能性的任何刺激。强化：在反应之后呈现强化物。44Positive reinforcementNegative reinforcement阳性强化OR正强化某一行为之后伴随喜爱刺激出现呈现一个愉快刺激以提高一个反应发生的概率阴性强化OR负强化某一行为之后伴随讨厌刺激的解除

18、撤消一个厌恶刺激以提高一个反应发生的概率阳性（正）和阴性（负）强化都是奖励？什么是惩罚？呈现一个厌恶刺激或撤消一个愉快刺激以降低一个反应发生的概率45Positive punishment Negative punishmentPositive punishment阳性惩罚某一行为之后伴随讨厌刺激出现呈现一个讨厌刺激以降低一个反应发生的概率Negative reinforcement阴性惩罚某一行为之后伴随喜爱刺激的解除撤消一个喜爱刺激以降低一个反应发生的概率Positive punishment46Positive VS Negative喜爱的刺激厌恶的刺激呈现阳性强化阳性惩罚撤除阴性惩罚阴

19、性强化47Positive VS Negative48Positive VS Negative49阳性（正）和阴性（负）强化都是奖励？生理心理0点平衡点4小时没有进食的老鼠遭受电击的老鼠吃饱了的老鼠50Positive VS Negative多使用阳性强化，少惩罚。注重长期效果。惩罚应该：迅速而短暂在反应之后立即执行强度上有限制对行为而不是个体本身。51强化物的特征Properties of Reinforcers条件性强化物 Conditioned reinforcers初级强化物 Primary reinforcersBiologically determined：食物，水代币 Token

20、 economies通过与初级强化物的匹配，任何刺激都能够成为条件性的强化物。条件性强化物更有效。52Probable activities as positive reinforcersPremack principle高频率发生的行为可以强化低频率发生的行为，反之，则不可能。事件A-电子游戏B-看动画片C-吃巧克力D-做作业53强化程序表Schedules of ReinforcementPartial reinforcement effectResponses acquired under intermittent reinforcement are more difficult to

21、extinguish than those acquired with continuous reinforcement54 强化程序表 (schedules of reinforcement)固定比率程序表 FRfixed-ratio schedule可变比率程序表 VRvariable-ratio schedule固定间隔程序表 FIfixed-interval schedule可变间隔程序表 VIvariable-interval schedule55固定比率(FR)程序表在固定比率程序表中，强化物在有机体作出一定数目的反应后才出现。经过N次反应后才给予强化时，这种程序表称作FR-N程序

22、表。反应和强化直接相关，所以程序表产生的反应速率很高。注：小斜线表示呈现强化物的时间56固定比率(FR)程序表此程序表在每次强化后产生一个停顿。反应速率越高，每次强化后的停顿越长。在没有事先训练动物做出大量反应时，通过增加每次强化所要求的反应次数，而过度延缓反应速率，会导致反应消退。57固定比率(FR)程序表很多售货员都是被此程序表强化的：他们必须卖出一定数量商品，才能得到报酬。58可变比率(VR)程序表在此程序表中，强化物之间的平均反应次数是预先确定了的。强化之后没有停顿。VR-10程序表是指：平均每十次反应后即伴有一次强化，但强化可能是一次反应后出现，也可能是二十次后出现。59可变比率(V

23、R)程序表此程序表产生的反应速率最高，抗消退能力最强，尤其是值较大的时候。假设从一个低VR值开始训练鸽子，然后逐渐提高VR值。由VR-110程序表训练的鸽子每小时啄食反应的次数达到12000次。即使取消强化，它的反应仍然持续几个小时。60可变比率(VR)程序表赌博似乎就是受此程序表控制的。往老虎机里投放硬币的反应，借助于仅在未知的，不定数目的硬币投放后才出现的回报，可维持在一个较高且稳定的水平。VR程序表让你去猜测奖赏何时出现你一般会打赌它下次就出现。61？！62固定间隔(FI)程序表在此程序表中,强化物是在经过一个固定的时间间隔后,有机体第一次做出某反应后出现.在FI-10程序表中,被试得到

24、强化后,必须等待10秒,再有反应才会被强化-强化与反应次数无关.63固定间隔(FI)程序表FI程序表中的反应速率表现为扇形模式.每次强化反应一结束,动物几乎不再作出反应.随着回报时间的临近,动物的反应越来越多.64固定间隔(FI)程序表按月支付薪水即是将你置于VI程序表中.你刚取得薪水后的几天工作是否有懈怠?65可变间隔(VI)程序表在此程序表中,平均时间间隔是预先确定了的.在VI程序表中,平均每过20秒就呈现一次强化物.这种程序表产生中等的但却很稳定的反应速率.66可变间隔(VI)程序表此程序表中的消退是渐进的，并且比固定间隔程序表要慢很多。在一个个案中，强化终止后，鸽子在最初的四个小时里啄

25、食了18000次。反应完全消退经历了168个小时（Ferster&Skinner,1957)67Schedules of ReinforcementFixed-ratio (FR) scheduleVariable-ratio (VR) scheduleFixed-interval (FI) scheduleVariable-interval (VI) schedule68ShapingSuccessive approximationsReinforcing responses that successively approximate the desired response连续接近如何塑造

26、老鼠按压杠杆？如何让3岁的孩子带眼睛？69两种条件学习的分与合回到穿梭箱实验，思考：正负强化下的学习，哪一种更容易？逃脱条件学习VS回避条件学习如果在电击之前，白鼠就跳过闸门，以避免电击，含义是什么？联结主义的解释充分吗？动物会思考吗？如果不会，动物研究的结论能够用在人身上吗？70两种条件学习的分与合什么是习得性无助栓在小草上的牛为什么不跑？71两种条件学习的分与合辨别性刺激-自发反应-刺激结果三项相倚（three-term contingency）能够解释多数人类行为？Skinner,1953图72两种条件学习的分与合73我们能否应用条件作用任意塑造动物或人的行为？学习的生物制约性Biolo

27、gical constraints on learning本能漂移Instinctual drift即使动物学会了完美的操作反应，随着时间的推移，习得的行为也会向着本能行为的方向漂移。当目标反应与生物因素相一致时，反射作用就会非常有效。74学习的生物制约性味觉厌恶学习Taste-aversion learning仅仅通过CS（新异味道）与其后果（潜在的UCS结果-实际引发疾病的成分）的一次匹配（即使间隔很长）即可完成，却永久保持。加西亚、库林：动物具有学习某些联结的生物学准备，一些CS-UCS结合在特定物种上可以经典条件化，而其他的则不可能。75CS-UCS结合的生物制约性（P184）糖水/噪

28、音/灯光干渴的老鼠适应三种CSCS1糖水CS2噪音CS3灯光白水UCS1电击-疼痛UCS2X光-生病饮水正常饮水减少UCS1电击-疼痛UCS2X光-生病饮水减少饮水正常76CS-UCS结合的生物制约性CSUCSUCRCR 糖水X照射疾病逃避糖水电击疼痛无明亮的噪音水电击疼痛逃避明亮的噪音水X照射疾病无加西亚和库林(1966)：老鼠拥有将某些线索与某些结果联系起来的先天能力。77CS-UCS结合的生物制约性（加西亚、库林）动物具有学习某些联结的生物学准备；一些CS-UCS结合在特定物种上可以经典条件化，而其他的则不可能CSUCSUCRCR 糖水X照射疾病逃避糖水电击疼痛无明亮的噪音水电击疼痛逃避

29、明亮的噪音水X照射疾病无遗传决定了动物将不同的感觉线索类型-味道、气味或外观与奖励或危险进行了编码。打破这些联系的努力提出很难成功。78小结：关于经典条件学习和操作条件学习经典条件反射的建立是有条件的条件学习可以解释大多数人类的学习行为强化是操作条件学习的核心概念时间空间的接近顺序相倚性信息性有些条件反射只需要一次结合就可以建立条件学习具有生物制约性本能漂移联结的特异性79（二）学习的认知理论联结主义S-R强调学习是在刺激与反应之间形成联结，即刺激所带来的行为的变化。而认知心理学家更关心刺激-反应之间的中介过程。柯勒的顿悟学习、托尔曼的位置或方位学习(迷津学习)、班都拉的观察学习。801、柯勒

30、的顿悟学习Khler柯勒的顿悟学习821、柯勒的顿悟学习831、柯勒的顿悟学习841、柯勒的顿悟学习通过黑猩猩的实验，发现在问题解决过程中，并不象桑代克所说的要经历尝试与错误的过程，而是能够观察问题的整个情境，发现情境中各个条件之间的关系，最后才采取行动，柯勒称之为顿悟学习。但顿悟学习并非不需要练习和经验。852、动物认知-认知地图托尔曼迷津实验阅读P185。实验的安排和结果是什么？托尔曼的解释是什么？潜在学习-行为潜能或潜势862、动物认知-认知地图整体反应VS局部、盲目探索刺激-刺激情境-全部行为背景简单联结-学习与表征鸟、蜜蜂、老鼠等动物的空间记忆能力。872、

31、动物认知-概念性行为刺激被强化的反应训练阶段 1人或汽车按橙色键花或椅子按红色键训练阶段 2人按绿色键椅子按白色键刺激反应测验阶段汽车按绿色键花按白色键882、动物认知-概念性行为测试阶段的刺激-反应联结从来没有被强化过。泛化？刺激的知觉相似性。人和汽车相似？椅子和花相似？归类-概念-认知相似性思考；爱德华的实验否认了强化作用？893、观察学习学习发生是否一定需要后效强化。班都拉的社会学习论认为观察学习是社会学习的基础，在社会情境中，学习者通过观察别人行为表现方式，以及行为的结果（得到奖励或惩罚）而产生的间接学习过程，亦即模仿，模仿的对象叫楷模。903、观察学习依据楷模的行为，学习者为自己的行

32、为定下一个标准，并以此标准来评价和衡量自己的行为，这叫做自我规范。自我规范的结果，如果自己的行为符合了自己的标准，就感到满足，加强了他所模仿的行为，此即自我强化。913、观察学习暴力行为来自于模仿学习923、观察学习暴力行为来自于模仿学习933、观察学习暴力行为来自于模仿学习943、观察学习暴力行为来自于模仿学习953、观察学习影响观察学习的条件：1楷模的行为，具有明确的后果者发财或坐牢2在学习者心目中，对楷模的形象有正面的态度，偶像，什么都愿意学 SB963、观察学习3楷模与学习者之间在人格上相似4模仿行为得到强化的5所要模仿的行为，能够明确认定6能力所能够及的行为 圣人97建构主义的学习理论constructivism 行为主义学习理论以客观主义objectivism 为基础，即认为事物及其意义是独立于人而存在的，是事物本身所决定的，而学习