惩罚出现负强化物课件

1、1第五章 学习科学家发现：饿肚子学习记得更清楚聪明的汉斯 20世纪初，一匹叫汉斯的马引起了巨大的轰动。汉斯的主人是一位退休的中学教师，名叫威廉冯奥斯滕。1901年，他买下汉斯，并开始给它上课。他想弄清楚，通过系统的授课，一匹马的思维能力究竟能提高和发展到什么程度。 更令人称奇的是，在主人的教导下，聪明的汉斯经过一段时间的训练，掌握了4种基本的数学运算。当人们向它呈现算术题目时，它会用蹄子令人惊奇地敲出准确答案。汉斯还学会用敲击蹄子的方式认字：每个字母可以翻译成数字代码，汉斯就可以用蹄子敲击次数来代表这个字母。2 一次表演中，后来成为德国总理的贝特曼霍尔维格是观众之一。人们把他的名字介绍给汉斯，

2、一连念了好几遍，直到汉斯点了点头。一刻钟后，汉斯毫不犹豫地用蹄子敲击起来，观众们根据挂在前面的字母表可以容易地对照出汉斯的“拼写”是否正确。结果汉斯敲出了“贝特曼”，除了不发音的h之外，其他字母一个不差。在场者看得目瞪口呆，然后一片欢腾。聪明的汉斯与它的主人奥斯滕成了德国媒体广泛报道的对象，公众被能计算、会拼写的汉斯吸引了。但也有怀疑者认为，在表演中可能有什么猫腻，或者耍了什么骗人的把戏。 后来，聪明的汉斯引起了科学机构的关注。人们成立了一个试验委员会，对聪明的汉斯进行科学鉴定。1904年9月12日，委员会作出了鉴定结论：没有发现存在骗人的花招。 鉴定结果让人们更困惑了：难道汉斯真的能够做出过

3、去人们认为动物不能做的事？动物难道真具有超乎人们想像的思维能力吗？34 第一节 学习概述一、什么是学习？ 人和动物的行为有两类：本能行为（instinctive behavior）通过遗传获得的种族经验，生来就有生存必需，但适应性非常有限。习得行为（learned behavior）在后天环境中通过学习而获得的个体经验更灵活，更适应多变的外界环境5学习的定义基于经验而导致行为或行为潜能发生相对稳定和持久变化的过程。第一，学习必须导致个体某种变化；第二，学习的行为变化是由经验引起的；第三，学习的行为变化是比较持久的；第四，人与动物都存在学习。最低级动物生命形式（原生动物）行为的先天成分与成熟在个

4、体生活中的作用 行为的后天成分与学习 在个体生活中的作用1学习是有机体与环境取得平衡的条件二、学习的意义2学习可以促进有机体的成熟3学习是文明延续和发展的桥梁和纽带最高级的动物生命形式（人）（一）根据学习主体分类1.机器学习：把人的某些智能赋予机器，让机器模拟人的某些智能，以代替和扩展人脑的某些功能。 2.动物学习：靠直接方式获得个体经验，消极地适应环境，以满足其生理需要。3.人类学习：在社会生活实践中，以语言为中介自觉地、积极地掌握社会的和个人的经验的过程。学生的学习间接性计划性被动性三、学习的主要类型（二）根据学习内容分类（冯忠良）1.知识学习 建立认知结构 知与不知、知之深浅2.技能学习

5、 形成合乎法则的活动方式，智力与操作 知与不知，会与不会3.社会规范的学习 把外在的行为要求转化为内在的行为需要 知与不知，会与不会，愿意与不愿意、言语信息的学习 掌握的是以言语传递的内容，解决“是什么”的问题 。、智慧技能的学习解决“怎么做”的问题，以处理外界的符号和信息 。、认知策略的学习 学习者用来“管理”他的学习过程的方式。 、态度的学习 通过学习获得的影响个人对人、物及事件所采取的行动的内部状态。 5、运动技能的学习由有组织的、协调而统一的肌肉动作构成的活动，是在不断练习的基础上形成的。（三）根据学习结果分类（R.M.Gagne）有意义 弄清概念 听教师精心 科学研究学习 之间关系

6、设计的教学 听演讲或 学校实验 常规的“研究” 看材料 室活动 或心智的“生成”机械 背乘法表 应用公式 尝试错误学习 解题 “迷宫”问题解决 接受学习 有指导的发现 独立的发现 学 习 学 习（四）根据学习方式的分类(D.P.Ausubel，1978)地球上的星星Ishaan （伊夏）是一个八岁小男孩，他的世界充满了别人并不以未然的惊奇：色彩、鱼儿、小狗和风筝。这些对于成人世界并不那么重要，他们对家庭作业、分数和整洁更感兴趣。而伊夏在学校，似乎什么也做不对。当他惹出的麻烦已经超出父母能掌控的范围后，他被送到了一家寄宿学校“接受教导”。一天，一位新的美术老师Nikumbh(尼库巴)突如其来，用

7、欢乐和乐观感染着每一个学生。他打破了“事情是如何完成”的所有规则，让学生自己去思考，去梦想，去想象。在新教师的耐心辅导和关怀下，伊夏找回了自己，还有快乐。11水平学习层次的名称及含义类型8问题解决或高级规则学习能通过思维将学到的概念与规则灵活地加以运用以解决问题认知学习类型7规则学习能理解由若干概念构成的规则类型6概念学习能概括出一类事物的共同特征类型5辨别学习能辨别多个大同小异的刺激，并做出相应的不同反应类型4言语连锁学习即根据言语刺激与反应行为的顺序组合的反应。联结学习类型3动作连锁将多个刺激-反应联结串连成复杂行为类型2刺激-反应学习操作性条件反射类型1信号学习经典性条件反射（五）根据学

8、习的水平分类（R.M.Gagne） 一、行为主义概述产生背景：20世纪初资本主义社会经济萧条、实证主义的兴起主要观点：心理学必须采用科学的方法研究个体表现于外的行为。 学习结果：使有机体形成“刺激反应”的联结 学习过程：通过不同方式建立刺激与反应的联系 学习条件: 注重学习外部条件，忽略内部条件第二节 行为主义的学习理论代表人物及其学说桑代克：试误联结说巴甫洛夫、华生：替代联结说（经典性条件反射理论）斯金纳：强化联结说（操作性条件反射理论）1、生平美国哥伦比亚学派的主要代表，动物心理实验的首创者，教育心理学体系和联结主义心理学的创始人。 二、桑代克的联结主义Edward Lee Thorndi

9、ke ，18741949 2、研究简介被试：猫等工具与材料：迷箱研究方式：观察与定量测量3、基本观点学习结果：使有机体形成“刺激反应”的联结学习过程：通过试误建立刺激与反应的联系学习规律与条件：准备律、效果律、练习律4、评价 是教育心理学史上第一个较为完整的学习理论。 试误说以尝试和错误概括所有的学习过程，忽视了认知、观念、理解在学习过程中的作用，不符合人类学习的实际，有以偏概全的倾向。 三、巴甫洛夫的经典条件作用巴甫洛夫把这种通过联结作用而形成的对一些刺激做出反应的现象称为条件反射（conditional reflexes。后来由于研究者又发现了其他类型的条件作用，就将巴甫洛夫发现的条件作用

10、称为经典条件作用（classical conditioning）。 巴甫洛夫伊凡彼德罗维奇（1849-1936），俄国生理学家、心理学家、医师，高级神经活动生理学的奠基人，也是传统心理学领域之外而对心理学发展影响最大的人物之一，曾荣获诺贝尔生理学奖。巴甫洛夫与他的狗 经典条件作用1、基本概念无条件刺激 （unconditioned stimulus，UCS）：任何能够自然引起有机体反射性行为的刺激 无条件反应（unconditioned response，UCR）：由无条件刺激引发的反应中性刺激 （neutral stimulus，NS） ：原本不能引发无条件反应的刺激，如铃声和灯光等 条件刺

11、激（conditioned stimulus，CS） ：通过学习，中性刺激也能引起原本只有无条件刺激才能引起的反应 条件反应（conditioned response，CR） ：由条件刺激单独引发的反应条件反射实验2、经典条件作用形成的基本过程 条件作用之前 食物 唾液分泌 （无条件刺激，UCS） （无条件反应，UCR） 铃声 无唾液分泌 （中性刺激，NS） （无反应或无相关反应） 条件作用期间 （多次重复）伴随 诱发 铃声 + 食物唾液分泌 （条件刺激，CS）（无条件刺激，UCS）（无条件反应，UCR）条件作用之后 诱发铃 声 唾液分泌 （条件刺激，CS） （条件反应，CR） 26经典条件作

12、用的形成3、消退与自发恢复 条件作用的消退（extinction）：若多次呈现条件刺激，却始终没有无条件刺激与之相伴出现，有机体的条件反应就会逐渐减弱，甚至不再反应。自发恢复（spontaneous recovery） ：已经消退的条件反应，经过一段时间后，通常能够再次被条件刺激激发而出现 。经典条件作用的学习和消退曲线 进化心理学家认为消退和自发恢复都具有适应环境变化的意义。如果一段时间电台多次发布地震警报，却没有发生地震，人们可能会逐渐对这种警报不以为然，隔一段时间后当警报重新出现时，人们又会表现出一定的警觉，此时，这种自发恢复的倾向就是很有必要的，因为这次的警报很可能是有预测性的。 4、

13、刺激泛化与分化 刺激泛化（stimulus generalization） ：当条件作用建立之后，一些和条件刺激相类似的刺激，虽然它们从来没有和无条件刺激匹配过，也能引起有机体不同程度的反应。刺激分化（stimulus discrimination）：和刺激泛化相反，是指有机体通过学习，能够在一些维度上将条件刺激和其他刺激区别开来，选择性地对条件刺激做出反应的现象。刺激泛化与辨别是生活中极为常见的现象，它们对有机体的生存适应具有同样重要的作用。从刺激泛化的角度来说，在条件作用建立之初，为了不至于漏掉应该做出反应的情况，必须对所有相似的刺激都做出反应，这样，有机体才有更多的可能获得想要的食物或者

14、避开潜在的威胁。从刺激辨别的角度来说，有机体对小范围的刺激做出准确反应也是必要的。只对那些真正能够预示无条件刺激出现的刺激情境做出反应，有机体才不至于因为过度反应而感觉疲惫。有机体要想在环境中表现出最佳行为，或许应该在泛化和辨别之间寻求一个平衡点。5、高级条件作用巴甫洛夫实验中的狗建立起对铃声的条件作用后，如果实验者在每次铃声响起之前又向狗呈现一个灯光，那么几次重复后，灯光也能激起狗的唾液分泌。经典条件作用建立之后，让一个新的中性刺激与条件刺激反复相伴呈现，结果该中性刺激也变成条件刺激，也能引起相应的条件反应。以这种程序建立起的新的条件作用，称为高级条件作用（higher-order cond

15、itioning）以此类推，如果不断用新的中性刺激与条件刺激相匹配，在理论上就可以建立无限多的高级条件作用，从而在刺激与刺激、刺激与反应之间建立起复杂的联系。 对巴甫洛夫的评价经典条件反射解释了学习活动最基本的生理机制只能解释较简单的低级学习如何解释：一朝被蛇咬，十年怕井绳？34四、 华生的行为主义1878年1月9日出生于美国南卡罗来纳州格林威尔城外的一个农民家庭 。1894年，考入格林威尔的伏尔曼大学，到芝加哥大学攻读研究生课程，进行了大量的动物行为研究，这些研究都为他行为主义观点的形成奠定了坚实的基础。1903年，在安吉尔和唐纳森的指导下，以动物的教育一文获得博士学位，并留校任教。 190

16、8秋，到约翰霍布金斯大学哲学与心理系任教授，从事教学与研究工作。在霍布金斯大学工作期间，除了因为第一次世界大战爆发而应征入伍外，华生一直致力于发展他的行为主义。 John Broadus Watson, （18781958） 行为主义的诞生1908年，华生在耶鲁大学的演讲中首次提出了行为主义观点。1912年应卡特尔的邀请，华生在哥伦比亚大学做了一系列的演讲，初步阐述其行为主义的观点。1913年，华生在其主编的心理学评论杂志上发表了一篇极具影响力的论文行为主义者心目中的心理学，正式宣告行为主义心理学的诞生。1914年，他出版了第一本系统阐述行为主义的专著行为：比较心理学导论。1915年，美国心理

17、学会接受了行为主义的观点，华生被选为美国心理学会主席。1919年，华生出版了第二本专著从一个行为主义者的观点看心理学（Psychology From The Standpoint of a Behaviorist）,对行为主义观点作了更加全面的阐述。1924年出版了行为主义（Behaviorism）一书 。 华生概括了行为主义的基本原则：第一，心理学的研究对象应该是行为，而不是意识；第二，它的方法应该是客观的而不是内省式的；第三，它的目标应该是“预测并控制行为”，而不是对精神现象的基础理解。他认为学习就是刺激替代的过程，所有行为都是通过条件作用建立的刺激-反应（S-R）联结。典型的环境决定论者

18、他曾宣称：“给我一打健康的、没有缺陷的婴儿，在我设定的世界里教养，我保证随机选出任何一个婴儿，无论他的能力、嗜好、倾向、活动、职业、种族等种种因素如何，我都能够把他训练成为我所选定的任何一种类型的专家医生、律师、艺术家、企业家等，甚至也可以把他训练成为乞丐或盗贼。”（1930） 1920年华生和其实验助手雷纳（Rayner）进行了小艾尔伯特与小白鼠的经典实验：恐惧的泛化五、经典条件作用的应用 条件性情绪反应 生活中总有一些人会对大多数人都不怕的事物产生极度的恐惧，例如有人可能一看到老鼠就全身发抖、满脸苍白、手足出汗，而有人则可能对菜青虫有类似的恐惧反应。其实这些恐惧反应很可能是经典条件作用的结

19、果。人对于一些事物的情绪反应，不管是负面的如恐惧、厌恶还是正面的如喜爱、偏好等，都是可以通过经典条件作用的方式学习到的。广告商利用条件性情绪反应的原理来设计广告，试图让消费者对他们的产品产生条件性的正面情绪。(B.F.Skinner,1904-1990)六、斯金纳的操作性条件反射学说 1.斯金纳简介美国心理学家，新行为主义学派的主要代表人物之一。1931年获哲学博士学位，1947年起任哈佛大学心理学系终身教授。斯金纳兴趣广泛，著作丰富。1958年美国心理学会授予他杰出科学贡献奖，1968年获美国国家科学奖章的奖励，1971年获美国心理学会基金会赠予的金质奖章。主要著作有五十年的行为主义、学习的

20、科学与教学的艺术、有机体的行为、沃尔登第二、超越自由与尊严。 2.基本观点 学习结果：使有机体形成“刺激反应”的联结 学习过程：对有机体在某种刺激情境中的出现的期待行为进行强化，从而增加在该情境中期待行为发生的概率，最终建立起情境与反应的联系。3.斯金纳箱(Skinner Box)4.行为分类引发的反应：应答行为自发的反应：操作行为经典性条件作用操作性条件作用操作性条件作用的形成(辨别性剌激) (操作性反应) (强化剌激) SD R SR (杠杆) (压杠杆) (食物)经典性条件作用操作性条件作用关键的关系 刺激与反应的次序条件刺激与无条件刺激。操作行为和它的结果（奖励或惩罚）之间。过程特点刺

21、激替代反应修正涉及的心理学规则接近联结原则强化反馈原则基本范式S1 RS2RS学生的行为不自觉的，行为是由无条件刺激或条件刺激引发的。自觉的，行为发生后其结果导致了行为发生的概率的增加或减少。事件发生的顺序条件反射建立前：US UR条件反射建立后：CS CR操作行为：强化-行为增加操作行为：惩罚-行为减少。举例教师总是先挥挥手，再说“请安静”。说“请安静”之后引发学生的无条件反射安静和挥挥手引发的条件发射安静很相似。强化：当学生安静时，教师就表扬学生，使学生今后还能保持安静。惩罚：当学生吵闹时，教师就剥夺他们的休息时间，学生很可能在今后的休息时间不再吵闹。经典性条件作用与操作性条件作用的比较5

22、.强化学说1）强化(Reinforcement)与惩罚（Punishment）提高行为反应概率的过程叫强化，减弱或压抑行为的过程叫惩罚强化类型正强化：给予喜爱的负强化：取消或终止厌恶的惩罚的类型：给予式惩罚：行为之后呈现一个厌恶刺激剥夺式惩罚：行为之后去除某个愉快的刺激。强化和惩罚强化类型（S）辨别性刺激R反应S强化（惩罚）刺激正强化教师安排了自学的时间学生自学教师表扬学生做得不错负强化教师安排了自学的时间学生自学教师告诉学生晚上不用做家庭作业了。惩罚（出现负强化物）教师安排了自学的时间学生玩耍关禁闭惩罚（取消正强化物）教师安排了自学的时间学生玩耍教师告诉学生不许出去玩49体罚是否应该？很多研

23、究考察了父母运用体罚与儿童攻击性行为之间的关系母亲的体罚越严重，儿童对同伴的攻击行为就越多个体青少年时期得到的体罚（6002个家庭）与后来生活状况的关系抑郁、自杀、酗酒、虐待儿童和殴打妻子等问题要终止孩子令人讨厌的行为，惩罚应该满足一些条件，或者与强化相结合行为的频率增加行为的频率增加正强化物与负强化物的运用 行为的频率降低行为的频率增加负强化物与惩罚的运用 2）初级强化物和次级强化物初级强化物（primary reinforcer）是指任何直接指向于有机体生物学因素的强化物。次级强化物（secondary reinforcer）是需要与已经存在的强化物建立联结才能起到强化效果的强化物。包括：

24、社会强化物，如表扬、微笑、拥抱或关注活动强化物，如玩玩具、做游戏、从事有趣活动代币强化物，用来换其他强化物的钱、分数、彩星或积分等贡献：较好地解决了“如何教”的问题。包括教材处理、目标陈述、教育技术的应用、对学生的激励等。不足：1）理论观点狭隘，无法解释人类的复杂学习。2）学习如只靠直接经验，其效果是有限的。3）学习不全是在控制情境下自动产生的。6.操作性条件学说的评价箱子系列实验顿悟学习 班杜拉简介班杜拉(1925-)，美国当代著名心理学家，1951年获得硕士学位，1952年获得博士学位（27岁）。1983年开始在美国的斯坦福大学任教，1974年当选美国心理会主席。多次获得美国心理学会颁发的杰出科学贡献奖。主要著作有青少年的攻击、社会学习与人格发展、社会学习理论。 第三节 班杜拉的社会学