视听语言第二讲双语

第二讲

视听语言的基础与特点

(一)

ChapterTwo

theFoundationandFeaturesofAudioVisualLanguage

1回顾：什么是电影

whatismovie

——解析视听语言的物质基础

thematerialfoundationofaudiovisuallanguage电影是科学技术的产物movieistheresultoftechnology电影不是文学、戏剧——电影就是电影！Movieisnotliteratureordrama.Movieismovieitself!电影有记录本性Theessenceofmovieisrecord.电影要求逼真性Moviemustberealistic.第一节视听语言的基础——模拟人的视听感知经验

thefoundationsofaudiovisuallanguage

simulatetheaudiovisualexperience如果说摄影、放映设备是视听语言产生的物质基础，那么，通过观众的感觉、知觉、记忆、思维、想象等心理活动，视听语言才最终走进观众心里，完成传播与交流。因此，受众的心理是视听语言生成的另一重要土壤。Photographyandprojectionequipmentarethematerialfoundationsofaudiovisuallanguage.Onlybysensation,perception,memory,thought,imaginationandotherpsychologicalactivities，audiovisuallanguagecanfinallycommunicatewithaudience.Consequentlythepsychologyofaudienceisanothernecessity.电影是光波声波的感官刺激

Movieisthesensorystimulationoflightwaveandsoundwave看电影、看电视WatchingmovieandTV

我们怎么看、怎么听？

Howdowewatchorlisten?一、视觉感知特性

SeeVSLookat看见是生理功能，而注视是大脑选择的结果

seeingisphysiologicalfunctionbutlookingatisthechoiceofbrain大象几条腿Howmanylegsdoestheelephanthave?1、视觉可能产生幻觉Visionmayresultinillusion眼睛受到生活经验的欺骗Eyesarecheatedbylifeexperience.画家在和你的视觉感知经验做游戏。这是一种心理效应。你的眼睛和你记忆中的视觉感知经验发生了冲突。这是静态幻觉。Thedrawerisplayingwithyourvisualexperience.thisisamentaleffect.Youreyescontradictswiththevisualexperienceinmemory.Thisiscalledstaticmotionillusion.你确信你看到的？

Areyousureaboutwhatyousee?这两条线一样长吗？Dothelineshavethesamelength?凹凸墙角视觉幻觉2.rmvisionillusion2、视觉暂留

persistenceofvision人眼在某个视像消失后，还可以让这个物像在视网膜上滞留0.1～0.4秒左右。Persistenceofvisionisthephenomenonoftheeyebywhichanafterimageisthoughttopersistforapproximatelyfromonetenthtotentwenty-fifthsofasecondontheretina.1829年，比利时科学家普拉托提出。FirstfoundbyBelgiumscientistin1829.鸟与鸟笼

birdandcage嘉宝负像当你的眼睛离开那个白点时，就出现白的负象，即黑。当你重新把视点集中在原来的白点上时，它又变成白色的了。因此，当你的眼睛不断地在移动的时候，那些黑白点(正负像)也就在不断地变化。Thewhitedotseblackwhenmovingawayyoureyes.Ifconcentrateyourvisiononthewhitedotitself,it’llewhiteagain.Thecolorsofthedotsarechangingwiththemovementofyoureyes.人们在电影银幕上看到的物体运动，是由影片上一系列略有区别的静止画面产生的，这种运动叫动景运动。1832年J.A.F.普拉托设计和制造了第一个动景器（他把它叫做phenakistiscope（意为“骗人的视镜”））。后来的电影摄影技术和电影放映机，就是根据动景运动发生的原理提出和制作的。JosephPlateauofBelgiumisgenerallycreditedwiththeinventionofthestroboscopein1832.thetechnicalbaseofcinematographengineeringandcinematographisstroboscopicmovement.Plateau在解释似动的时候，依靠的是视网膜融合的概念。Plateauexplainedthatthisphenomenoncausedbyretinalfusion.电影——24格/秒的快速运动画面Movie,thefastmovingpicturesatthespeedof24framespersecond.书页上的动画.rm

animationinthebookpages3、似动apparentmovement人们把客观上静止的物体看成是运动的，或把客观上不连续的位移看成是连续运动的现象。Thesensationofseeingmovementwhennothingactuallymovesintheenvironment,anopticalillusionofmotionproducedbyviewingarapidsuccessionofstillpicturesofamovingobject.

20世纪初,德国心理学家M.韦特海默（格式塔心理学派的奠基人之一）用实验方法研究似动现象。《运动知觉的研究》Theearly20thcentury,SwisspsychologistMax.Wertheimerstudiedthephenomenonofapparentmovement.他相继呈现一条垂直a和一条水平b发亮线段a、b线运动.jpg当两条线段时距短于30毫秒时,人们看到a、b同时出现；ifthetimegapbetweentwolinesegmentsisshorterthan30milliseconds,peoplecanseea,batthesametimethere;当时距长于200毫秒时，人们看到a、b先后出现；ifitisLongerthan200milliseconds,peopleseea,bhasoccurredonebyone当时距约为60毫秒时,人们看到线段从a向b运动。ifitis60milliseconds,peoplecanseesegmentsatobmotion.韦特海默解释说，当视网膜受到两条线段的刺激后,会引起皮层相应区域的兴奋。在适当的时空条件下，这两个兴奋回路之间发生融合，形成短路，因而得到运动的印象。Wertheimerexplainedthatwhentheretinaacceptsstimulationcausethecorrespondingregionsofcortexexcitement.Attheappropriatespatialandtemporalconditions,whichoccurredbetweenthetwocircuitintegration,theformationofshortcircuit,andthusgettheimpressionofmovement.似动主要依赖于刺激物的强度、时间间隔和空间距离，这些物理参数的相互关系可以用科尔特定律来表示：

①当刺激间的时距不变时，产生最佳运动的刺激强度和空间距离成正比；

②当空间距离恒定时，刺激物的强度与时距成反比；

③当强度不变时，时距与空间距离成正比。Apparentmovementdependsontheintensity,theintervaltimeandthedistanceinspace.therelationshipbetweenthesephysicalparameterscanbeexpressedinColt'sLaw

4、似动的运用马.jpg

的马.gifQQ表情.gif

一巴掌.jpg摔椅子.jpg

神奇的影子.jpg

姑娘眨眼睛1.rm

姑娘眨眼睛2.rm

广告1广告2学生实验students’experiments打人g-a.gif摸天花板.jpg

猫摇头.jpg

空中飞人.jpg拍掌.jpg躺着滑行.jpg踢人.jpg踢球动.jpg

5、似动VS视觉暂留

apparentmovementsVSpersistenceofvision一般认为，电影的运动感是由视觉残留的作用所造成的。但是，当我们仔细观察各种电影现象时，就会发现依靠的并不是视觉残留，但我们的眼睛和大脑却依然接受它们是运动。Generallyspeaking,themovementofmovieistheresultofpersistenceofvision.Ifwestudythemoviescenes,we’llfindoutthatthisisnottrue.Butoureyesandbrainsstillacceptthemasmovements.例如，现代动画片中人物的运动是有省略的，动画创作者为了减省劳动，把画格之间的间歇运动改为1/12秒，进而改为1/6秒，于是形成了跳跃的或“错位”的感觉，但是我们依然认为这是一个连续的动作单元。这说明运动的幻觉依然存在。这是视觉残留所无法解释的。Forexample,thefigures’movementsinmodernanimationsareabbreviatory.Inordertolessentheworkload,animationproducerschangethelengthofframesfrom1/12secto1/6sec,whichleavesustheillusionofdislocation.Butwestillconsiderthepicturesasmovements,thatprovestheexistenceofmovements’illusion.Somehowthiscan’tbeexplainedbypersistenceofvision..格式塔心理学把所有这种现象认同的接受方式所造成的运动幻觉称做似动现象(Φphenomenon)。这就是电影运动的幻觉产生的原理，而视觉残留的作用仅仅是使那运动更为连贯流畅。TheGestaltpsychologyconsiderstheillusionofmovementsasphi-phenomenon.Thisisthereasonofthemovingillusionhappensinmovies.Andpersistenceofvisionmerelymakesthemovementmoresmooth.视听感知经验带来的心理认同和心理补偿，这是现代心理学对运动幻觉的解释。Perceptionofvisionandhearingbringsthepsychologicalidentityandpsychologicalcompensation.Thisistheinterpretationofthemovementillusioninmodernpsychology.现代心理学，包括格式塔心理学(GESTALT--形态)，认为人的感知有一种倾向，就是把他所感觉到的光波刺激变成可辨认的形式或形态。这就不仅是视觉残留的纯生理现象，而更重要的是，它涉及大脑的选择作用。Modernpsychology,includingGestaltpsychology(GESTALT-form),considersthatthereisatendencyinperson'sperception,thatis,heturnsthestimulationoflightwavesintoarecognizableform.Thisisnotonlyaphysiologicalphenomenonofpersistenceofvision,butinvolvesthechoiceofthebrain.当然，这只是对许多既经证实的幻觉现象的一种比较合理的假说解释。

Somehowit’sonlyamorereasonableexplanationforsomanyapprovedillusions.（1）视觉暂留说；（2）Φ现象似动说；（3）视觉暂留兼Φ现象似动说；（4）短程似动说。短程似动说的出现，颠覆了关于电影似动理论的传统解释。电影的真实的似动，实际上被人类的视觉系统误认为是真动。

——《应当正确解释电影的似动现象》

北京电影学院影视技术研究所

李

铭

最新成果——短程似动说

Thelatestconclution——short-wayapparentmovements似动与真动的感觉是通过不同的机理来实现的。

在跨度长达20多年的研究中，PaulKolers重点研究了区别似动知觉和真动知觉的几种方式。1971年他和J.R.Pomerantz测试了空间间歇现象对运动幻觉的影响。他们发现，当两个元素在一个屏幕上出现时，如果间隔时间适当的话，便获得了良好的运动错觉。（这是通常的二元显示器，是似动的限制情况。）当四个、八个或16个元素出现的时候，从来没有获得平滑连续的运动。然而，用32个、64个元素或更多的元素时，却重又获得了平滑连续的运动。因此，如果说运动的平滑连续性是呈现元素数量的函数的话，其结果将是条U形曲线。Kolers的结论是：“在空间分割和空间临接的闪光之间，似乎不存在必要的处理连续性。视觉系统构造两者运动感知的方式似乎截然不同。”这暗示多元素的或近距间隔的显示器可以和真动通过同样的机理来实现，而间隔更宽的显示器（通常用来演示似动的双闪光显示器）则使用了一种不同类型的处理。在所审查的研究的基础上，可以假定短程似动和真动皆为低感度神经运动检测器的适当激励。证据在指明在真动感知特性与短程似动的特性之间存在着明显的相似性的同时，似乎再次表明在似动的短程处理与长程处理之间存在着明显的区别。视觉系统能够区分长程似动和短程似动，但它似乎不能区分短程似动与真动。对于视觉系统来说，电影中的运动是真动。换言之，电影的真实的似动，实际上被人类的视觉系统误认为是真动。二、听觉感知特性

Characteristicsofauditoryperception听觉——外界声音刺激作用于听觉器官而产生的感觉。Auditoryperceptionisthefeelingarisesfromexternalsoundstimulationontheauditoryorgans.耳不仅是一个接受器，也是一个分析器，它在把外界复杂的声音信号转变成内在的神经信息的编码过程中起着重要的作用。Earisnotonlyareceiver,butalsoananalyzer.Itisimportantintheprocessofturningthesoundsignalsintonerveinformationinthebrain.

听觉器官对声源空间位置的判断。它主要依赖于双耳听觉，即对来自两耳信息的比较。在某些情况下，借助于头的转动，或利用一耳也可以相当精确地判断出声源的位置。

声波具有绕射和反射的特性，而人的两耳又对称在头的两侧。当声源位于头的一侧时,对于低频声来说,声波绕射到较远一侧耳时会有所延迟，两耳间的声学距离大约为23厘米,这相当于大约690毫微秒的时差。对于高频声来说，由于声波的反射，位于声影内的对侧耳，其强度将会有很大的衰减，由此而造成的两耳的强度差可达20分贝。因此，某一声音到达两耳时在时间和强度上的对比，成了判断声源空间位置的两个主要线索。

当然，在实际生活中上述各种线索并不孤立的，加之对周围环境的理解以及视觉和动觉等的帮助，人们对声源的方位就能作出精确的判断。声源的深度或距离知觉，也象声源的定位知觉一样，主要依赖于声音的强度、频谱的变化、波阵面的弯曲、反射声，特别是对声源以及环境的熟悉程度等因素Theperceptiontowardsthedepthanddistanceofsoundsource,justastheperceptionofsoundsourcelocation,primarilydependontheintensity,thechangesofsoundspectrum,thecurvingofwavefrontcurved,thereflectivesound,especiallythefamiliarityofsoundsourceaswellasenvironmentalfactors.听觉同样产生幻觉hearingalsohasillusion.声音从哪里来.rmwherecomesthesound苏珊演唱无画面.rmsusan’ssingingwithoutimages

苏珊演唱有画面.rmsusan’ssingingwithimages第二节电影？幻觉！

Chapter2movie?Illusion!可以说，电影是创造运动幻觉的机器，它创造的是现实的幻觉，但不是现实本身。Movieisthemachinemakesthemovementillusioninsteadofreality.由于电影运动的最基础的幻觉就吻合人的视觉机制本身所具备的天生固有的功能，Thebasicillusionofmovement…thefunctionsthathumanbeingsposses.因此它对人的视听感知产生十分独特的作用。Soithasauniqueeffectonhuman’s…怎么看，怎么像；怎么看，怎么不是。什么是幻觉？Whatisillusion?你看见了荧幕上没有的东西

youseewhatdoesn’texistonthescreen银幕形象是在观众脑子里完成的，是不可抗拒的，是人人都看得懂的。Figuresonthescreensarefinishedinaudience’smind,whichisirresistibl