多模态对外汉语课堂教学研究与案例分析

1、多模态对外汉语课堂教学研究与案例分析摘 要：模态是人与人之间交流的渠道和媒介， 人类的交 際活动具有多模态性。 以多模态话语分析理论为基础， 通过对中 国文化课中各种模态的研究， 探讨对外汉语课堂教学中加深外国 学生对汉语与中国文化的认知理解及融入中国文化语境的多模 态教学方式。关键词：模态 ;多模态话语分析 ;对外汉语教学 人们在使用语言的同时， 还会伴随许多非语言的交际。 在交 际过程中，交际双方将视觉、听觉、触觉、嗅觉和味觉等各种感 官调动起来， 以实现成功交际。 对外汉语教学是对外国学生进行 的以汉语作为第二语言或者外语的教学， 其中也包括中国文化的 教学。其根本目标是培养外国学生的汉

2、语交际能力。 一般在课堂 教学过程中， 汉语教师多采用汉语作为媒介语， 其优势是为外国 学生创造了目的语交际环境， 但不足是在认知方面， 学生用非母 语去学习复杂抽象的汉语与中国文化知识，难度较大。那么，汉 语教师如何帮助留学生认知汉语与中国文化， 增强他们对中国文 化语境的融入感？用什么样的方式讲好中国故事？本文以多模 态话语分析理论为视角，通过对中国文化课中各种模态的研究， 为上述问题提供一个新的解决途径。一、多模态话语理论（一）理论概述多模态话语分析理论兴起于 20 世纪 90 年代，该理论从系统 功能语言学理论那里借鉴了元功能理论， 认为图像、 声音、动画、 颜色等非语言符号同语言一样

3、都能够体现一定的意义， 实现三种 元功能，即概念功能、人际功能和语篇功能，主要分析交际符号 的不同模态、 各种模态之间的相互关系、 它们所体现的整体意义 及其特征和功能。李战子（ 2003）最先将多模态理论引入中国， 之后许多学者对多模态话语分析理论进行了深入研究。胡壮麟、 董佳（2006）通过对一次竞赛中PPT演示的语篇分析，探讨了 PPT在图像、音响等模态中如何参与主题意义的表达。顾曰国（ 2007）界定了“单模态话语”“双模态话语” 或“多模态话语” 。 朱永生（ 2007）认为，模态主要包括语言、图像、音乐和技术等 多种符号系统。张德禄（ 2009）指出，多模态话语是运用视觉、 听觉、

4、触觉等多种感觉，借助语言、声音、图像、动作等多种手 段、符号、资源等进行交际的现象。（二）模态的分类关于模态的分类， 新伦敦小组 （1996）将模态资源分为语言、 视觉、听觉、身势和空间模态。 Forceville （ 2009）将模态与人类 的五种感官系统联系起来， 分为五种模态： 听觉模态、 视觉模态、 触觉模态、嗅觉模态和味觉模态。张德禄（ 2009）将模态分为语 言和非语言两种。 语言包括伴语言和纯语言， 伴语言主要包括音 响、音调、字体和布局，而纯语言又分为声音和文字。能够表达 意义的非语言模态主要包括人们的身体动作和使用的工具、 环境等其他非语言手段。Thibault 将模态分为“

5、静态模态”和“动态模态” ，前者主要 包括文字、图片、表格、绘画等，后者主要包括面对面的互动、 动画、电影、使用录像机等。胡永近（ 2018）将模态系统分为两 个层次或三个层次的符号系统。 如交通信号系统是由意义和图符 两个层次组成的符号系统 ;而语言属于三个层次的符号系统，分 别为音系层、 词汇语法层和意义层。 胡永近又按维度将模态分为 四种：口语和书面语等线性的是一维的，平面图画是二维的，立 体图形和实物三维的，四维的则是动态的，例如电影、动画等。 上述研究者从不同角度对模态进行分类， 有助于人们了解模态的 各种特性。二、外语课堂教学中的多模态研究 （一）外语课堂教学模态分析近年来， 多模

6、态话语分析理论被广泛应用于各种研究， 多模 态外语教学就是其中之一。郭万群（ 2013）将英语课堂教学模态 分为八类，分别是听觉、视觉、触觉、嗅觉、味觉、附感觉、潜 感觉、视听双模。其中前面三大类又分为若干小类，并认为不同 的课堂教学主模态与辅模态是不同的。在英语课堂教学模态中， 听觉模态中的语音是学生听课及互 动中接受信息的主要模态。 副语言指交流过程中用来协助语言传 递信息、表达情感、表明态度的非言语行为，主要包括语调、口 音、语气、音色、音质、音强、语速、停顿、节奏、填充音、声 响等。 副语言有利于师生互动和学习情感迁移， 强化教与学的效 果。触觉模态中的计算机模拟， 是指通过触摸计算机

7、输入设备这 种感知方式来进行自主学习， 人机互动也是重要的学习模式， 它 有助于学生自主学习、 展示学生学习成果。 味觉与触觉模态很少 出现在课堂教学中， 但会辅助教学， 主要出现在附感觉与潜感觉 中。附感觉是指信息接受者在感受与媒介直接相关的话语模式的 基础上，通过其他感官呈现的模态形式，如听老师讲解“北京烤 鸭皮脆肉嫩”时，学生运用听觉模态的同时，会产生对烤鸭的味 觉，即附感觉。 潜感觉是指潜意识地感受到并未呈现出来的另一 种模态。如学生在听老师讲“北京烤鸭”时，头脑中也会出现烤 鸭的形象。视听双模，指课堂话语中“边听边看”的视觉、听觉 双模态并用。王祖嫘（2016）将美国中文沉浸式课堂的

8、话语模态分为四大 类：视觉、听觉、触觉和空间。其中视觉模态又分为文字、体态 语、图像、视频、表意符号 ;听觉模态分为有声语言、音乐、其 他音效、节奏韵律 ;触觉模态分为肢体感应、人人接触、人物接 触、环境接触 ;空间模态分为静态与动态。这些模态的运用主要 是针对儿童的汉语教学，具体、形象、感性的视觉模态更有助于 儿童的认知与理解。 其中视觉模态中的表意符号是指非图片或图 画的由教师在课堂使用中赋予新意义的符号， 比如用几何形状的 教具代表苹果、 蝴蝶等。 听觉模态中的节奏韵律是根据儿童机械 性记忆较强这一特点， 表现为与语言内容结合在一起的儿歌、 诗朗诵等形式。 触觉模态中的肢体反应是根据儿童

9、模仿能力强这一 特点，体现在学习过程中， 儿童经常模仿教师或视频录像中的肢 体动作 ;通过感知和协调自己的肢体，帮助学生理解意义。人人 接触是指师生之间或生生之间通过悄悄话、 拍手游戏、 角色表演 等实现的 ;人物接触是指让学生接触教具类的实物、卡片等;环境接触是使学生与课堂环境中的张贴画、海报等接触。 由 此可见， 无论是英语还是汉语的第二语言教学， 课堂教学都以听 觉、视觉、触觉作为共同的模态，其中听觉、视觉是最为主要的 模态，这在心理学的研究中也可以得到证实。项国雄（ 1997）指 出，各器官所获得的信息比例是不同的，其中通过视觉可获取 83%，听觉可获取 11%，触觉只能获取 1.5%

10、，嗅觉可获取 3.5%， 味觉只能获取 1%。研究数据显示，视觉与听觉可获取高达 94% 的信息，这也说明获取知识主要依靠听觉和视觉模态。（二）多模态的组合原则 多模态组合不是模态越多越好， 而应该考虑经济原则。 因此， 多模态组合的选择要达到最优化原则和经济原则之间的平衡。 张 德禄（ 2010）在研究多模态外语课堂教学设计中，提出最佳效果 原则，包括有效原则、适配原则、经济原则。多模态组合选择的 最终目标是发挥多模态组合优势， 促进外语教学质量的提高。 一 般来说，教师选择某种模态会基于以下三点的考虑：第一，是否 意义上能够补缺 ;第二，是否能起到强化的作用 ;第三，是否能引 起学生的关注

11、。这样多模态组合才能发挥更大的教学效果。三、中国文化课“京剧中的道具”多模态教学分析（一）课程概述 本课程是面向中级汉语水平的留学生开设的专业选修课。 通 过学习，在认知方面， 使学生能够了解京剧中交通工具的功能和 特点，并能运用句型“用表示”进行表达；在技能方面，提高学生运用汉语进行归纳总结与概括抽象的能力 ;在情感方 面，增强学生对中华文化学习的兴趣与热情， 以及对中国文化情 境的融入感。教学以教师有声语言为主模态，并使用PPT 多媒体辅助教学，呈现文字、图像、视频、符号等视觉模态与音乐等 听觉模态，并配以马鞭等实物道具，实现人物接触的触觉模态。 通过对“京剧中的道具”多模态教学情境的展示

12、，使学生掌握中 国戏剧区别于西方戏剧的一大特征， 即京剧艺术是通过高度抽象 的方式来营造各种意境的。（二）教学过程中的多模态运用1. 导入环节 教师通过语言导入京剧打龙袍车旗的视频。通过图像提 问、对比的方式，引导学生掌握“用车旗表示车”的表现方式。 导入环节运用的模态有：（1）听觉模态，主要以教师的有声语言为主，这是学生听 课的主要模态，如教师的导入语： “京剧有上百年的历史，是中 国三大戏剧之一，接下来让我们看一段视频，欣赏一下京剧。 ” ; 提问语：“这几个人在干什么？” “看一下中间这个东西，大家觉 得它像什么？” “大家再仔细看一下圆中间有什么？这一条 一条像什么？” ;讲解语：“看

13、一下右边的马车，是车轮 ，这 个道具在京剧里就表示车 。这个道具就是车旗 ，表示车的 旗子。京剧里用车旗表示车，在前边的这个人是坐在车里，后边 的人是驾车的人， 也就是现在开车的司机。 这个车旗上只画了车 轮，没有其他的部分，这就是京剧道具的一个特点。 ”（2）视觉模态，这一模态中的图像具有具体形象的提示作 用，使从未接触过京剧文化的外国学生能在头脑中形成对京剧的 初步认知。此外，教师在凸显“车旗”时使用了 “O”这个符号， 红色“O”可引起学生对重点部分的关注。（3）视听双模，边听边看、视听双模态并用，可促进学生 学习中国传统文化的积极性。2. 讲解环节 教师先播放打渔杀家使用船桨的视频，并

14、对视频内容进 行提问，引导出“用船桨表示船”的方式，并在PPT 中呈现出文字。在车和船的基础上，引导学生归纳总结“京剧里的交通道 具的特点”，即“用物体的一部分表示物体” 。这一环节中运用的 模态有：（1）视听双模，能够引起学生对“船桨”的关注。（2）听觉模态，教师的语言引导、讲解有助于学生对视频的进一步理解。如提问语： “这两个人在干什么呢？” “他们手里拿的是什么？” “刚才我们看了京剧里的车和船，车旗用两个轮 子表示车， 船桨表示船， 大家觉得京剧里的交通道具有什么特点 呢？” ;讲解语：“这个叫船桨 ，京剧里用船桨表示船。他们 只有浆，没有船的其他部分。 ”“京剧交通道具的特点是：用

15、物体的一部分表示物体。 ”（3）视觉模态，通过图片的对比，有助于学生理解京剧中 “用船桨表示船” 这一特征。 PPT 中文字的呈现使学生对汉字产 生视觉感知， 有利于对汉字字形的记忆， 文字也是学生接受知识 信息的主要模态。3. 运用环节 教师通过提问，引起学生对“马”这一古代最为重要的交通 工具在京剧舞台上呈现方式的思考， 这是对 “用物体的一部分表 示物体”的逆向思维的引导与培养，即“马是用马的一部分呈现 出来的”。通过图像、肢体动作启发学生发现正确答案。虽然学 生回答有误，但教师仍给予鼓励。并让学生使用“马鞭”道具进 行表演。通过观看追韩信的视频，加深对“用马鞭表示马” 的认知与理解。在

16、这个过程中运用的模态有：（1）听觉模态，有声语言是课堂互动中接受信息的主要模 态。如提问语：“在古代，马也是非常重要的交通工具，京剧里 用什么表示马呢？” “会不会让演员骑着马上舞台？” “刚才讲了 京剧是用物体的一部分表示整个物体， 那么是用马的哪部分表示 马呢？”“看这三个图，是用哪部分表示马呢？为什么是马头 呢？” ;讲解语：“这就是京剧里的马，這叫马鞭。京剧里就用马鞭表示马。”“没错，都有毛。但是你们发现了吗？马鞭上的毛多 其实马鞭就是马脖子上的毛， 用来表示一整匹马。 ”“年纪大的人 骑马比较慢，比较稳，这出京剧叫追韩信 。”（2）视觉模态，图像的视觉感知可以帮助学生理解重点、 难点

17、内容。“马鞭对应马的哪一部分”是教学中的难点。教师通 过三张马背鬃毛的图像来展示出由远及近、 由模糊到清晰的视觉 效果，使原本静态的图像产生了动态的效果。 教师通过肢体动作 向学生展示了马鞭使用的视觉效果。（3）触觉模态，是通过人物接触实现的，即让学生手持马 鞭道具， 这样的接触能够激发学生的兴趣， 并产生相应的认知或 心理效应。（4）视听双模，作为认知负荷理论的重要假设和研究成果， 这是积极学习的重要体现。 通过观看视频， 让学生观察不同角色 “年轻人”与“老年人”使用马鞭时的不同动作。 4. 结课环节主要采用听觉模态中的有声语言模态，对教学内容进行总 结，并布置观看视频的作业。如结课语言：

18、 “如果大家感兴趣， 课后可以上网看一下： 是谁在追韩信？他为什么追韩信？看看里 面是如何骑马的。好，今天的课就上到这里。 ”上述分析表明， 听觉模态中的有声语言仍是对外汉语课堂教 学的主要模态， 听觉模态中的副语言体现在对外汉语教师的发音 夸张、语速较慢、停顿较多且时间较长等方面。由于教学对象是 外国学生， 为了让学生更好地理解说明性的语言， 在进行有声语 言表达的同时， 教师会附带大量的手势、 动作和表情等肢体语言， 这些属于视觉模态。 文字、符号、图片、 图像、视频等视觉模态， 以及人物接触的触觉模态等多模态的运用都应参与到课堂教学 主题意义的表达中来。这些多模态组合的设计遵循了有效原则

19、、 适配原则与经济原则， 在意义上能够互相补缺， 并在教学中起到 强化的作用，能引起学生的关注， 帮助学生理解中国文化的内涵。由此可见，多模态对外汉语课堂教学设计可以促进外国学生 对汉语与中国文化的认知理解， 提高他们的学习兴趣， 增加学生 对中国文化语境的融入感。 这种多模态的课堂教学设计不仅能使 外国学生“读懂”中国文化，对于我国青少年了解中国传统文化 也是具有实践意义的。 多模态话语分析理论从语言学及语言教学 的角度， 为如何在汉语课堂上讲好中国故事、 传播中国文化提供 了一个新的研究视角。而根据教学对象的年龄、国别等特征，把 中国文化教学的具体内容与多模态教学模式相结合， 探讨不同模 态组合的最佳效果，将是我们今后的研究方向。参考文献：1 Forceville ， C.Non-verbal and Multimodal Metaphor in a Cognitivist Framework ： Agendas for researchA.in C.Forceville & E.Urios-Aparisi （ Eds.） ，Multimodal Metaphor