多模态、多媒体视阈下的大学英语口语教学

【摘要】现代多媒体技术的发展为多模态话语交际提供了新的环境，创造了新的条件，也为多模态交际提供了新的途径。本文首先对多媒体与多模态两个概念进行区分；然后从多模态话语分析理论着眼，在多媒体技术条件下，探析大学英语口语教学中的多模态符号及其关系；最后推导出模态选择遵循的原则，以期优化教学效果，提高英语口语表达能力，促进大学英语口语教学。

【关键词】多模态；多媒体大学英语；口语教学；

科技的日新月异及媒体的普及丰富了信息的传递方式，如音频、视频、肢体动作等。由此，多媒体技术和多媒体设备也广泛应用于课堂教学中，使得传统课堂变得多模态化（multimodality），各种符号资源如语言、图像、声音、颜色、空间结构等被用来完成意义表征，实现教学目的。与此同时，人们也越来越关注多模态与多媒体对教学的影响及如何趋利避害。本文首先对多媒体与多模态进行区分；然后讨论在多模态话语理论框架下，现代多媒体技术在大学英语口语教学中的应用，探析口语教学中存在的多模态符号；从而推导出大学英语口语教学中模态选择应遵循的原则，以最优化口语教学的效果。

一、多模态与多媒体

1.多模态

模态指人类通过感官（如视觉、听觉、触觉等）同外部环境（如人、机器、物件、动物等）的互动方式。单个感官的互动叫单模态，两个的叫双模态，三个或以上的叫多模态。这个定义跟计算机科学里研究人机互动时对模态的定义接近（参见Hill，2000）。依此定义，正常人之间的互动都是多模态的。

2.多媒体

物理媒介指装载内容或信息的物理介质，如纸张、磁带、磁盘、光盘、硬盘等。

逻辑媒介指物理介质上承载内容或信息的编码手段，如文字、模拟音频流、数字音频流、图像、视频流等。一般用逻辑媒介来界定某个内容是否是多媒体材料。单逻辑媒介的叫单媒体，两个的叫双媒体，三个或以上的叫多媒体。如：声音录制在磁带上是单媒体材料，文字、图像印在纸介上是双媒体材料，附带图像、字幕、声音的计算机是多媒体材料。[1]

模态与媒体是形式和实体的关系。对多媒体与多模态的认识，不仅利于加深人机的互动，尤其是计算机辅助教学在理论上的认识，而且也利于为设计计算机辅助教学课件提供理性化的依据。

二、多模态话语分析理论

多模态话语指运用听觉、视觉、触觉等多种感觉，通过语言、图像、声音、动作等多种手段和符号资源进行交际的现象。[2]

多模态话语分析理论主要基于系统功能语言学理论，由五个层面的系统组成：（1）文化层面，包括作为文化的主要存在形式的意识形态和作为话语模式选择的体裁结构潜势；（2）语境层面，包括由话语范围、话语基调和话语方式组成的语境构型；（3）意义层面，包括由几个部分组成的话语意义，即概念意义、人际意义和谋篇意义；（4）形式层面，实现意义的不同形式系统，包括语言的词汇语法系统和其他各种模态的表意形式、语法系统以及各种模态的语法之间的关系；（5）媒体层面，是话语最终在物质世界表现的物质形式。[3]多模态话语主要在形式和媒体层面，扩大了语言学的研究范围。另外，系统功能语言学的社会符号学理论使它把语言作为社会符号所具有的功能延伸到除语言外的其他符号，并把包括语言在内的各种符号看作是各自独立而又相互作用的符号资源，在分析语言特征的同时强调图像、颜色、声音和动作等视觉、听觉和行为方面的符号模态在话语中的作用。[4]

三、大学英语口语教学中的多模态符号

大学英语口语教学以听觉模态符号和视觉模态符号为主。两种模态相互配合，相互协调，共同促进英语口语教学。

1.听觉模态符号

口语教学旨在提高学生的口语交际，而交际需要听觉系统识别发声器官发出的模态符号。口语教学中最重要的模态符号，主要有：口语语言符号，包括教师讲课的元口语语言符号，学生练习发出的口语语言符号，多媒体播放的电子音频符号及音调、音频、语气等次级要素；音乐符号即创设情景或营造氛围；其他声音符号指外界噪音或特制音效。

2.视觉模态符号

多媒体条件下的大学英语口语教学中视觉模态符号丰富，是对听觉模态的补充。主要包括：书面语言符号，由粉笔生成的语言符号和通过 PPT等呈现的字幕语言符号；图像符号指图片以及动态的视频图像符号；肢体语言符号，主要指教师授课时伴随的肢体动作，如表情、眼神、五官表达的视觉模态符号和手势、姿势、身体朝向、走路等视觉模态符号，肢体语言符号运用的时机、幅度的大小和频繁程度等对意义传达具有辅助作用；课堂布局，合适的教学空间、桌椅的摆放方式等也是视觉模态符号。

四、遵循多模态选择原则，优化口语教学效果

口语教学中，多模态话语符号的整合有两种效果：一是多模态协调使用，在意义构建中相互补充，最大化教学效果；二是多模态不协调使用，对意义构建起消极作用，甚至会对意义传递具有抵消作用。因此，为了更好地发挥多模态符号构建话语意义的作用，促进大学英语口语教学，对模态的选择应遵循以下三个原则：

1.为英语口语教学提供教学情景和便利条件

口语教学旨在培养学生在真实场景中的交际能力。而传统的外语口语教学，受限于技术条件，无法提供逼真的交际场景，教师只能模拟教学。多媒体凭借图像、录像、声音等为学习提供真实语境，这既能使学生认识到真实交际语境的现状，在近乎真实的情景中学习交际，又利于克服“文化休克”现象。

2.为多模态话语交际提供多元化意义表达方式

现代多媒体技术发展的一个基本理念是多模态交际使受话人通过多通道获取信息，比单模态话语更易使受话者理解和记忆。如：多媒体技术为教师教学和学生学习搭建平台，“The earthquake occurred in Si chuan..”教师在讲解时可以用语音提示，也可以借助PPT呈现地震的图片，还可以播放与地震相关的声音，即强风声，哭喊声及山崩地裂声等等。这种语言与非语言的搭配使用，刺激了学生的感官，引起了注意，利于提高教学的效果。

3.为英语口语教学提供辅助条件

这儿的辅助指现代技术从内部提供动力，使教师和学生从内心愿意从事这种活动。特殊的东西、显眼的东西或幽默的东西更能引起兴趣，激发学生参与的热情，外语教师要充分利用多媒体创设语境、开展任务来活跃课堂气氛，提高口语教学效果。

参考文献：

[1]顾曰国. 多媒体、多模态学习剖析[J]. 外语电化教学，2007（4）

[2]张德禄. 多模态话语分析综合理论框架探索[J]. 中国外语，2009（1）

[3]张德禄. 多模态话语理论与媒体技术在外语教学中的应用[J]. 外语教学，2009（4）

[4]朱永生. 多模态话语分析的理论基础与研究方法[J]. 外语学刊，2007（5）