24FLCJan
2009Vol
1(GeneralSerialNo
27)引言在话语分析理论如火如荼的发展中,人们发现单纯从语言的角度已经不能对话语进行深入全面的分析和研究,因为话语的意义中的一大部分是由非语言因素体现的,如伴语言特征:音响度、声调、语调、音速等,身体特征:手势、身势、面部表情、动作、移动等,非身体特征:PPT、音响设备、网络、实验室、周围的环境因素等
在这种情况下,交际不再是利用一种感官进行,如说话是听觉,书写是视觉,盲文是触觉等,而是用两种或者多种感官同时进行,如用PPT上课则是视觉与听觉同时进行的;模拟与讲解则是听觉、视觉和触觉同时进行的
以这种交际方式产生的话语就是多模态话语
然而,如何在话语分析中把多种媒体和多种模态结合起来进行分析解读是现代语言学研究,特别是话语分析研究应该特别注意解决的问题
本文首先对多模态话语研究动态进行了简单述评,然后根据系统功能语言学理论尝试建立一个多模态话语分析的综合框架
多模态话语指运用听觉、视觉、触觉等多种感觉,通过语言、图像、声音、动作等多种手段和符号资源进行交际的现象
这种现象司空见惯,自古有之,如诗歌配上图画,说话时打手势做鬼脸,使用不同口气和腔调等
但话语的多模态性一直没有受到人们的重视,只是多模态话语分析综合理论框架探索张德禄中国海洋大学到了现代语言学研究中,人们才开始从非语言特征和伴随语言特征的角度研究它,不过只作为一种语言的辅助表达系统,没有作为意义表达模态来研究
随着多媒体话语的产生,人们直到最近几年才逐步认识到其重要性,将其作为一个独立的学术领域进行研究
在多模态话语分析方面最早的研究者之一是R
Barthes,他在1977年发表的论文《图像的修辞》(Rhetoricoftheimage)中探讨了图像在表达意义上与语言的相互作用;Kress,G
&vanLeeuwen,T
(1996;20