摘要:

多模态性的研究旨在说明人们在表达意义时对不同符号特性的掌握和运用,以及对不同符号体系之间相互关系的了解.随着计算科学的发展,多模态小品在本世纪开始流传.所谓多模态小品,是作者借用"小品文"的概念命名的,即生动活泼的说理抒情的短篇散文或作品,但它是多模态的.这些小品中的模态有不同的组合,如文字、乐曲、图象、动作.对同一语篇意义的表达可以采用不同模态.这些模态可以分别使用,也可以同步使用.在多种模态同步使用的情况下,其中一至二种模态是主体的,其余模态起陪衬作用.人们从一种模态发展为更多地使用另一种模态,这与社会进程是分不开的.