论文部分内容阅读
随着多媒体技术的迅速发展，多媒体学习作为一种新兴而有效的方式被越来越多的运用于听力教学活动中。根据Paivio的双编码理论和Baddeley的工作记忆模型，视频加字幕的多模态呈现方式可以充分利用学习者的多种学习通道，语言信息和非语言信息在工作记忆中的同步加工可以促进听力理解。Sweller在认知负荷理论中提出合理同步呈现多媒体信息可以减少学习者分裂效应，减小认知负荷，提升学习效果。Mayer在多媒体学习认知理论中提出多媒体信息呈现原则，其中时间比邻原则即指听觉和视觉信息在时间上的同步呈现可以提升学习效果。本文认为时间比邻原则是字幕设计的基本原则之一。由于计算机、多媒体技术的进步，由物理性语音延迟造成的语音与画面、文字的比邻不足现象不再是主要问题，而教学设计中的多媒体信息与字幕处理失当则会造成语言时间比邻不足。如一定时间内呈现的全英字幕的可回看性与关键词英文字幕的不完整性会造成字幕与音频内容的时间比邻不足；汉语字幕与原语音频的语言不一致性；归化与异化翻译的语序与原语音频的不对应性也会造成字幕与音频内容的时间比邻不足；音频语速快或慢导致的字幕延迟或提前呈现也会造成字幕和音频内容的时间比邻不足。近年来报告的实验研究证明了比邻原则的优势效应，但也有研究证明关键词字幕，汉语字幕，提前字幕等时间比邻不足的情形并不影响甚至还促进了听力理解。据此，本文假设时间比邻原则在字幕设计中具有条件特性，不同语言因素造成的时间比邻不足对不同材料的听力结果产生不同的影响。本文将主要探讨三种语言性时间比邻不足现象：字幕长度，字幕译语风格，音频语速与字幕匹配造成的时间比邻不足对于听力理解的影响，讨论时间比邻原则的条件特性问题。本文依此设计了六种字幕匹配方式，全英文字幕，关键英文字幕，“同构语序”译语字幕，“异构语序”译语字幕，慢语速超前呈现字幕和快语速滞后呈现字幕。本文共有三个研究问题：1）字幕设计中不同语言性因素引起的时间比邻不足对于听力理解的影响？2）同一语言因素引起的时间比邻不足对于不同难易度材料的听力理解的影响？3）外语带字幕的视听作业时间比邻原则的条件特性或者规律是什么？实验选取六段BBC新闻作为听力材料，通过对几段新闻文本的定性定量及学习者和任务内容变量的分析确定材料难易度，共选出三篇较难和三篇较易材料。每段音频共有两种字幕呈现方式，六段音频以不同字幕匹配方式交叉组合成两组。实验对象为江南大学外国语学院94名英语专业大三学生，分为两组参加试验。每段材料的听力测试包含五个多项选择题和自由回述，通过实验数据收集和处理分析，本研究拟就以上三个研究问题作出初步回答。（1）字幕长度，字幕译语风格引起的时间比邻不足不会对听力结果产生显著影响而较快语速增加了材料难度使延迟字幕与提前字幕对听力结果产生显著性差异。话语呈现比邻不足对听力理解的影响更多的取决于材料的难易度，而不是造成比邻不足的语言因素。（2）字幕长度，译语风格和音频语速引起的时间比邻不足均会因材料难度不一而产生不同的显著差异。每种字幕匹配方式在不同难易度材料中产生不同的绩效。汉语字幕在不同难度材料中均呈现促进作用。关键词和提前字幕在较易材料中能发挥促进效益。时间比邻原则要求根据不同材料应用不同语言形式或内容对应的字幕匹配方式。（3）时间比邻原则的实现具有条件特性，语言因素如字幕长度，译语风格和音频语速造成的语言比邻不足对文本难度和学习者认知负荷产生影响，导致字幕匹配方式产生不同的听力绩效。视听作业中字幕的比邻效应不是单独发生作用，而是和文本难度，任务难度，任务目标，学习者加工方式，多媒体信息其他呈现原则共同作用于听力结果。在多媒体学习设计中应充分考虑到时间比邻原则的条件特性和不同字幕呈现方式在不同材料中对于听力理解的影响，以便更加合理有效地设计字幕信息发挥其作为语言信息对于外语学习的作用,提高中国英语学习者语言学习和听力理解能力。