论文部分内容阅读
全国有600多所院校设立了商务英语专业或在英语专业中开设了商务英语方向,截至2012年,教育部已正式批准62所高校设立商务英语本科专业。商务英语测试开发和效度研究对于保证专业教学的有效性,改进专业教学质量和提高学生语言能力具有积极的意义。由于起步较晚,国内商务英语专业测试开发尚处在起步阶段,缺乏系统完善的商务英语能力考核体系。商务英语测试开发的首要问题是,定义所要测量的语言能力,这是测试开发的理论基础。为了使测试能够更好地服务于专业英语教学,测试开发者必须保证所开发测试的效度。正是在上述背景下,本文选择商务英语测试开发这一课题,重点探讨商务英语话语能力的构念界定和测试开发。本论文主要有三个目的:一、通过对语言教学与测试理论的梳理,提出“基于体裁的商务英语话语能力”构念。二、围绕拟测构念“基于体裁的商务英语话语能力”,开发和设计标准化学业测试——商务英语专业八级考试(TBEM-8)。三、提出社会认知视域中的整体效验模式,对所开发的测试进行效度研究。根据以上研究目的,本论文围绕商务英语专业八级考试的开发和设计研究以下内容:第一,测试构念的界定。本论文在文献分析的基础上,从话语共同体与实践共同体出发,构建商务英语话语研究的框架,并在该框架的指导下详细研究了商务英语专业的体裁谱系及各个体裁的特征。基于各种商务英语专业体裁,界定“基于体裁的商务英语话语能力”构念,从文本知识、语用知识、体裁知识、话题知识、情境组织能力五个方面具体化。“基于体裁的商务英语话语能力”是指商务英语专业毕业生应具有扎实的英语语言基础和熟练的综合语言应用能力,同时具有较高的专业思维、宽阔的国际视野和较强的国际商务话语能力,能够在专业培养的学术英语及职业英语领域内,即在特定商务英语话语研究及国际商务活动领域内,参照应用语言学研究共同体及国际商务实践的规则与惯例,结合特定交际任务的语境因素,运用情境组织能力及文本、体裁和语用知识,结合自身素质,通过专业体裁的建构、解释和使用,进行意义协商,有效完成书面和口头交际任务的跨文化沟通能力。第二,测试开发和设计。为了保证所开发测试的科学性和可行性,本论文参考与借鉴美国教育考试服务(ETS)和英国剑桥大学ESOL考试中心等著名语言能力评估机构的研究成果,提出商务英语专业八级考试开发的设计原则和开发流程。商务英语专业八级考试的设计目标是,能够科学地反映考生”基于体裁的商务英语话语能力”,以保障专业教学的质量,为社会培养合格的商务英语人才。考试开发遵循以下几个原则:明确考查的知识和能力范围;确保测试任务的真实性和代表性;确保考试的信度和效度;确保对商务英语专业教学的正向反拨作用。第三,测试的效度验证。商务英语专业八级考试是专业教学的重要环节,而考试效度的检验和提高则是保证考试有效性的重要问题。本论文提出社会认知视域中的整体效验模式,基于效度整体观(Messick,1989)和社会认知效验模式(Weir,2005),结合考试流程,从考试构念、考试内容、效标关联、评分结果和考试后效这五个方面收集证据,检验TBEM-8是否能够有效地测量所界定的目标构念。构念效度研究的对象是五所大学参加TBEM-8范型试卷考试的341名考生。分数数据分析包括测试内部一致性分析和测试构念的探索性因子分析;作文文本分析重点考察考生作文的语篇特征;定性研究通过口述报告揭示考生的写作过程。研究结果发现:就题目的测量学属性而言,TBEM-8各分测试与总分之间有较强的相关,表明测试题目具有同质性;而分测试之间的相关程度中等,表明它们分别测量了构念的不同方面。测试的维度方面,因子分析能够提取三个公共因子,即听力能力、阅读能力和体裁能力。这说明TBEM-8与测试构念模型的拟合程度较好。口述报告的分析显示,高分组考生在写作过程中体现了测试开发者所预期的行为,其写作行为与写作测试所要考核的技能基本吻合。这些证据总体上说明,TBEM-8能够检测构念相关能力,具有比较好的构念效度。内容效度研究通过问卷调查,收集六位专家对于TBEM-8测试内容合适性和代表性的评定意见,接着采用统计分析方法计算内容效度指数和测试任务关联度。研究结果表明,TBEM-8具有较好的内容效度,测试题目能够合理地反映考试大纲规定的测量内容范围。效标关联效度研究选取学生的专业课平均成绩、任课教师对学生英语能力的排序和剑桥商务英语考试(高级)成绩作为TBEM-8的效标,研究对象为商务英语专业2008级的163名学生。研究结果发现:TBEM-8成绩能够反映学生真实的商务英语话语能力,考试具有良好的效标关联效度。评分效度研究重点考察翻译和写作测试评分结果的可靠性。参加实验的对象为担任TBEM-8翻译和写作评分任务的八名评分员。统计结果表明,评分员间的相关系数在0.80以上,配对样本T检验显示不同评分员的评分结果无显著差异。由此可以得出结论:TBEM-8翻译和写作测试具有较高的评分效度,评分结果是可靠有效的。后效效度研究通过问卷调查和访谈的方法,分析TBEM-8对商务英语专业教学和学习的反拨作用。341名学生参加了TBEM-8范型试卷考试并填写了“考试后效学生调查问卷”,共收回有效问卷318份。访谈对象为商务英语专业的15名在职教师。问卷和访谈结果表明:学生和教师认为,TBEM-8将对商务英语专业教学与学习具有良好的反拨作用,考试的实施能够强化和促进教学目标的实现,考试结果可以为教学与学习提供有价值的反馈信息。本论文由八章构成。第一章是引言,主要对所研究问题的背景、目的和意义进行介绍。本章概述了商务英语专业教学和测试理论与实践的发展历程,指出商务英语测试开发和效度研究具有现实的必要性。需要对商务英语测试进行深入的研究,使其能够客观准确地测量教与学的实际水平,对教学起到正向反拨作用。第二章是文献综述部分,目的是为本研究提供理论基础和方法依据。本章对语言能力有关理论进行了较为广泛的评述;对效度、构念、构念效度、效度验证等概念进行了讨论;对国内外语言测试实践进行了简要回顾,探讨这些测试的成功经验对商务英语测试开发和设计的启示。第三章介绍了研究的设计和采用的分析方法,具体包括本研究的整体设计思路、商务英语专业八级考试的开发流程和考试效度验证的研究框架。第四章和第五章是本研究设计与实施的理论基础。第四章对商务英语话语共同体、商务英语专业体裁研究和基于体裁的商务英语专业话语实践展开深入讨论。在此基础上,第五章提出“基于体裁的商务英语话语能力”构念框架。第六章介绍了商务英语专业八级考试的设计和开发过程,详细描述了从测试设计、操作到实施这三个阶段的各主要环节。第七章描述了商务英语专业八级考试的效度验证过程。效验研究基于效度整体观,以构念效度为核心,从内容效度、构念效度、效标关联效度、评分效度和后效效度五个方面收集和分析效度证据。第八章是结论部分,总结了本研究所得到的发现及获得的结论,对使用的研究方法和过程进行了评述。本章还指出了本研究对于商务英语测试的贡献和不足之处,并提出了与本研究相联系的未来研究方向和思路。