卓尔高考网

2014年江苏省高考英语试题听力部分的效度分析,2016江苏英语高考听力答案解析

感谢您对“永达英语”的关注!

2014年江苏省高考英语试题听力部分的效度分析,2016江苏英语高考听力答案解析

00-1010宋德龙

基于Bachman的交际语言能力模型的语言能力、策略能力和语言应用情境的分类框架,对2014年江苏高考听力部分的内容效度和结构效度进行了分析。通过对《普通高中英语课程标准(实验)》、考试说明和交际语言能力框架的对比分析发现,2014年江苏高考听力部分具有一定的内容效度和较高的结构效度,但在试题的内容选择上还存在一些问题。在此基础上,笔者建议未来的命题者应注意内容选择的平衡性和广泛性,而语文教师应认真按照课程标准和考试说明的相关要求开展教学。

关键词:交际语言能力;听力部分;内容有效性;结构效度

一.导言

nS.JszHuoEr.CoM

语言能力包括输入能力和输出能力,没有输入能力就不可能有输出。然而,人类语言交流的起点来自于听,所以听力能力是所有语言能力中最基本也是最重要的。由于大型考试对教学和社会的反拨作用(舒云祥,2001: 65),NMET英语听力试题的质量直接关系到考生和家长的切身利益,并对教师的教学方法和学生的学习方法产生深远的影响。因此,对2014年江苏高考英语听力部分的测试效度进行评估,具有深刻的现实意义和教育意义。

试卷的质量和效度,即试卷的有效程度,是一个重要的标准。Oller (1979: 26)曾经指出,如果一个测试没有有效性,那么它就不能被称为测试。有效性的重要性可见一斑。拉多(1961: 322)认为有效性的本质是一种关联。如果一个测试测量了它想要测量的东西,那么它就是有效的。希顿(1975: 153)将测试的效度分为四种类型:表面效度、内容效度、结构效度和经验效度。其中,经验效度需要基于数据进行分析,难以获得,而面子效度是指考生对试题的主观感受。由于高考的主要题型已经固定了很多年,所以它的面效度并没有太大的变化。因此,本研究将从内容效度和结构效度两个方面对2014年NMET的听力部分进行分析。

2014年江苏省高考英语试题听力部分的效度分析,2016江苏英语高考听力答案解析

二、2014年江苏高考英语听力考试

为了分析整个听力部分的好坏,我们首先需要了解每个听力题目的考查情况。表2.1是作者对每道题的具体分析,包括题号、考试要点、考试内容、考试题型以及与《普通高中英语课程标准(实验)》(以下简称《课标(实验)》)对应的部分。

2014年江苏省高考英语试题听力部分的效度分析,2016江苏英语高考听力答案解析

2014年江苏省高考英语试题听力部分的效度分析,2016江苏英语高考听力答案解析

nS.JszHuoEr.CoM

三。江苏省2014年NMET听力部分效度分析。

(一)内容效度分析

内容效度是指测试主题样本对被测内容和行为领域的代表性(于今,2005: 170)。江苏高考英语试题的考试内容和范围由《课标(实验)》和当年考试说明确定。因此,内容有效性的分析应通过将测试内容与《课标(实验)》或测试说明进行比较来进行。

首先,根据《普通高等学校招生全国统一考试(江苏卷)考试说明》(以下简称《考试说明》)(江苏省教育考试院,2014: 2)对听力的要求,考生应能听懂熟悉日常生活的简短对话和独白,并应能:

(1)理解要旨和实质;

(2)获得事实和具体的信息;

(3)对听到的内容进行简单的推断;

nS.JszHuoEr.CoM

(4)理解说话人的意图、观点或态度。

通过对表2.1中听力部分的逐题分析,20道子题分别测试了考生捕捉细节(8道题)、推断信息(9道题)和辨别观点、意图和态度(3道题)的能力,与考试说明中规定的要求相吻合,体现了听力部分一定的内容效度。但是这个测试没有涉及到获取题目主旨的能力测试,缺乏全面性。同时,三个能力点之间的平衡性相对较低,细节题和推断题较多,主旨题和态度题较少,都降低了听力部分的内容效度。

其次,内容效度要根据《课标(实验)》对语言技能的具体要求。从表2.1的信息可以看出,2014年江苏高考英语听力部分涵盖了

了《课标(实验)》中对听力技能测试所规定的大部分要求,内容涉及到各级别的一些要点,反映出了听力部分具有一定的内容效度。但是,在《课标(实验)》中从六级到九级所列出的共21项指标中,只有7项指标被涉及到,占三分之一,这说明试题涉及面较窄,重复考查点较多。内容效度实质上是指考题对想要检测的内容或行为范围取样的适当程度,根据美国学者诺曼韦伯的分析测验与课程标准之间是否一致的理论模式,测验题目至少覆盖内容标准50%的知识点, 知识广度一致性才是可以接受的(Norman,2007)。2014年江苏卷听力部分33%的覆盖率远远低于50%,这说明从与《课标(实验)》吻合程度的角度来说,听力部分的内容效度不高。

nS.JszHuoEr.CoM

综上所述,2014年江苏省高考英语听力部分具有基本的内容效度,但是内容效度不高,尚有改善空间。

2014年江苏省高考英语试题听力部分的效度分析,2016江苏英语高考听力答案解析

(二)结构效度分析

结构效度也称构念效度,是指测试是否以测试者所倡导的语言观和语言学习观为理论根据为命题依据(赵发成,2000)。《课标(实验)》规定,我国英语教学的目标是发展学生的综合语言能力(教育部,2003:6)。这实际上和Bachman(1990:85)提出的交际语言能力一脉相承。因此,为了弄清楚2014年江苏省高考英语听力试题是否考查了学生的交际语言能力,从而判断其结构效度的高低,需要对交际语言能力结构中的主要要素加以分析,并将它作为结构效度分析的理论框架。

Bachman(1990:85)所提出的交际性语言能力模式(Communicative Language Ability)包括语言能力、知识结构、策略能力、心理生理运动机制和语言使用场景等(见图3.2.1)。知识结构指的是学习者对世界的知识,非学习者的语言知识,心理生理运动机制也非语言活动所独有,因此对语言测试题的评价通常可以从语言能力、策略能力和语言环境三个方面来进行。

2014年江苏省高考英语试题听力部分的效度分析,2016江苏英语高考听力答案解析

语言能力由组织能力(organizational ability)和语用能力(pragmatic ability)组成(见图3.2.2)。组织能力包括语法能力和语篇能力,是语言方面的掌握情况。语用能力涉及到语言使用与交际环境之间的关系,由语言功能能力和社会语言能力两方面组成。

2014年江苏省高考英语试题听力部分的效度分析,2016江苏英语高考听力答案解析

策略能力包括评价策略(assessment strategy)、确定目标策略(goal-setting strategy)、制定计划策略(planning strategy)和执行计划策略(execution strategy)四个部分。评价策略包括对语言情境和自身语言能力的评价,以及对交际目的达成程度的评价。确定目标策略主要是确定自己要做什么,是对任务的目标定位。制定计划策略就是要对自身的语言知识、情感图式和知识图式等加以计划,以便更加经济高效地完成任务。执行计划则是考生运用自身心理生理机制结合交际情境而进行实际操作的过程。

交际性语言能力观认为,上述策略能力、语言能力会在不同的运用情景中交织在一起,彼此间相互作用,相互影响,并共同发挥作用,影响着交际的最终效果。因此,对试题结构效度的评价可以从Bachman(1990)的交际语言能力、策略能力和情景设置三个部分来进行。

根据前文的分析,2014年江苏省高考英语试题中的20道听力小题考查了学生的信息捕捉能力、信息综合能力和信息推理能力,这实际上对应了交际语言能力中的语法能力、语篇能力和语用能力。首先,要想捕捉听力中的信息,需要有语音、词法和句法知识。例如:

nS.JszHuoEr.CoM

1. What does the woman want to do?

A. Find a place. B. Buy a map.

C. Get an address.

听力原文为W: Excuse me. This is the address. How do I find it?

M: Right. You’ll need a street map. Here’s one, and I’ll show you where it is.

问题是询问女士将要做什么。在完成此题任务的过程中,考生需要听懂“How do I find it?”和“I will show you where it is.”这两个关键句子,还要听清address,map和place等关键词汇。这也正是Bachman理论框架中所包含的语法能力。

对于语段、语篇信息的捕捉需要有语篇能力和语用能力,可以第20题为例:

20. What kind of life does the speaker seem to like most?

A. Busy. B. Colorful. C. Quiet.

该题既考查了信息对比和综合分析能力,也考查了信息转换能力。此题听力原文内容是说话者在陈述自己对于城市生活和小镇生活的观点和看法,说话者比较倾向于城市生活。该题是问说话者最喜欢什么样的生活,三个选项在文章中都没有直接提及,而是以“exciting, wonderful, a variety of, big”等词语暗示出大城市生活比较丰富, 用“dull, small, careful, safe”等词暗示出小镇生活比较安静。听者没有一定的语篇能力(情境衔接、词义转换)和功能知识(表意功能,启发功能,想象功能)是不能推理出正确答案的。同样,这一题原文中也没有直接陈述作者喜欢什么样的生活,其对生活的态度需要通过一系列转折、对比后让听者自己体会出,其中多次使用了but, however, of course, still等用来粘合意义的联结词语(discourse marker)来完成,这正是Bachman(1990)提出的交际性语言能力中语篇能力的体现。

至于社会语言能力方面,第11题即为一例。

11. Why are the speakers making the trip?

A. For business. B. For shopping. C. For holiday.

此题询问说话人旅行的目的,原文中没有直接说出,通过“The company car will pick us up and take us there; the company pays for our trip, including hotel and food”等句表明公司为他们的旅行买单并接送到机场,考生既能明白此趟出差的目的是公司生意,从而选出正确答案。事实上这考查了考生的语用方面的言外能力和社会语言能力,考生需要一定的想象能力和对文化所指的敏感性才能正确作答。另外,在第六段对话中,当Harry被邀请出去活动时,他回答中的“I’d love to ... , but ... ”和“I’d like to, but ... ”则是语用知识中的操作功能(表达拒绝)和社会语言能力中的语言使用规则(拒绝时需要委婉)。虽然试题并没有直接针对这个进行考查,但考生在听的过程中需要运用这些语言规则才能帮助他们正确快速地明了所听语料的大意。

以上各例都说明了听力部分考查了Bachman交际性语言能力中的组织能力和语用能力。

另外,为了准确判断信息选出正确答案,学生需要运用合适的策略,如在听力录音播放前的看题、记录、预测等。这实际上考查了对目标评价的策略。同样,听力过程中根据不同题目采用不同方式来获取信息,考查了制定计划和执行计划的策略。例如,在第七段材料中,考生被问及最终说话者决定去哪里看电影时,在听的过程中他们需要反复根据所听内容来改变自己的选择,因为原文中提到了三个选项中的所有电影院,而且对前两个都有赞赏性的话语,只是在提到第三个“ ... the 7:00 one at the UME Cinema is even better.”时得到了对方的认可,“OK, that’s fine.” 这些转折变化实际上考查了考生的制定计划和执行计划策略。

根据上面的分析,我们可以发现,2014年江苏省高考英语听力部分考点涉及到了Bachman交际语言能力模型中的语法能力、语篇能力、语用能力、策略能力等大部分要点,体现出了交际性语言观,与《课程(实验)》所体现的语言观相吻合,这说明听力部分命制具有较高的结构效度。

2014年江苏省高考英语试题听力部分的效度分析,2016江苏英语高考听力答案解析

四、结语

本研究首先对2014年江苏省高英英语试卷听力部分考查内容进行了逐题描述,然后比对了试题考点与《课标(实验)》及考试说明中对知识与能力的要求,运用了Bachman(1990:85)的交际性语言能力框架对该试题进行了效度分析。通过分析发现,总体而言,2014年江苏省高考英语试题听力测试部分具有很高的结构效度和一定的内容效度,但部分试题的内容效度还存在一定的问题。

上述研究发现对高考英语命题和英语教学都有重要的启示作用。首先,给将来的高考命题工作的启示是:在命题理念和结构效度上,可以继续保持这样的命题风格,执行交际性语言测试方法,以学生的交际语言能力为测试目标。但是,在细节性的内容选择与安排方面, 要加强听力技能的测试宽度,并在细节、推断、主题大意等不同层次的能力点上合理分布,真正测试出学生的综合语言运用能力。这就要求以后的命题者更加仔细地研究《课标(实验)》和当年的考试说明,命题前认真制定双向细目表,并严格遵照细目表命制和调整试题内容和考点,以期命制出更加完善的听力测试题,对中学阶段英语语言教学产生积极的引导作用。

其次,对于教师和学生们来说,一方面,要克服2014年江苏省高考英语听力部分考查中所反映的内容效度方面的缺点,在复习过程中要以《课标(实验)》和考试说明的主要内容为学习目标,认真梳理,避免疏漏。教师要清楚《课标(实验)》和考试说明对听力方面的要求,通过材料的选择进行科学化、全面化的训练,让学生在听力的复习中形成体系化的语言组织能力和语用能力,避免学生考前在能力结构方面还有盲点。另一方面,要关注本次试卷结构效度所秉承的理念,在听力学习中强调交际语言能力的培养。首先,在平时的训练中要采用不同的听力方式来进行,不能只用高考题型的选择题方式,在不同的类型中培养学生的语法能力和语篇能力和语用能力。例如,可以用听写的方式来培养学生的词汇、语音等方面的运用能力,用语篇填空题的方式来加强学生的语篇能力,用观看讨论原版电影等听力材料的方式来强化学生对地道英语的敏感程度,同时加强社会和文化知识积累。另外,在听力部分的学习准备中,坚持强化听力学习策略意识,每次的听力训练在材料选择时就应当根据学生的能力结构现状对应所需培养的听力技能,在听的过程中和考试后的讲解分析中引导学生关注自身技能的变化和听力策略的运用情况,利用元认知能力,总结出更加适合自己的听力方法,提高自身的策略能力。

2014年江苏省高考英语试题听力部分的效度分析,2016江苏英语高考听力答案解析

参考文献

[1] Bachman, L. F. Fundamental Consideration in Language Testing [M]. Oxford: Oxford University Press, 1990. 

[2] Heaton, J. Writing English Language Test [M]. London: Longman, 1975.

[3] Lado, R. Language Testing [M]. London: Longman, 1961.

[4] Norman, L. W. Issues related to judging the alignment of curriculum standards and assessments [J]. Applied Measurement in Education, 2007 (1): 7-25.

[5] Oller, J. Language Tests at School [M]. London: Longman, 1979.

[6] 江苏省教育考试院. 普通高等学校招生全国统一考试(江苏卷)考试说明[M]. 南京:江苏教育出版社,2014.

[7] 教育部. 普通高中英语课程标准(实验)[S]. 北京:人民教育出版社,2003.

[8] 金瑜. 心理测量[M]. 上海:华东师范大学出版社,2005.

[9] 舒运祥. 外语测试的理论与方法[M]. 上海:世界图书出版公司,2001.

[10] 赵发成. 谈语言测试的信度与效度[J]. 西安外国语学院学报,2000(1).

An Analysis of the Validity of Listening Part of 2014 Jiangsu NMET

Song Delong

Abstract: Based on three important components of Bachman’s Communicative Language Ability Framework, i.e. language competence, strategic competence and context of situation, this essay analyzes the content validity and construct validity of the listening part of 2014 Jiangsu NMET. After comparing the contents of the testing paper with the National Curriculum, test specifications, this essay finds that the listening part of 2014 Jiangsu NMET has a high construct validity and a satisfying content validity, but there are some problems bringing down the degree of its content validity. In accordance with the very analysis, the essay advises test writers to pay more attention to the equalization and universality of test contents in sampling, followed by the suggestions to English teachers on the emphasis of National Curriculum and test specifications of each year.

Key words: communicative language ability; listening part; content validity; construct validity

(本文首次发表在《基础教育外语教学研究》2014年第8期)

2014年江苏省高考英语试题听力部分的效度分析,2016江苏英语高考听力答案解析

您可能还会对下面的文章感兴趣: