【作者】 楼荷英；

【导师】 何莲珍；

【作者基本信息】 浙江大学 ， 英语语言文学， 2013， 博士

【摘要】 口语测试是直接反应考生语言交际能力的一种测试,形式多样。近来,配对(组)口语测试以省时实用、任务逼真、反拨积极等优势越来越多地被用于课堂测试和大型高风险测试中。我国的大学英语四、六级口语测试采用的就是配组形式。因其使用的日益广泛性,配对(组)口语测试的效度开始受到语言测试界和测试分数使用者的关注。业内研究者逐步开展了针对此类测试效度的实证性研究,考生特质尤其是考生的性格对其口试表现的影响成了研究焦点之一。已有研究证实考生个人以及配组成员的性格影响口试成绩(Bonk&Van Moere,2004; Berry,2004; Ockey,2009)或会话风格(Nakatsuhara,2011)。但上述研究均在实验环境下进行,且四项研究中有三项运用单一的定量研究方法,样本均为英语作为外语的日本大学生,因此研究结论说服力欠强。本研究旨在运用定量和定性相结合的方法探索我国大学英语四、六级口语测试(CET-SET)环境下考生性格对其口语测试表现的影响。具体来说,本研究聚焦大学英语四、六级口试中考生的外向程度对于其互动交际能力(IC)表现的影响。研究对象为85组共255名大学英语四、六级口试考生。考生首先完成龚耀先版的艾森克性格调查问卷(EPQ-RSC),然后参加CET-SET考试。研究者将EPQ-RSC问卷结果输入电脑,经SPSS统计测得每位考生性格四维度的T值,确定每位考生的内外向程度,将讨论小组归类为全外向组(代码111)、两外一内组(代码110)和一外两内组(代码100)；各考生CET-SET考试表现全程录像,其中小组讨论部分由研究者进行文字转写。考生的口语水平根据其在CET-SET中的总分划分为高中低三等。为了全面研究真实口语测试中考生性格与其互动交际能力表现的关系,研究者运用描述性统计MANOVA和频率统计等定量方法将考生所得的CET-SET分项成绩尤其是与互动交际能力相关的分项成绩(sub-score for "size and discourse management"; sub-score for "flexibility and appropriacy")分别按内外向个体和小组进行比较分析；将考生小组讨论过程中的IC表现特征按口头话语能力、社会文化能力和策略使用能力等进行编码并分别按内外向个体考生、不同性格组成的小组形式进行分析。同时,研究者运用会话分析展现考生讨论中互动交际能力表现的具体特征和形式,定性分析内外向个体考生在CET-SET小组讨论中的互动交际能力表现特征和形式以及他们受小组成员内外向程度的影响。定量分析的结果如下：第一,考生的内外向程度对于自身IC能力表现的影响：描述性统计显示：与内向考生相比,外向考生的“话语长短和连贯性”分项(Sub-score1)平均得分略高(差距为0.11),“灵活性和适切性”分项(Sub-score2)平均得分也略高(差距为0.1)；平均话轮略多于内向考生(差距为0.39),回应话轮略高(差距为0.47),外向考生说的话语(按词计算)平均比内向的仅多0.05,而其发起话轮的平均次数与内向考生基本相同。多元方差(MANOVA)分析显示：性格与IC分项平均分的多变量分析(Multivariate tests)显示内向考生和外向考生IC分项平均分无显著差异；组间效应检验(Tests of between-subjects effects)也显示内外向考生IC分项平均分无显著差异。频率计数显示：与内向考生相比,外向考生的眼神接触次数略多(差距为0.3次),说话中更多使用自我重复。但是内向考生陈述时自我修复和单词提取(retrieval)策略使用略多、使用更多意义笼统的词(all-purpose words)的频率也略高。内外向考生均不擅长使用诸如成语、典故、历史和地理知识等的社会文化策略。第二,配组成员的内外向程度对于个体考生IC能力表现的影响：描述性统计显示：111组、110组和100组的Sub-score1平均得分分别是4.00、3.91、3.87; Sub-score2的平均得分分别是4.04、4.03、3.82。标准差均在0.33和0.37之间,说明考生的分数相对集中,差距甚小,这一点也在箱图显示上得到了证实。MANOVA分析：将三个不同性格类型组的IC分项平均分进行MANOVA分析,多变量组效应检验(Multivariate tests for the group effect)显示组效应的Wilks’ Lambda为0.891(F=2.11, p=0.055),这意味着当p值设在小于0.05时,分组对考生得分无显著影响。组间效应检验(Tests of between-subjects effects of test-takers’IC and their group members’personality)显示对于Sub-score1, p=0.322,对于Sub-score2,p=0.306,说明三个不同性格类型组的IC分项得分无显著差异。为进一步检验分组对考生IC分项得分的影响,研究者又将111、110和100三个组中的外向考生IC分项得分、110组与100组中的内向考生IC分项得分进行多元方差分析,同样发现分组对考生得分无显著影响、三个不同性格类型组考生的IC分项得分无显著差异。将三个不同性格类型组考生IC特征表现的平均频率数进行MANOVA分析,发现性格不是影响考生口头话语的显著因素,组间效应检验显示除话语长短一项以外,不同性格类型组在口头话语特征表现上无显著差异。频率统计显示：三个不同性格类型组在社会文化能力表现上都比较弱,但三类性格组的考生表现迥异,其中111组组员之间的眼神接触次数最多(平均每人6.8次),100组考生使用诸如成语、典故、历史和地理知识等社会文化策略略多。在策略能力表现方面,不同性格类型组考生表现迥异,但总体来说,110组在表达受阻时使用信息更替(message replacement)、句子重组(restructuring)、自我重复和单词修复策略略多于其他性格类型组。第三,全体受试组考生的IC能力表现：频率统计显示,85个受试组在IC能力表现方面呈现以下特点：考生在口头陈述时频繁使用诸如um, mm这样的填充语(fillers),全体考生共使用填充语3588次。考生间眼神接触普遍较少,85个组共255个考生在整个讨论中仅有569次眼神接触。因考试时间不同,小组讨论的话题不同。统计发现针对四个不同话题,全体考生在讨论中仅有43次运用成语、引用典故或运用历史和地理知识。在策略能力表现方面,考生使用自我重复(共1212次)和自我修复(共131次)的频率相对较高,而使用其他策略的频率极低。从统计数据看,考生在遇到交际困难时很少使用迂回、语码转换等策略,在255名考生中使用迂回策略的仅6次,使用语码转换的仅2次。此外,考生也不擅长使用互动交际策略,在遇到交际困难时,255名考生中仅有14次请求其他组员帮助,而且考生在进行小组讨论时也极少向其他组员确认表达的意思是否被理解。定性分析结果如下：第一,内向考生与外向考生配组时的表现：会话分析显示：当内向考生与外向考生配组时,内向考生在讨论中呈现以下特征：1.被动参与。在51组由内外向考生混合组成的小组中,有32组均为外向考生带头发起讨论,而内向学生总是三人中最后一个发言的,并且通常是在其他考生点名或用眼神提示的情况下才发言；内向考生缺乏主动赢取话轮的能力,比较明显的是在110组,在当前说话者有意实现话轮转换而未指定下一话轮的讲话者时,内向考生无法抓住机会获取话轮,从而导致自己在整个讨论中鲜有发言机会的结果；内向考生缺乏话轮竞争的意识,因此在110和100组较少发现日常生活对话中常见的重叠话语(overlaps),而话轮之间的沉默更为普遍；2.口语水平高的内向考生讨论中表现突出。尽管多数内向考生在讨论中具有被动参与的特征,但通过会话分析,不难发现口语水平高的内向考生互动活跃,他们主动发起讨论并且有较强的合作意识,在话轮转换、主题回应等方面体现出对语境的敏感性,具有良好的话轮设计能力。这些考生性格内向,但小组讨论中借助口语水平的优势表现得像外向者一样。第二,全外向考生配组时的表现：会话分析显示：当三位外向型性格考生配组时,他们在讨论中呈现以下特征：1.参与相对积极。相对于其他性格类型组而言,尤其是相对于100组而言,111组的讨论显得积极些。85组讨论中发现的少数重叠话语主要是在111组产生的；此外,111组讨论中的合作意识也较明显,遇到表达问题时组员间互相帮助,能将小组视为一个整体,体现了较强的交互主体性(intersubj ectivity),讨论中较多使用第一人称复数,尽量避免使用第一人称单数,相邻对也比较常见。从录像中可以观察到组员间的眼神交流较多。2.口语水平低的外向考生无法积极参与交际。在由口语水平低但性格外向的考生组成的小组里,研究者发现考生各自的独白(monologue),这些考生口语水平低、互动交际能力弱,无法在讨论中扮演恰当的角色。这些考生性格外向,但小组讨论中由于语言障碍只能表现得像内向者一样。第三,全体受试CET-SET小组讨论中的共有特点：会话分析显示：85组受试CET-SET小组讨论中具有以下共性的特点：1.独特的开场序列。在考官读完讨论题目后,多数小组有10秒左右的沉默,考生进行短暂思考后开始陈述,也有考生在沉默后向考官、组员确认题目意思,然后再进行陈述。2.话轮次序预设。多数考生默认每位考生必须轮流发言,并且发言的次数基本相等。因此,会话分析中发现多数讨论组的话轮次序是固定的,根据第一个发言人的座位,或顺时针或逆时针轮流,即便某个考生因为被组员指定回答问题而打破原设的次序,待问题回答后又会自动回到最先设定的次序。3.话轮转换以眼神接触为主要信号。多数考生当自己有意结束发言、准备传递话轮时,用眼神向其他组员示意。即便是那些陈述过程中一直看着考官或直视前方的考生,当他准备结束陈述时,也会用眼神示意其他组员接过话轮。4.小组讨论缺乏合作。虽然在会话分析中发现有小组讨论活跃,组员间合作密切,但大多数组的组员之间为实现交际目的的共同努力较少,考生未进行真正意义的小组讨论,或独白或只是非常形式化地在独白后增加诸女"What do you think?","Do you think so?"等的语句,不向组员确认信息是否被理解,也不考虑回应其他组员的话题的必要性。对照Bachman&Palmer (2010)的语言评估使用论证(Assessment Use Argument),本研究主要观察的主张(Claim)是CET-SET的IC分项分的阐释具有意义和概括性,且考试对于考生互动交际能力的估计具有有效性,主要的理据(Warrant)是考试确实让考生表现了自己的互动交际能力,考试结果可以用来推断考生的互动交际能力；考试的构念确实是按照考试大纲定义的、并能在考试中实现。主要研究的反驳(Rebuttal)有三个：一是考生性格影响其本人互动交际能力的表现,二是小组成员的性格影响个体考生互动交际能力的表现,三是在小组讨论中的互动与考试设计的有出入。本研究结果显示：考生性格未对考生IC能力表现产生显著影响,说明考生性格不构成反驳。但定量和定性分析均发现考生在小组讨论中互动交际能力特征表现较少,小组活动中考生之间互动不够,说明反驳三成立。已有的相关研究均发现考生性格影响其口试表现(如Berry,2004; Ockey,2009;Nakatsuhara,2011),而本研究虽然在会话分析时发现考生的内外向程度在参与讨论的积极程度上有细微差异,但未发现考生性格对其口试表现尤其是IC能力表现的影响。其原因是本研究的数据来自于大规模全真考试,性格类型组完全按照考生口试分组、结合小组成员的性格T值编排的,因此研究采用的都是自然数据,而其他研究的数据均是研究人员精心设计的实验环境下采集的,考生参加的考试也由研究人员设计,并非是大型的全真高风险考试。考生的图式(framing)不同,对待考试的态度不同,在考试中的表现也会有所不同。参加CET-SET的考生都知道考试结果对于将来就业、深造的重要性,他们的共同目的是要争取拿高分,而考官作为评分者至关重要,小组讨论中会首先想到迎合考官,将考官作为主要听众。而评分标准中语言的精确度和语言范围权重最大,要得高分在这部分下功夫尤为关键。至于考试中与小组成员之间的配合度、合作度并不是考生重点关注的。基于这样的心里架构,考生在考试中会有意掩盖自己的弱点,当然也包括掩盖自己的性格的弱点,比如内向、害羞等。外向考生有可能扮演内向角色,而内向考生有可能扮演外向角色。外向但口语水平低的考生为了尽量不暴露自己的语言弱势,会减少话语量,在不确定如何表达时,保持沉默；而内向但口语水平高的学生会设法展示自己的水平,在考试中表现得外向。而对于实验性质的考试,考生的共同构架是考试结果不会影响他们的根本利益,因此会表现得放松,研究者观察到的现象可能也就不同了。综上所述,本研究的发现有以下启示：从理论层面来说,运用评估使用论证研究大规模全真配组口语测试的分数阐释意义丰富了效度理论。从研究方法来说,本研究运用定量和定性相结合的方法对大样本进行分析,并结合社会学和社会心理学理论对研究结果进行分析,在Lazaraton和Nakatsuhara研究(Lazaraton,2002;Nakatsuhara,2011)的基础上进一步证实了口语测试跨学科研究的可能性和必要性,也为全方位深刻理解考生性格与其口语测试表现的关系提供了充分的依据。同时,本研究的发现还对我国大学英语教学和口语测试的设计具有实际的意义：第一,从研究结果来看,考生的互动交际能力普遍较弱,一方面可能是因为考生口语水平低,无法开展互动交际,另一方面可能是考生互动交际能力的培训不够。交际语言教学模式虽已在我国大学英语教学课堂中广泛采用,但其真实效果有待验证。大学英语课堂不乏诸如小组讨论、角色扮演等语言交际活动,但有效参与此类交际活动的策略培训有待加强。教师和学生都须增强互动交际能力培养的意识。第二,CET-SET评分量表对于IC能力相关的描述略显笼统,考试设计的构念未充分体现,这使得评分员难以把握其准确含义,较难将考生的口试表现对应各项描述,从而增加评分难度、导致评分误差；也使得考生在获取分数后难以判断自己口试表现中的强项和弱项。虽然任何评分量表的描述无法穷尽,但仍然应该尽量具体、操作性强。更多还原

【Abstract】 This study investigates the effect of test-takers’personality on their display of interactional competence (IC) in CET-SET group oral test. Specifically, the study examines:1) the degree to which extroversion/introversion as measured by Gong Yaoxian’s version of Eysenck Personality Questionnaire (EPQ-RSC) affects an individual test-taker’s display of IC; and2) the degree to which the levels of extroversion of the group test-takers are assigned to affect their display of IC.The study included255students who took CET-SET in2010. Test-takers’ personalities were determined by the T value obtained from EPQ-RSC. Their group discussion in CET-SET was video-recorded and transcribed. Their IC sub-scores were compared. The IC features displayed by each test-taker during the discussion were coded and analyzed both quantitatively and qualitatively.The results of descriptive statistics and MANOVA showed no significant difference between the IC scores of the individual extroverts and introverts. Additional descriptive statistics indicated the degree of extroversion did not affect the display of the spoken discourse features. Frequency count showed slight differences in the display of socio-cultural competence and strategic competence between the extroverts and introverts. Results of conversation analysis confirmed that active participation in the discussion depended on test-takers’ oral English proficiency rather than their personality.Descriptive statistics and MANOVA analysis also found group members’ personality didn’t significantly affect individual test-taker’s IC scores. Conversation analysis further revealed that the individual test-taker’s performance largely depended on his/her own oral English proficiency. However, frequency counting found no consistent results in the display of socio-cultural competence and strategic competence among different personality groups.On the whole, this study found test-takers’ personality was not the rebuttal to the warrants of CET-SET. However, the shared salient interaction features of all the discussion groups should arouse the test developers’ attention.更多还原