本研究旨在开发用于评估成人英语学习者(B1至C2水平)语用能力的口语测试项目,并探讨语用变量在解释测试项目难度和区分度中的作用。研究采用多方面Rasch测量(MFRM)和定性内容分析方法,对开发的语用口语测试项目进行评估。
研究首先回顾了语用能力的理论框架和评估方法,确定了影响语用能力的关键变量,包括权力、社会距离、强加程度、预期礼貌策略数量、权利、隐含意义和语用互动等。基于这些变量,研究开发了包含四个部分、共24个项目的语用口语测试,并与已退役的Aptis口语测试进行比较。
MFRM分析结果显示,语用口语测试在项目难度和区分度上表现出良好的统计特性,测试项目能够可靠地评估不同水平的语用能力。分析还发现,隐含意义、情境复杂性和权利等语用变量对项目难度有显著影响,而预期礼貌策略数量则对项目区分度有显著影响。定性分析进一步证实,不同部分的测试项目能够评估语用能力的不同维度,例如语用语言和社会语用方面。
研究结论表明,开发的语用口语测试项目能够有效地评估语用能力,并为Aptis口语测试的改进提供了参考。研究建议未来在测试开发中应考虑更多语用变量,并采用多样化的测试格式,以更全面地评估语用能力。