“一题多卷”试卷质量的分析结果

二、“一题多卷”试卷质量的分析结果

2012年全国硕士研究生统一入学考试的“综合能力”(268所院校参加考试)和“英语二”(423所院校参加考试)试卷涉及的学校和专业面广,考生人数众多。表4图示9中是每个科目的实考人数、各套试卷的实考人数、试卷平均分数和标准差。

表4图示9 2012年全国硕士研究生统一入学考试科目“综合能力”和“英语二”的实考人数和平均分数

图示

(一)难度

一般认为,整份试卷的平均难度系数P值在0.5左右比较合适。但这并不是要求所有题目都是中等难度,而应当是“难、中、易”的题目都应当有。因为在一张试卷中如果都是中等难度的题目,只能对中等程度的考生有最佳鉴别力,却不能对水平高和水平低的考生很好的区分。表4-10是2012年全国硕士研究生统一入学考试科目“综合能力”和“英语二”试卷的难度分析情况。

表4图示10 2012年全国硕士研究生统一入学考试科目“综合能力”和“英语二”试卷的难度分析

图示

续表

图示

由表4-10可见,“综合能力”和“英语二”试卷难度整体适中。“综合能力”试卷57道题,所有试题的难度系数平均值为0.510,没有出现“非常难”的题目,“非常容易”的题目也只有一题;“中等偏难”“适中”和“中等偏易”的题目26道,占全部试题量的45.6%。“英语二”试卷48道题,所有试题的难度系数平均值为0.443,没有出现“非常难”和“非常容易”的题目;“中等偏难”“适中”和“中等偏易”的题目18道,占全部试题量的37.5%。(https://www.daowen.com)

研究还发现,“综合能力”试卷“容易”的题目和“英语二”试卷“难”的题目均为24道,分别占全部试题量的42.1%和50.0%。

(二)区分度

试卷区分度系数D取值在-1~1,D值越大区分度越好。“综合能力”和“英语二”试卷区分度整体良好,均没有出现区分度“很差”的试题。“综合能力”试卷区分度评价为“很好”和“良好”的试题数48道,占全部试题量的84.2%;区分度“较差”的试题只有3道,并且集中在主观题(第56题“论证有效性分析”和第57题“论说文”);“英语二”试卷区分度评价为“很好”“良好”和“适中”的试题共39道,占全部试题量的81.2%;区分度“较差”的试题仅9道(表4图示11)。

表4图示11 2012年全国硕士研究生统一入学考试科目“综合能力”和“英语二”试卷的区分度分析

图示

(三)信度

一般认为,Cronbachα系数达到0.7的试卷信度比较高。“综合能力”和“英语二”试卷整体信度较高,α系数均接近0.7。“综合能力”客观题部分信度系数0.703,其中逻辑推理部分信度系数是0.819。“英语二”客观题部分信度系数0.792,其中阅读理解部分信度系数是0.818。

研究还发现,“综合能力”试卷主观题部分信度系数偏低(α系数0.412),而“英语二”主观题部分信度系数较高(α系数0.777),这可能与中文和英文的不同写作要求有关(表4图示12)。

表4图示12 2012年全国硕士研究生统一入学考试科目“综合能力”和“英语二”试卷的信度分析

图示