IRLS国际研究中心实施非常严格的质量控制项目。为保证数据的标准化,在数据进入之前,PIRLS国际研究中心向各国派发软件、使用手册并培训数据录入专员;在数据处理中心,所有数据经过反复检查,并不断修正误差。数据处理的过程也保证一国之内信息的一致性,尤其是学生试卷、学生问卷、教师问卷、家长问卷之间的一致性。2. 异同点PIRLS评价的核心是阅读能力,试卷的主体部分是两篇阅读理解。这和TIMSS系列评价中数学和科学的标准化评价略有不同。阅读理解文段准确无误的翻译就是PIRLS评价面临的一个较大的挑战,这是PIRLS评价和TIMSS系列评价略有区别的地方。² 翻译试卷和问卷最初由英语编写,由各参与国组织专家按照国际标准翻译为本国语言。为了保证翻译的准确性。各成员国翻译之后,由IEA组织专业翻译公司进行校对。校对共分为两次:第一次是在预试之前,第二次在大规模的收集数据之前。翻译公司第一次校对之后,PIRLS国际研究中心会比较修改了的部分和原文哪个更合适,并最终决定是否进行修改。最终,学生测试之后,数据录入之前,如果某国学生在某个题目或者某几个题目上的得分普遍偏低,会再次核对翻译的准确性。² 校对简答题的评分有较多的主观性。为了防止参与国的评分员受自身经验的影响,PIRLS国际研究中心要求各国从试卷中抽取200份,由特定的评分员来评分。事实证明,参与国国内的评分一致性比率非常高,达到90%以上。PIRLS国际研究中心进行了另一个研究:请非英语母语并且可以熟练使用英语的记分员测评部分英语为母语国家的学生成绩,结果表明国与国之间的评分一致性达到85%。PIRLS评价结束后,各国协调员小组和IEA数据处理中心、IEA国际研究中心反复校对数据。IEA数据处理中心和IEA国际研究中心会看各国的统计报告,对学生回答较差的题目有更多的关注。通常,学生回答较差的题目具有较好的心理测试特性。
全文预览
