首页> 详情

PISA2006天津试测的实施及其启示

2012-08-31 |浏览:4755次 | 编辑: 加载失败
分享到: 
副标题#e#

原载:《考试研究》2007年第4

【摘要】PISA是当前最知名的国际教育成效评价项目之一。本文结合2006PISA天津测试的实践经验,从PISA测试的背景、实施流程、保密措施等方面介绍PISA的实施理念与操作规范,并在此基础上从测验实施角度,总结提出值得我国教育考试机构借鉴的有关问题。

【关键词】PISA 测验实施 启示

学生能力国际评价项目(Program for International Student Assessment)简称PISA,是联合国经济合作与发展组织(OECD)策划的一项国际性学生学业质量比较研究项目。测试旨在评估OECD成员国15岁学生(相当于初中毕业)在完成义务教育后,是否掌握参与社会工作所需的知识和技能,是否拥有终身学习所必备的基础。通过测试可以建立一套学生评价方面的教育指标,为各国制定教育政策提供参考,使他们能够用这套指标来审视、评估和检查本国学校教育的整体成效。

第一次PISA测试于2000年举行,此后每三年举行一次。PISA的测试内容主要包括学生的阅读能力、数学能力和科学能力。三者组成一个循环体,在每一次评估中,只对其中一个主要领域作深入评估。2000PISA重点放在阅读素养上,2003年重点转向数学,并引入了一个新的领域——问题解决能力,2006年转向科学,2009年重点将重新回到阅读。

PISA测试学生应用知识和技能面对实际生活挑战的能力,而不是仅仅局限于对中学课程的掌握情况;评价学生在阅读、数学和科学方面的文化素质而不仅仅是学生已经掌握的学校学习的知识。虽然PISA的评价领域与学校学习科目紧密相关,但PISA更重视考查学生习得技能的价值和解决问题的能力,在一个更广阔的范围、在实际生活的情景中测试学生的实际操作能力和文化素质。

PISA目的不是指导教师如何进行教学,而是向公众、政策制定者和教育者提供学生在各个学科方面的能力的描述性信息,并对各参加国的教育质量进行横向比较。在学生选取上,PISA通过分层抽样的方法对各国的学校进行抽样,并用矩阵的方法将全部试题拆分成13套纸笔测验,每个学生只需完成其中的一份测验。测验由各国专家翻译成本国的文字,学生用本国语言作答。另外,PISA包含有学生问卷和学校问卷,目的是测量学生和学校分别在社会、文化、经济以及教育方面的特征。因此PISA的分析框架中包含了个体、教学、学校以及教育体制四个分析层面,这样就为公众、政策制定者和教育者提供更全面的信息。

PISA是迄今为止最严谨而又最全面的国际教育评价与比较项目,它的研究方法、工具和结果无疑可以为我国的教育质量评价提供有益的借鉴。而且,PISA的测量目标维度与我国的《全日制义务教育课程标准》基本吻合,可以作为新课程评价改革的参考。

#p#副标题#e#

目前,PISA2006测试在全球范围内刚刚结束,参与国家和地区已达58个。天津和北京、潍坊三个城市一起参加了2006PISA在中国大陆地区的试点性测试研究。其中,天津市共有50所学校的1700多名学生参加了最终测试。笔者作为此次测试的组织者之一,将实施情况及实施过程中的经验与感受总结如下。

1.测试前期准备

按照OECD制定的PISA抽样标准,从天津市学校信息数据库中提取信息,填报“PISA2006中国试测项目学校取样信息表”,再由负责本次试点的国家总项目组根据《PISA抽样实施手册》的操作要求,使用PISA专用抽样软件实施两阶段抽样。第一阶段从天津全市范围内抽取50所测试学校,第二阶段从每所测试学校中再随机抽取3515岁学生参加测试(按照抽样要求,15岁学生被界定为测试进行期间年龄在153个月到162个月之间的在校学生;结合本次测试的具体实施时间,PISA2006中国试测的目标群体为1990911991831之间出生的初中或高中在校学生)。在确定抽样结果后,由地方项目负责单位下发文件,通知各测试学校,使之知悉并开展测试准备工作。

2.测试前测试主任的职责

在国家总项目组的协助下,招募并培训了15~20名测试主任,测试主任负责按照PISA实施要求,组织各学校进行测试。首先,测试主任应熟读《测试主任手册》的相关内容,对自己的职责作充分的了解,并妥善保存有关的测试材料。此外,须与各测试学校的协调主任取得联系,确定测试细节安排,包括:

1)确定测试的日期、时间和地点;

2)核对并更新“学生数据记录表”的内容;

3)与项目负责单位和学校协调主任商讨以确保有备用的文具便于必要时使用。

测试主任及时向项目负责单位提供测试学校的详细地址并反馈测试准备工作进展情况,便于测试材料的邮寄和项目负责单位的统筹安排。测试日前,测试主任应再次联系协调主任,确定协调主任已预留场地、编排座次表、备齐所需文具,并做好处理紧急事项和突发问题的准备。

3.测试前协调主任的职责

所有参与测试的学校都会任命一位学校协调主任负责PISA测试在校内的协调及相关事务性工作。学校协调主任在测试前准备的事项有:

1)为测试主任提供学校的详细邮寄地址,接收测试箱并妥善保存,确保箱内资料的安全和保密;

2)与测试主任约定测试时间,通知有关同事、学生关于PISA的测试计划,提醒学生测试当天携带必备文具和计算器准时到达考场;

3)将学校问卷转交学校负责人填妥,并于测试当天取回,保证在测试结束时与其他测试材料一同封入箱内;

4)填写测试箱标签的相关内容并加盖学校印章,作为测试结束时封箱所用封条;

5)核实“学生数据记录表”上的学生信息,如名单上的学生因某种原因(如生病、转校、离校、年龄条件不符等)无法参加测试,且缺席人数达到总测试人数的15%以上,测试无法进行,由学校重新统计符合测试要求的学生并将名单提交项目负责单位。项目负责单位从中重新抽取35名学生参加测试并更新“学生数据记录表”;

6)安排可容纳35名学生每人独坐一张书桌的测试场地,并在考场显著位置悬挂时钟,准备备用文具;

7)在测试日前与测试主任联系,核查准备情况,解决遗留问题。

#p#副标题#e#

4.邮寄测试材料箱

在测试前约一星期,地方项目负责单位将预先密封好的学生测试材料送往各测试学校。测试材料包括:学生测试材料(试题册及学生问卷各39份,其中35名测试学生各一份,剩余部分作为备用);备用的“测试报告表”、“测试主任朗读文稿”和测试箱标签。由于天津市参加测试的学校位置相对分散,部分学校位置偏僻且路途较远,选择专业的递送服务是保证运输时效、安全和保密的关键。承接递送服务的单位须配备正规合格的司机和证件齐全的运送车辆,提供详尽的操作流程,保证货物在指定的时间内派送。项目负责单位须对货物运输的时间进行确认,并指定收货人,收货人不在时电话确认其他收货人。

5.测试正式实施

测试主任根据与各学校协调主任约定的时间,准时赴学校开展测试。测试主任于开考前30~40分钟开启测试箱,取出试题册及学生问卷,严格按照“学生数据记录表”上的资料,在试题册及学生问卷封面上对应位置填写学生姓名、编号、出生日期和学校名称等信息,填写完毕后,将试题册发放到与座次表对应的位置上。未使用的试题册存放于测试箱内。

学生到场后,自行核对试题册上的姓名,在指定的位置上坐好。PISA测试约需三个小时,包括朗读测试指示、分发测试材料及休息时间。主持测试过程中,测试主任依照《测试主任手册》的说明和朗读稿支持测试,一字不漏地将朗读文稿读出,不得做任何增加和删减,以确保所有学生听到的都是统一的指示,且不同地区的测试能在同一情况下进行。学生完成试题册后,短暂休息,继续填写学生问卷。

测试当日,由PISA国家总项目组委派的“PISA研究质量监察员”负责随机抽查测试,督察测试主任按规范正确实施测试。监察员的到访不会预先通知,因此,任何测试时间的调整都需及时告知项目负责单位。此外,本地PISA测试项目负责单位的负责人也须按要求随机抽取学校进行巡视,查访测试的实施情况。

测试完成后,测试主任负责收集试题册和学生问卷,清点结束并保证数目准确无误后,解散学生并感谢每位学生的参与。由测试主任填写测试报告表,接收并送回材料清单,连同其他材料放入测试箱内,用已盖好章的测试箱标签封存并由项目负责单位安排运回。

如最终有超过15%的抽样学生(即35个学生中有5个以上)缺席测试,则应安排缺席学生进行补测。补测的程序与正式测试完全一致,同样需要提前确定时间和地点,并严格按照程序进行测试。补测只能举行一次,且时间应安排在一周之内。

从测验的实施角度看,不同的测验可以有不同的具体实施规定和办法,但是这些规定和办法的原则是相同的,即测验实施的标准化。其目的是使学生在相等的条件和情境下参加测试,从而减小测量误差,保证测试结果的客观、公正和准确。从教育测量学的角度说,测验的标准化水平主要体现在测验编制、实施、评分以及分数解释四个环节。这其中,测验实施过程是上述四环节中唯一需直接与受测者接触的环节,因此其标准化程度对测验分数解释的信度和效度,即可信性和有效性有至关重要的影响。教育测量的标准化本就比物理测量的标准化更加复杂,测验实施环节又涉及众多人员,就更加困难。PISA在命题理念、实施和结果使用等诸多方面对我们具有启发意义,以下主要从实施角度,总结其特点和值得我国考试机构借鉴之处。

1.测验实施的规范化

PISA实施的规范化体现在实施流程、指导语、测试时间控制等诸多方面的统一性。譬如,在测试流程方面,PISA制定了一系列详尽的测试指导手册,如《测试主任手册》、《学校协调主任手册》。在正式测试前,须严格按照各手册要求开展培训工作。在这些手册中明确规定了不同类型执行者的角色及工作流程与标准。再如,在指导语的统一上,一方面要求测试主任严格按手册要求规范指导语内容和宣读方式,做到清晰且简单扼要地向被试解释如何作答,并且这种指导语的规范不只在学生开始答题前,还表现在答题结束前的时间提醒等各种细微环节;另一方面,试题册上对各种题型的应答方式均有详细说明,且举出例题。

上述一些规范化做法在国内标准化测试中也基本采用,但让人印象深刻的是PISA测试的专业化和高标准。比如其《测试主任手册》将近40页,对测试主任所做的每一个指示、所说的每一句话都有严格的要求,从最大程度上提高了测验实施的规范化水平。

#p#副标题#e#

2.测验实施的操作性

PISA有详尽的操作要求和标准,一方面可大大提高测试实施的清晰性,但另一方面可能的弊端是导致操作的过度复杂化。为此,PISA采用了一系列方法在不降低清晰性的同时,保证测验实施的可操作性。比如同时提供完全版和简版的《测试主任手册》、《学校协调主任手册》,使各类执行者通过提纲挈领的简版手册可以很快查阅PISA实施的主要环节要求,提高可操作性。

另外,PISA的可操作性还体现在考场编排、计时、回收测试材料等方面,在此不一一赘述。PISA这些提高可操作性的做法,启发我们提高测试标准化不只是尽量全面、细致地规定各环节操作标准,还要考虑到测试人员的可接受程度和易于理解,尽量保证他们能轻松地达到各项测试要求。

3.测验实施的精细度

PISA在很多细节上的实施方法也很值得我们借鉴。比如要求每个考场都在显著位置悬挂钟表;不使用机读卡,让学生直接在试题册上应答,一方面保证他们可以集中精力做题,另一方面避免由于不同学生填描答题卡速度不同,而导致实际可用答题时间的不同;为了避免学生由于疲劳而不能发挥实际水平,要求在测试中段统一让学生休息3分钟,再继续作答。

以上列举的一些细节都是PISA努力提高测试质量的表现。从中可以看出,虽然测验实施从本质上说是不能消除所有可能的误差来源的,但我们应努力提高测试的精细度,从最大程度上减少误差产生的条件,降低误差影响的水平。

综上所述,测验的实施不仅是一项组织工作,也是一项复杂的技术性工作,需要从教育测量学角度加以研究和实践。PISA2006天津试测带给我们的不仅是国际化的测试理念,在测试具体实施层面也为国内的考试机构提供了很多值得借鉴的经验。

Kong Xiangjuan Tian Yuan Li Yong

PISA is one of the most famous international programs for student achievement assessment.PISA2006 has been administered at Tianjin. Combining practical experience this paper introduced the PISA background administering process and test security meanwhile from these aspects analyzed the PISA administering ideas and criterions ultimately based on which the paper summarized some advanced ideas and methods that China’s educational examination institutions should learned.

PISA test administration inspiration


(责任编辑:王翔)


声明:文章版权归原作者所有,本文摘编仅作学习交流,非商业用途,所有文章都会注明来源,如有异议,请联系我们快速处理或删除,谢谢支持。


(原文章信息:标题:,作者:孔祥娟 田园 李勇  ,来源:转载    ,来源地址:)

上一篇: “PISA 2006”科学命题框架

下一篇: PISA科学素养评价工具的建构

专题

-----主办-----

河南省乡村振兴协会

-----承办-----

河南省乡村振兴协会产业与信息化专业委员会

河南金农达供应链管理有限公司

河南全息农业科技有限公司 

-----协办-----

全息数字科技