首页> 详情

应用TAMI提高试题的可参与度

2012-08-31 |浏览:5388次 | 编辑: 加载失败
分享到: 
副标题#e#

测验可参与度与修改工作单TAMIThe Test Accessibility and Modification Inventory)是由美国范德比尔特大学的科研人员Peter A·BeddowRyan J·Kettlerand Stephen N·Elliott开发出来的一套培训和评价工具,提供给试题编写者和测验开发者,用于对试题进行分析,以提高试题可参与性。相关产品“可参与度等级矩阵”ARMAccessibility Rating Matrix)则是对试题和测验进行可参与度等级评价的工具。TAMI是“可替代评价的有效性与实验研究协会”的一个项目,该协会致力于提高可替代测验的有效性和评价实施的可行性;ARM是“发展与实施修改的评价协会”的一个项目,该协会致力于为那些由于各种困难和缺陷而无法达到国家学业成就标准的学生提供修改后的可替代测验,并建立相应的学业成就标准。由此可以看出,TAMIARM的开发,都是基于美国总统奥巴马的“不让一个孩子掉队”法案而提出来的,其目的是促进教育公平、提高全体学生的教育质量。

TAMI的可参与理论考虑到了被试、测验、测验事件三个变量,并基于三个基本的研究领域:通用设计(无障碍设计)原理、认知负载理论、测验与试题设计研究。即测验和试题的开发应该使不同来源的被试都能接受,而不需要额外的知识和能力;测验中要求被试的技能不能超过测验题目期望测试的技能本身,尽量减少无关信息和阅读负担,采用图表的形式;选择题的备选答案有三个的时候是最合适的,这样不仅可以减轻学生的阅读负担,增加试题量,而且也不会明显影响试题的难度、信度和效度。

#p#副标题#e#

这个工作单由两部分组成:试题分析和基于计算机的测验分析。其中,试题分析部分根据试题的核心要素,被划分为六个子类。

TAMI认为,试题的结构一般可以分为五个部分,即情境、题干、图表、选项、排版。如下图所示:

 

对试题评分的主要指标是以下六个子类:

试题语段与刺激情境、题干、图表、选项、排版、公平性。

 

1.试题语段与刺激情境所用的词汇要适合于被试所在的年级

2.段落长度适中

3.对成段的文字编号

4.避免俗语和行话(除非注明,并与试题内容相关)

5.句子结构尽可能简单

6.文本只包含答题所需的字词,无关用语减到最少

7.核心词汇加粗标注,方便识别

8.适合于被试年级的可读性

9.试题语段与刺激情境不需要被试建构与作答无关的知识和技能

10.试题语段与刺激情境与试题的图表、题干、选项在同一个页面上

 

1.题干要反应期望的内容标准和表现性目标

2.文本包括应答的所有必要信息

3.文本只包含答题所需的字词,无关用语减到最少

4.适合于被试年级的可读性

5.适合于被试年级的词汇与句子复杂性

6.题干尽可能直截了当,用主动语态

7.避免俗语和行话(除非注明,并与试题内容相关)

8.核心词汇加粗标注,方便识别

9.题干用正面词汇(如,避免使用“不”)

10.如果题目引自语篇或诗句,题干中应该给出相关的句子或摘录

 

1.当需要时就应该有图表

2.图表与试题的核心内容相关

3.图表与文本相联系(如图片、图像、指向标等)

4.图表清晰地表示出期望的形象

5.图表中的色彩对比度要强

6.图表传达的信息不局限于色彩的差异

7.核心词汇加粗标注,方便识别

8.如果需要,图表应有标签和支持性的文本(如标题、行抬头、列抬头等)

9.用圆圈、箭头或者标记来突出图表中的重要元素

10.支持性的文本应该靠近相关的图表

11.当图表自明时,就不需要文字说明

注:并非所有的试题都有图表。如果一个试题没有图表,也不需要有图表,那么该项的等级定为最高(3);如果一个试题没有图表,但是需要图表,那么在评定等级的时候,就需要看图表能在多大程度上提高试题的可参与性。

 

1.文本只包含答题所需的字词,无关用语减到最少

2.选项长度基本相等

3.所有的干扰项应该有似真性

4.对于多项选择题来说,所有的选项都是必需的

5.不要减少干扰项,否则会降低试题的效度

6.选项的顺序和结构符合逻辑,精心设计

 

1.所有文本应该用标准字体打印,最小字号为12

2.有足够的行间距

3.文本与背景之间对比度明显

4.所有文本采用传统阅读方式:从左到右,从上到下,左边距相同

5.根据文本的停顿和连续性进行格式化排版

6.整个试题(情境、图表、题干、选项)应该在同一页或者同一屏

7.页面留够空白,以免试题看上去杂乱

8.图表与试题的情境和题干融为一体,而不是分布在页面的边缘

 

1.试题的内容应该关注不同的群体,包括社会角色、信仰、种族、性别、残疾等;

2.试题不应该要求被试建构与试题测量目标无关的、可能导致试题变难的知识或技能

3.试题应避免引起不必要的情绪和冲突的材料

4.试题应该用恰当的术语描述个体和群体

5.在刻画个体或群体时,试题应该避免定势思维、过于概括、过于简化

 

#p#副标题#e#

TAMI的工作方式是对试题进行评分,评分的流程是:

1.记录下测验的名称或目的,评分者的姓名或编号,评分日期

2.记录试题的编号、内容领域,简要描述试题的测量目标(表现性目标或技能)

3.阅读评分清单,在工作单上,圈出该试题在每个子类上最合适的等级

0:不适用,1:最低适用,2:中等适用,3:最高适用

等级

描述

启示

4

几乎所有被试都可参与

95~99%的群体

3

大部分被试可以参与

90~95%的群体

2

一部分被试可以参与

85~90%的群体

1

多数被试都不可以参与

低于85%的群体

 

4.除了评定等级外,记录下任何可以改进的细节(即每个子类下面的具体条目)

5.计算该试题在各个子类上的等级的总评

6.在总评下面记录任何可以改进的建议

 

应用TAMI对试题和测验进行评分修改,就需要用到可参与度等级矩阵ARM。这个矩阵包括对具体每道试题和整个测验的等级评定,以及对于试题的修改意见,即包括试题分析矩阵、全卷分析矩阵两个矩阵和列出修改指南的ARM记录表。试题分析矩阵和全卷分析矩阵都是基于TAMI展开的,根据试题或整套试卷满足TAMI框架的程度,从低到高依次划分为1~4四个等级,评分者可以使用试题分析矩阵对每个试题给出一个等级(从14),也可以使用全卷分析矩阵对整个测验给出一个等级(从14)。ARM的修改指南也是对应TAMI各条目的,在每个试题下面,列出了相应的条目,评分者在ARM记录表的修改指南上勾出可能通过修改会提高试题质量的修改意见(每个条目的首字母)。如果评分者觉得修改指南覆盖不全面,还可以在ARM记录表下面的空白处写出其他的修改意见。下表展示了对试题选项的修改指南:

 

 

致谢:感谢美国范德比尔特大学Peter A Beddow教授悉心解答疑问并惠赠研究资料。

 

参考文献:

http://peabody.vanderbilt.edu/tami.xml

 

                                                     (翻译、编辑/付雷)


(责任编辑:王翔)


声明:文章版权归原作者所有,本文摘编仅作学习交流,非商业用途,所有文章都会注明来源,如有异议,请联系我们快速处理或删除,谢谢支持。


(原文章信息:标题:,作者:付雷   ,来源:本站原创    ,来源地址:)

上一篇: 国家教育进展评估的效度研究

下一篇: 一堂“失败”的好课

专题

-----主办-----

河南省乡村振兴协会

-----承办-----

河南省乡村振兴协会产业与信息化专业委员会

河南金农达供应链管理有限公司

河南全息农业科技有限公司 

-----协办-----

全息数字科技