如何提高命题的信度效度区分度

如何提高命题的信度效度区分度
2023年10月30日 11:31 王学森高考物理

一、信度、效度、区分度简介

信度是指测验结果的一致性、稳定性及可靠性。通俗的理解信度即可信程度,对于考试指的是一次考试的可信程度。设参加某次考试的学生数量很大,我们按成绩把他们等分为两组,如果一次考试后两组同学的各种统计数据几乎相同,我们说这次考试信度好;或者经历几次考试学生的排名几乎不变,说明这几次考试都是可信的,即信度很高。

效度即有效程度,它是指测量工具或手段能准确测出所需测量的事物的程度。测量结果与要考查的内容越吻合,则效度越高。对于考试效度可理解为学什么、考什么,课时多的教学重点内容试题多、分值多,课时少的非重点内容试题少、分值少。

区分度也叫鉴别力,它反映的是测验题目对考生实际水平的区分程度或鉴别能力。具有良好区分度的测验,实际水平高的应该得高分,实际水平低的应该得低分。在考试人数较多,成绩正态分布的条件下,成绩排名前27%同学的平均分减去成绩排名最后27%同学的平均分,除以总分等于区分度。区分度在0.4以上表明试卷区分度很好,区分度在0.3---0.39表明试卷区分度较好,区分度在0.2---0.29表明试卷区分度尚可,区分度在0.19以下试卷区分度很差。

如何提高考试的信度、效度和区分度呢?很明显适当增加试题类型、试题数量和考试时间可以提高信度和效度,试题的梯度较大才能有比较好的区分度。为提高考试的信度、效度和区分度命题前要制定命题方案和多维细目表框架。下面举例说明命题方案的制定和多维细目表制作。

二、高二下学期物理期中命题方案

为确保命题结构科学性,考查内容(知识、能力、素养和价值)的代表性和全面性,考查要求(基础、综合、应用、创新)的合理性,阶段性考试的有效性,考查载体的真实性,考查难度的稳定性,依据高中物理课程标准和高考评价体系,特制定本方案。

(一)考试性质

参加高二年级期末考试的学生是将物理作为学业水平等级考科目,考试是以学期为周期,范围是对应的教材内容,主要目的是考查学生本学期学习内容与课程标准要求的达成度。

(二)命题范围

机械振动、动量、磁场、电磁感应、交流电五章内容。

(三)了解学情

命题前,命题组一定要深入了解参加考试的各个学校的学情,这样命制的试卷才能兼顾各个层次的学校、各个层次的学生。

(四)命题要求

要按照考试范围内课程标准中学习内容、内容要求、学业要求、学业质量水平要求,在课程标准限定的范围内实施命题。命题要重点考查学生教材内容的学习效果,来源于教材的情境素材不低于50%,引导教师和学生重视教材教学和学习。

1.考查必备知识内容及权重

机械振动15%、动量25%、磁场25%、电磁感应25%、交流电10%

2.关键能力内容及考查权重

高二考试关键能力内容及考查权重,即5关键能力各占的权重。理解能力、推理论证能力、模型构建能力、实验探究能力、创新能力各占约20%

3.学科核心素养内容及考查权重

高二考试学科核心素养内容及考查权重,即核心素养4部分各占的权重。水平1到水平5各占的权重:水平1约占5%,水平2、水平3、水平4各占约25%水平5约占20%,即基础题约占30%,中档题约占50%,难题约占20%

4.考查要求内容及考查权重

高二考试考查要求内容及考查权重,即基础性、综合性、应用型、创新性各占的权重。基础性、综合性、应用型、创新性各占约25%

5.考查载体内容及考查权重

考查载体分为生活实践问题情境和学习探索问题情境。

生活实践问题情境主要包括3方面,大自然中与物理有关的情境,与生产生活紧密联系的物理情境,科技前沿的物理情境;

学习探索问题情境主要包括3方面,物理学史问题情境,课标与教材中的典型问题情境,科学探究的问题情境。试题要尽量覆盖这六种情境。

6.试卷统计数据要求

试卷统计数据是考试完成后的数据,试卷“四度”(难度、区分度、效度和信度)控制与命题人的水平、经验和考生群体相关,需要命题人员每次命题考试后对照试题和统计数据,进行反思总结,可参照当地高考试卷。

高二考试试题统计数据要求

难度系数小于0.4属于难题,难度系数大于0.7属于简单题,其它属于中等难度。生源最好的重点高中试卷难度系数要控制在0.75以下,生源最差的普通高中试卷难度系数要控制在0.35以上,全体考生总的试卷难度系数要控制在0.55左右;试卷的区分度要大于0.35,同时要注意试卷的信度和效度。

7.试卷“形”的要求

试卷“形”的要求是以最新高考试卷或近几年高考试卷统计分析的平均值为依据,非毕业年级考试依据内容作适当调整。

以上各部分考查权重和数值命题人员可以依据本地近几年高考统计权重和数据,结合之前考试特点确定一个较合理的权重和数据。关键能力、学科核心素养、考查要求、考查载体、“四度”设计和试卷“形”的要求等在命题过程中要充分考虑合理的权重和数值,命题完成后需要补充完整,力争做到形神兼备。

(五)试卷结构

按照本省最新高考试卷中的内容、板式、题型、题型分值、题量、页码等确定各种考试试卷结构。试卷的前部分结构可参照高考试卷,命题人员在命制试卷时,为统一格式可直接复制到文档中沿用。

提交试卷文件名统一为:学校或地区+XX月高二下学期期中考试物理试卷

提交时试卷(含答案、答案解析、评分标准、多维细目表、答题卡)时,要求 1 word 文档(便于排版),一份 pdf 文档(防止板式、格式、图形变形)。

(六)命题多维细目表

命题多维细目表在命题前制定主要框架,主要是为梳理必备知识的“四基”(基础知识、基本技能、基本方法、基本操作)布局,在命题过程中寻找情境素材、确定题型、参照命题标准设计问题,因此试题完成后,经过修改、成卷、审定,多维细目表才能最终定型。

多维细目表一般包括知识点、关键能力、学科素养、核心价值、考查要求等,情境来源是要详细说明,即要注明改编题、原创题以确认其真实性、科学性。

三、课程标准对试题和试卷命制的要求

1、科学设计试卷结构;

2、合理设计题型结构;

3、科学合理设计试题难度;

4、试题应有明确的测试目标。

5、试题所涉及的知识内容应具有代表性:要根据考核目标,按照课程标准中的课程内容要求,抽取具有代表性的核心物理概念、规律、思想和方法等内容设计试题;要反映物理学的基础结构和基本规律,要与今后的进一步学习或职业选择相适应;所抽取的知识内容要具有合理的覆盖面和适当的比例。

6、试题的情要具有一定的问题性、真实性、探究性或开放性:通过学生在应对复杂现实情,参与相应探究学习活动中的外在表现来考查物理学科核心素养。因此,评价学生的物理学科核心素养,应尽量创设类型多样的、具有一定复杂程度的、开放性的正式情作为试题的任务情

7、试题的编制要科学、规范;

8、试卷评分标准应清晰准确。

四、依据高考评价体系制作的多维细目表

多维细目表包含的主要条目

考查要求:基础性、综合性、应用性、创新性

考查内容:必备知识、关键能力、学科素养、核心价值

考查载体:

生活实践问题情境主要包括3方面

1.大自然中与物理有关的情境;

2.与生产生活紧密联系的物理情境;

3.科技前沿的物理情境。

学习探索问题情境主要包括3方面

4.物理学史问题情境;

5.课标与教材中的典型问题情境;

6.科学探究的问题情境。

核心素养:物理观念(物质观、运动与相互作用、能量观)

科学思维(模型建构、科学推理、科学论证、质疑创新)

科学探究(问题、证据、解释、交流)

科学态度与责任(科学本质、科学态度、社会责任)

关键能力:理解能力、推理论证能力、模型构建能力、实验探究能力、创新能力

由上面的多维细目表可知,浙江20236月高考物理试卷基础题多、难题多、中档题少,浙江应适当减少基础题、难题,适当增加中档题,使基础题、中档题、难题的比例接近3:5:2。具体可以调整为单选题8个题24分、多选题4个题16分,实验题3个题不变(建议实验题由1个题号调整为3个题号,这样方便交流),计算题4个不变;这样单选题个数减少了5个,多选题个数增加了2个,比原来减少了3个选择题,试题总数变为19个,90分钟19个题是比较合理的。

浙江20236月高考物理试卷考试时间90分钟是比较合理的,高考物理考90分钟的还有北京、山东、海南;实行3+1+223省市自治区物理考试时间75分钟,上海、天津高考物理考试时间只有60分钟;考试时间短必将降低考试的信度和效度,因此建议所有的省市自治区选考学科高考时间都调整为90分钟。

五、命题程序是试卷信度效度区分度的保证

命制一份试卷首先要制定命题方案(计划)和多维细目表框架。命题老师根据命题方案和多维细目表框架去选题、改编题、原创题;接着做详解、自己审题、调换试题、组成试卷、完善多维细目表。接下来请另外的老师在没有答案的情况下做题、审题、提出修改意见。命题老师根据审题老师的意见修改试题、调换试题、修改多维细目表。再请另外的审题老师做题、审题、提出修改意见,直到命题老师和审题老师对试卷都满意。最后是做图和排版,图要准确清晰,排版要方便答题,不能出现一个题在试卷的两面,即不能出现背题现象,如果排版时出现了这种情况,可以调换试题的顺序,甚至换题。另外要控制好试卷的长度,即控制好阅读量,不能出现1个选择题阅读量3百字以上的情况,因为物理试卷主要是考查考生分析问题、解决问题的各种能力。

命题属于教育测量与评价,是一项专业性很强的工作。高考命题一般以师范大学老师为主,重点高中老师为辅。重点高中由于生源好,期中、期末考试的试卷很少有最简单的基础题,重点高中老师命题往往更适合重点校学生;大学老师由于工作性质他们很少有时间研究高考试卷,也没有参加命题培训的动力;要使命制的试卷符合新课标和高考评价体系,需要对命题老师做相应的培训,使命题老师熟悉新课标,理解高考评价体系,理解并遵循命题程序,熟悉各地高考试卷,并能对各地高考试卷做出客观的评价,命题老师不但业务能力要强,还要有高度的社会责任感和敬业精神,这样才可能命制出符合立德树人、服务选才、引导教学并符合新课标和高考评价体系的有较高信度、效度、区分度的试卷。

                                  20231030

财经自媒体联盟更多自媒体作者

新浪首页 语音播报 相关新闻 返回顶部