评价标准研究.docx

1、评价标准研究 中考物理试卷评价标准的研究 华东师范大学物理系, 200062 全国中考试卷评价工作是在国家教育部基础教育司的直接组织安排下进行的一项宏观教育评价工作，至2001年止，已连续进行三年。实际上，这三年每年的评价工作都有不同的侧重点。1999年的评价侧重于试卷技术层面上的分析，2000年在兼顾试卷形式和技术方面的统计分析基础上，侧重于试卷内容分析与评价，而2001年在继续试卷内容分析的同时，增加了试卷自评报告分析。不管侧重于试卷的哪一部分，各部分的分析几乎都是相互独立的，始终未将试卷的形式、内容、技术综合起来，从而无法实现对一份试卷作出全面、系统、客观、直观的综合评价，难以确定一份试

2、卷的整体质量。连续三年对全国中考物理试卷的评价在实际工作中具有良好的导向作用，但是，如果能进一步实现对一份试卷从形式到内容到技术三方面的综合，必将有助于试卷的整体优化，也将进一步加强对中考物理考试改革的指导工作。为了进一步完善全国中考物理试卷评价工作，实现对一份试卷的全面、系统、明确、直观的综合评价，我们认为有必要探索一种试卷定量评价方法，该方法旨在整合试卷形式、内容、技术三方面的相关因素，并以量化的形式反映其整体水平。这样可以有效地避免定性分析的随意性和片面性。由教育评价的一般程序可知，制定教育评价标准是评价工作的一项基础工作。评价标准制定得科学、客观和可靠，那么评价结果就可能有效和可靠；反

3、之，则不然。决定评价标准的最深基础是主体的需要和利益，客体的现实本性和规律。在编制评价标准时，首先要以客体的现实本性和规律为依据，其次是要注意考虑主体的需要。但是，一切评价标准最终都要经受主体实践和客体发展的检验，也就是“实践是最高评价标准”。这里的主体是指实践者、认识者，或实践认识活动的行为者本身，此处应指教育部基教司或他所委托的直接评价者；客体则是指实践对象、认识对象，或主体行为的对象本身，此处应指中考物理试卷。它们之间相互作用的形式是客体对主体的作用，表现为实践和认识中主体对客体的反映、接近和“服从”；主体对客体的作用，表现为主体对客体的改造并使它为自己“服务”。所谓教育价值，是指作为客

4、体的教育现象的属性与作为社会实践主体的人的需要之间的一种特定的关系，对这种关系的不同认识和评价就构成了人们的教育价值观。教育评价主体与客体效用关系一致，价值判断就高；反之，主体与客体效用关系不一致，价值判断就低。教育评价实际上是评价者的主体需要与被评价对象的客观属性的一种特殊的效用关系运动。 一、 中考物理评价标准制定的依据对中考物理试卷进行评价，关键是要编制好评价标准，根据教育评价理论，制定教育评价标准一般要依据社会的经济、政治、教育、文化等协同发展规律、党和国家的教育政策和法规、有关的科学知识、教育活动中积累的经验以及被评价对象及与之有关的人、财、物等的实际情况。中考物理试卷评价作为一种宏

5、观的教育评价，自然也要遵循教育评价的一般理论；但某一种具体的教育评价，又具有其本身的侧重点。综合以上思考，中考物理试卷评价指标的设计，主要应考虑以下几个方面的依据：考试理论依据考试作为一种社会现象，有其自身的规律和原则。考试必须适应社会发展的需要、考试必须适应被考者的身心发展水平、考试目的与考试类型协调一致、考试具有“指向性”等基本规律，以及考试命题的基本原则、命题技术（包括试题编写、试卷编制、试卷信度与效度、试题难度与区分度控制）等，在组织实施大规模考试时都必须充分考虑以上内容。命题者在命题时是否遵循考试规律等基本理论，可以通过分析试卷的试题内容、试题题型、试题难度和区分度、试卷效度与信度等

6、方面来反映。这些项目的分析是分析试卷质量的主要内容。但是，在任何一次具体的教育评价过程中，都因为要考虑到具体的评价目标和实际情况，评价内容有所侧重而不能面面俱到，这从评价理论上讲是可行的。因此，中考物理试卷评价标准指标体系的设计，将考试理论作为最重要的依据，但具体评价内容有所选择。 心理学依据制定教育评价标准，一定要符合教育规律和人的心理规律，揭示这些规律的有教育科学、心理学和系统科学等。心理学是心理现象的科学。人在任何活动中都有一定的心理现象。一份好的试卷，必然要充分考虑考生在考试过程中的心理活动规律以及考生的年龄身心特点，以便考生正常发挥其真实水平。试卷是否方便考生作答、是否科学的遵循考生

7、的心理活动规律，从而体现“以考生为本”的先进教育观念， 这是本次设计中考物理试卷评价指标体系的重要依据之一。方针、政策依据为了保证我国教育活动的顺利进行，党和国家根据教育领域的具体情况，制定一系列的政策和法规。这些政策和法规是我们在教育工作中必需执行与遵守的。教育政策是党和国家在一定历史时期为教育工作制定的基本要求和行动准则。这些基本要求和活动准则是衡量我们的教育工作做得好坏的标准，在编制评价标准是必须以此为依据。基础教育课程改革是我国基础教育改革的核心问题和关键环节，是素质教育取得明显成效的主要目标之一。基础教育课程改革纲要（试行）集中体现了当代先进的教育思想和教育观念，是实施新一代人才培养

8、目标的施工蓝图，是教育教学活动的最主要的依据。为了充分发挥中考物理试卷评价的导向作用，把中学物理教学引导到正确的教育教学改革方向上，促进中小学全面落实素质教育，因此，基础教育课程改革纲要（试行）和全日制义务教育物理课程标准（实验稿）都是本次制定中考物理试卷评价的重要依据之一。实践经验依据在广泛的教育实践中，教育者积累了丰富的经验。在这些经验中，有的经验上升为理论，成为科学知识；有的经验还未上升为理论，但它确是由实践得来的知识或技能，这些知识或技能是非常宝贵的。因为实践是认识的基础，人的认识离不开实践。认识从实践中产生，随着实践的发展而发展，并且服务于实践，同时又受到实践的检验。我们既要克服经验

9、主义，即轻视理论，夸大感性经验的作用，把局部经验认为普遍真理，又要反对不重视经验作用的倾向。因此，从实践中得到的知识或技能，可以作为编制教育评价标准的依据之一。所以，从理论和实践上认真总结中考物理试卷评价的经验，也是探讨中考物理试卷评价标准的重要依据。二、 评价指标体系的设计原则一、指标与目标评价的指标体系是评价具体教育活动时根据评价目标、教育目标和管理目标要综合考虑的全部因素的集合。指标作为具体的目标，它无疑是由目标决定的。指标实际上就是目标一个方面的规定，它是具体的、可测量的、行为化和操作化的目标。所谓目标一个方面的规定，就是说，任一指标都不反映全部的目标，它只反映目标的一个方面，或者说，

10、它只反映目标的一个局部。只有系统化的具有紧密联系的一群指标，即指标体系，才反映全部的目标，才反映目标整体。在教育评价工作中，指标体系不仅仅是教育目标的具体体现，而且包括教育目标在内的评价目标和被评价对象的现实本性，等等的综合。但是，指标作为具体的目标，由于它的具体性，往往又是实质性的目标，决定目标能否切实的得到落实。与目标相比，指标往往具有更强的指挥定向作用。指标并不是消极的被目标所规定，同时它也积极的规定着目标能否成为实际意义上的目标。二、中考物理试卷评价指标体系的设计原则中考物理试卷评价指标体系应遵循以下几个基本原则：整体完备性原则指标的整体完备性是指指标体系内指标的全面性。即所制定的指标

11、体系能够全面地、毫无遗漏地再现和反映教育目标和管理目标。指标的整体完备性本质上要求指标体系内的各条指标在它们的相互配合中，在它们的总合中实现目标。探索构成试卷“形式内容技术” 这一结构的全部要素 。导向性原则中考物理试卷评价指标体系的设计，始终本着“导向性”的原则，不仅引导命题者完善试卷形式的规范性，提高命题技术，而且引导命题者着重改革试题的内容特征，从而引导初中物理教学注重基础知识和基本技能的传授，注重培养学生的创新精神、实践能力以及运用物理知识解决实际问题的能力。科学性原则中考物理试卷评价指标体系的设计，以现代考试科学理论和现代素质教育科学理论为主要依据基础，以中学物理教学的任务和要求为基

12、础，遵循物理教学规律，突出物理学科特点，力求实现指标的“科学性”，从而客观科学地评价中考物理试卷，有效促进中学物理教学改革。一致性原则一致性原则要求评价指标与评价目标相一致，评价指标体系中，下一层次的指标与上一层次的指标相一致，也就是指标必须反映目标，下一层次的指标反映上一层次的指标，是设计评价指标体系所应遵循的又一原则。遵循一致性原则设计中考物理试卷评价指标体系，就是坚持评价指标体系中的一级（最高层次）指标，必须与评价目标相一致，一级指标必须是由反映评价目标的主要因素所构成；而下一层次的指标，必须是反映上一层次指标的主要因素构成的。中考物理试卷评价的结果，是通过测量指标体系中最低层次（末级）

13、指标，首先取得最低层次指标的评价结果，而后逐级向上合成而得到的。如果最低层次指标的评价结果，不能反映上一层次指标所要求的结果，最后逐级合成的结果，也就不可能是评价目标的评价结果，也就不是我们所要评价的结果，不仅没有丝毫意义，反而有害。三、 评价标准指标体系的设计（一）设计中考物理试卷评价标准的主要方法中考物理试卷评价标准的设计主要依据现代教育评价理论、现代考试理论、现代素质教育理论以及物理学科教学论知识，并结合全国中考物理试卷评价工作的实践经验，先用 “经验法”初拟中考物理试卷评价指标体系；再用“专家问卷调查法”和初步试评价，筛选指标，最后形成比较科学合理的指标体系。（二）设计中考物理试卷评价

14、标准的步骤中考物理试卷评价标准的设计步骤按下述流程进行：明确评价对象确定评价目标提出初拟指标初拟指标权重筛选初拟指标构成指标体系 评定标准的制定进行试评价修改完善形成体系。初拟指标评价对象和评价目标中考物理试卷评价的对象是全国各地区地、市级或省级命题的初中毕业、升学考试物理试卷，其主要评价目标是通过规范试卷形式、完善试题内容质量、提高命题技术，从而促进初中毕业、升学考试改革，发挥考试的正确导向作用，使之有利于贯彻国家的教育方针，推进中小学实施素质教育；有利于体现九年义务教育的性质，全面提高教育质量；有利于中小学课程教学改革，培养学生的创造精神和实践能力，减轻学生过重的负担，促进学生生动、活泼、

15、主动学习；有利于正确引导初中物理学科的课堂教学。分解目标，提出初拟指标中考物理试卷评价的初拟指标，是根据评价目标，根据现代考试科学理论和现代素质教育科学理论、中学物理教学的任务和要求、物理学科特点等知识的理解，并结合我们物理评价组连续三年对全国中考物理试卷评价工作的实践经验，且在遵循上述指标设计原则的基础上，用“经验法”初拟而成。 指标体系的内容特征初拟评价指标体系由三级指标组成，一级指标三项（试卷形式特征、试卷内容特征、试卷技术特征），二级指标13项，三级指标若干项。试卷的形式特征及其对应的二级、三级指标，主要是为了规范试卷形式，以考试心理学和实际评价经验为主要依据，要求试卷充分考虑考生的考

16、试心理，尽量减少非智力因素的干扰，以便考生正常发挥其真实水平。 试卷的内容特征及其对应的二级、三级指标，主要是依据现代素质教育理论并结合物理学科特点，促进试卷内容改革，从而发挥考试的正确导向作用，引导初中物理教育从“应试教育”走向“素质教育”。在课程内容的改革方面，纲要强调“改变课程内容繁、难、偏、旧和偏重课本知识的现状，加强课程内容与学生生活以及现代社会和科技发展的联系，关注学生的学习兴趣和经验”，“改变课程实施过于强调接受学习、死记硬背、机械训练的现象，倡导学生主动参与、乐于探究、勤于动手，培养学生搜集和处理信息的能力、获取新知识的能力、分析和解决问题的能力以及交流合作的能力”。于是，中考

17、物理试卷评价指标体系的“试卷内容特征”分别设置了“联系社会或生活实际试题”、“材料题”二级指标，并在相应的三级指标中要求试题“物理情景真实可信，贴近学生生活或学习实际”“实际问题具有现实意义，有效考查应用物理知识解释、计算、分析解决实际问题的能力”、“有效考查阅读、收集信息、理解、分析、解决问题的能力”等内容。纲要指出：“改变课程过于注重知识传授的倾向，强调形成积极主动的学习态度，使获得基础知识和基本技能的过程同时成为学会学习和形成正确价值观的过程。”，强调了要从单纯注重传授知识转变为体现引导学生学会学习，学会生存，学会做人，尤其重要的是要在学习知识的过程中潜移默化地培养学生正确的价值观、人生

18、观和世界观，引导学生在学习知识的过程中，形成正确的价值选择，具有社会责任感，努力为人民服务，树立远大理想。因此，中考物理试卷评价指标的“试卷内容特征”的三级指标中特别提出试题应“具有良好的情感态度与价值观的导向作用”。纲要指出：“改变课程结构过于强调学科本位、门类过多和缺乏整和的现状，并设置综合课程，体现课程结构的均衡性、综合性和选择性”。这个课程目标强调了学科间的联系。于是，中考试卷评价标准在“试卷内容特征”方面又设置“综合题”的要求。虽然，目前我国初中阶段设置综合理科或自然科学课程的，还仅是少数地区，绝大多数地区仍是分科教学，分科分卷考试。“综合题”的设置决不仅仅是综合考试卷的要求（这些试

19、卷的命题者及当地实际教学过程中其综合意识应该已相当强），而主要是针对分科教学、分科分卷考试的地区，希望通过试卷中设置“综合题”，引导在平时的分科教学中要克服学科本位思想，适当强调学科间的联系。这也是符合儿童认知方式、现代人的素质需求的。“实验题”的设置，是由物理学科的特点所决定的。物理学本身是以实验为基础的自然科学，物理学中每一个概念的建立、每个定律的发现，都有其坚实的实验基础。物理实验方法也是研究自然科学的一种重要方法。物理实验教学是初中物理教学的重要组成部分，九年义务教育全日制初级中学物理教学大纲中规定，学生物理实验占学生物理总课时的12%（该比例不包括教师的演示实验、课外实验等）。教学大

20、纲对实验教学及其职能也有具体要求：初中物理教学要以观察、实验为基础；培养学生有目的地观察，辨明观察对象的主要特征及其变化条件；了解实验目的、会正确使用仪器、会作必要的记录、会写简单的实验报告、会根据实验结果得出结论。2001年出版的全日制义务教育物理课程标准（试用稿）也同样对实验教学予以高度重视，除了要切实落实课堂实验教学及学生实验外，还要求培养学生的科学探究能力（实际上以实验为基础），培养学生能从日常生活、自然现象或实验观察中发现与物理学有关的问题，并运用实验方法解决问题的能力。此外，教育部基础教育司在2000年指导中考试卷评价及指导中考改革的文件中，明确要求理科试卷应切实加强与实验有关内容

21、的考查。依据以上要求，在中考物理试卷评价指标体系的试卷内容特征中设置“实验题”是非常有必要的，有利于引导初中教学重视实验教学，切实重视培养学生的实验能力。培养学生的创新精神和实践能力是素质教育的重点。“具有初步的创新精神、实践能力、科学和人文素养以及环境保护意识”是基础教育课程改革纲要明确提出的培养总目标之一。教育部基教司“关于2000年初中毕业、升学考试改革的指导意见”中也明确提出“在试卷中应适当增加开放性试题”的要求。因此，中考物理试卷评价指标体系将“开放性试题”作为“试卷内容特征”的一项重要的下一级指标。尽管目前开放性试题在试卷中的比例很低，很多地区的试卷甚至没有开放性试题，但是，也有某

22、些试卷确实出现了非常好的“开放性试题”，这说明，只要命题者加强“开放性”意识，编制好“开放性试题”完全是可能的。中考中设置开放性试题，有利于引导中学的平时教学重视培养学生的创新精神与实践能力。试卷内容特征的二级指标“主、客观试题”主要是依据现代考试理论和教育实践经验而设置的。客观性试题由于具有评分客观、准确、快速、覆盖率高的优点，目前在大规模的统一考试中，大量采用客观性试题。但实践证明，这种考试所选拔出来的人才不一定是真正优秀的。因为，客观性试题难以检测考生的思维过程，且有猜测性。但主观性试题却能弥补这种不足，它不仅能检测考生的思维过程，而且能检测语言表达能力、综合评价能力，并使有独特见解的考

23、生有充分的发挥余地。因此，现代考试理论认为，为了进一步提高试卷的质量和考试的效度，应使主、客观试题相互取长补短。教育部基教司“关于2000年初中毕业、升学考试改革的指导意见”中也明确提出应根据学科特点处理好客观性试题与主观性试题的比例，特别要注意控制客观题的比重，适当增加主观题比例。这是当前考试命题改革的又一项重要内容，有利于引导平时的教学注重学生的全面发展。试卷的技术特征及其相应的二级、三级指标 ，主要是为了提高中考物理试卷命题技术，保证考试具有较高的信度和效度。其内容的设计主要是依据考试理论和实践经验。尽管绝大多数命题者对于命题技术方面的要求很熟悉，也很重视自身命题技术的提高，但在实际的中

24、考物理试卷评价过程中，也发现个别试卷的个别试题在命题技术方面有所欠缺，如题量过多、赋分不够合理，甚至出现答案有争议的试题、物理原理上有错误的试题等。因此，“试卷技术特征”应该作为试卷评价的常规项目，以此确保考试具有较高的信度和效度。初拟指标权重指标权重的意义评价指标体系不是评价指标的杂乱堆砌，而是一个有机整体，作为一个系统，各项评价指标在指标体系中是按照一定关系和联系组织的，没有各指标恰当的关系和联系，就不可能发挥指标体系的整体功能，就不能称之为指标体系。指标权重就是不同的评价指标在指标体系中关系和联系的体现，是评价指标体系的有机组成部分。指标权重同时也是评价指标量化的重要措施。由于同一指标体

25、系中，不同指标的相对重要程度不同，所以同一指标体系中对评价对象所得结果，是不等值的，我们不能把不等值的评价结果直接作计算处理。但是，只要我们对重要程度不相同的评价指标赋予不同的权重，就可以把本来重要程度不相同的评价指标视为基本相同，把不等值的评价结果变为基本等值。这就为评价指标的量化，为评价结果的综合运算创造了条件。中考物理试卷评价指标权重的初步确定在考虑如何确定中考物理试卷评价指标权重时，原打算直接用“问卷调查法”来确定。但考虑到问卷对象的日常工作都比较繁忙，为了减少问卷对象的工作量，决定先由个人用“两两比较法”初步确定权重，最后再由“问卷调查法”综合确定。所谓的“两两比较法”，是指本人依据

26、自身对评价内容相对重要程度的理解，对同一层次上的指标进行两两比较后确定权重的一种方法。经本人“两两比较法”而初步确定的指标权重如上表一所示。现对思考过程作一简要说明。本次权重采用小数表示。根据权重的意义，同一层次上各指标权重之和必须等于1，因此每一项指标的权重都应当大于0而小于1，同时，为了避免计算过于繁琐，每一项指标的权重只保留一位小数。关于三项一级指标，如果三项指标重要程度一样的话，每项权重都应该为0.33。但是，“试卷形式特征”相当于“试卷内容特征”和“试卷技术特征”，其重要程度相对显然要小，而“试卷内容特征”和“试卷技术特征”的地位应该相当，因此，“试卷形式特征”的权重应该为0.2，“

27、试卷内容特征” 和“试卷技术特征”的权重应该分别为0.4。“试卷形式特征”中的三项二级指标，“试卷插图”的准确清晰与否，直接影响考生答题的正误，它相当于“试卷格式”和“试题编排”而言其影响最大，应该得到较高的重视，而“试卷格式”和“试题编排”的重要程度相当，因此，“试卷格式”和“试题编排”的权重应该分别为0.3，而“试卷插图”的权重应为0.4。“试卷内容特征”中的六项二级指标，对于物理学科而言，“主客、 观试 题”、“ 联系社会或生活实际试题”、“实验题”和“开放性试题”，在中考物理试卷评价过程中，评价组各成员一致认为，这些试题对引导中学物理教学改革都有重要意义，评价组各成员对这些试题特别关注

28、，分析最为详细，同时也发现这些试题的编制还需进一步完善，命题者应予以高度重视。相当而言，“综合题”、“课外材料题”的要求就低一些。因此，“主客、 观试 题”、“ 联系社会或生活实际试题”、“实验题”和“开放性试题”的权重都分别为0.2，而“综合题”、“课外材料题”的权重分别都为0.1。“试卷技术特征”中的四项二级指标，“科学性”比“客观性”应该更重要，“试卷效度和信度”比“试题难度和区分度”应该更重要，因此，它们的权重应该分别为0.3、0.2、0.3、0.2。各项三级指标权重的初步确定，类似于上述思考，因项目较多，其具体过程不再祥述。筛选初拟指标初步提出的评价指标，一般数量较多，且没有认真考虑

29、质量标准，因此在这众多的初拟指标中，必然会有能够反映评价对象本质特征，符合指标设计原则的指标，也必然有一些不符号设计原则要求，不反映评价对象本质特征的指标，有的还可能内涵相同，互相包含，或互相矛盾，互为因果。筛选评价指标就是把那些不符号设计原则要求，不反映评价对象本质特征，互相包含、互相矛盾、互为因果关系的指标，进行归类合并，加以取舍，而把那些符号设计原则要求，反映评价对象本质特征的指标保存下来。问卷调查筛选评价指标体系的方法一般有经验法、调查问卷法和主成分分析法。经验法是凭借设计者的学识和工作经验进行筛选的一种简单试用的方法，但其科学性和客观性要差一些；主成分分析法的计算又过于繁冗，这种方法

30、目前尚未得到普遍使用。因此，本次中考物理试卷评价指标体系的筛选采用“问卷调查法”。这是在调查获取资料的基础上进行统计的方法。其具体做法一般是：把初拟指标制成问卷，发给有关专家和有经验的教育工作者，请他们对初拟指标每一项作出判断。这种方法在目前较常用，其科学性和客观性也较好。本次问卷想要了解的主题内容有两个：对初拟的中考物理试卷评价指标体系及其权重的意见、对发展中考物理试卷定量评价分析方法的意见 。最后，经问卷调查后调整的中考物理试卷评价指标体系如下表1所示。 表1 中 考 物 理 试 卷 评 价 指 标一级指标二 级指 标 三 级 指 标试卷形式特征(0.2)试卷格式 （0.3）1 试卷全称应

31、依次包括试题适用范围、适用年份、考试性质及考试方式。（0.2）2 卷头应有登分栏、整卷说明(包括大小题数、考试时间、总分)。(0.2)3 整卷的大题和小题分别统一编号；每一大题都有相应的解答要求和分数。(0.4)4 试卷每页的下端有避免考生漏题的提示语。(0.2) 试 题 编 排 (0.3)1试题陈列简约合理，预留的考生作答空间大小合适。(0.3)2同一题目的陈述及其相应的插图不跨页。（0.3）3试题编排适合考生心理，基本遵循从最易易较难难。(0.4)试卷插图 (0.4)1 图形准确、清晰，尺寸恰当。(0.4)2 图文匹配，并有明确、统一的图形编号。(0.3) 3 图中所用符号或器件的表示与教

32、材的规定一致。（0.3） 试 卷 内 容 特 征(0.4)联系社会或生活实际试题 (0.3)1 物理情景真实可信，贴近学生生活或学习实际。（0.3）2 实际问题具有现实意义，有效考查应用物理知识解释、计算、分析解决实际问题的能力。（0.4）3 具有较强的时代气息，良好的情感态度与价值观的导向作用。（0.3）实验题 (0.3)1 综合考查知识、实验操作技能、观察能力、数据处理、结论描述等实验能力，引导中学实验教学重视实验的实际操作和能力的培养。(0.5)2 试题不局限于课本学生实验，重在引导学生掌握科学的实验方法和科学的实验态度解决具体问题，引导注重对科学探究能力的培养。(0.5)开放性试 题 (0.2)1 试题设置合理，确实具有条件开放、过程开放、或结论开放的特点。(0.4)2 学生自由发挥余地