1、命题基本知识卢正勇(2007.3.21 上午 8:30 福州教育学院)一、命题的概念命题是依据考试目的、性质和特点,按照教育测量学原理编制质量良好的试题、组成符合要求的试卷并给出科学的参考答案与评分标准。二、命题的依据1、考试的目的、性质和特点(1)考试的目的、性质:择优选拔的选拔性考试与参照标准的达标性考试。(2)特点:考试对象与考试方式(闭卷、开卷等)2、考试大纲考试大纲是根据考试目的和所要测量的构念(如数学能力或语言能力等),编制的描述命题原则与考试内容范围及技能、能力要求的文件。命题必须依据考试大纲。3、考试的质量要求(1)信度:分数的可靠性,体现测量误差。抽样误差:内容抽样的代表性,
2、覆盖面、重点、题量。试题编拟质量。评分误差:题型选择与此有关。(2)效度:考试考到它打算考的东西的程度,考试目的达到了没有。考试是否有效可从以下几方面收集证据。考试内容方面的证据考生应答过程方面的证据试卷内部结构的证据考试与外部变量的关系证据考试的社会后果方面的证据(参阅:美国教育研究协会等编,燕娓琴等译,教育与心理测试标准,沈阳出版社,2003,3)(3)公平性:考试试卷内容对不同地域、不同学校、不同民族、不同性别的群体是公平的。(4)社会影响社会主流价值取向对学校教育、教学的影响三、试卷结构设计命制一份试卷,需先考虑试卷结构,包括:1、知识结构:对考试大纲内容如何抽样。考些什么内容:重点内
3、容、次重点内容、一般内容、突出重点,照顾覆盖面,通常以章(节)或知识单元的分数比例体现。2、能力结构:(1)布卢姆认知领域目标分类:识记、领会、运用、分析、综合、评价。(2)我国高教自学考试认知能力分类:识记、领会、简单应用、综合应用。确定各层次占分比例,体现对考生能力要求。(3)不同认知层次题目示例;编制高认知层次选择题的技术,精心编制的选择题,既可考核低认知层次能力,也可考核高认知层次能力,以考核小学教学求圆周长问题为例说明。例 1(识记)如果圆半径是 r,那么计算圆周长 C 的公式是(B)(A)C=r (B)C=2r (C)C= r 2 (D)C=2r 2换一个角度提问题(相反方向):例
4、 2(领会)如果一个圆的周长是 2 米,那么它的半径是(A)(A)1 米 (B)2 米 (C) 米 (D)2 米创设问题新情境,考核简单应用例 3(简单应用)如果把地球近似地看作一个圆球,答地球半径 r 增大 1 米,则赤道将增大多少米?(C)(A)4 米 (B)2r 米 (C)2 米 (D)4r 米在题中增加知识点和思想方法,可达到综合应用水平。例 4(综合应用)一段长为 1 米的圆柱形圆木的体积是 9 3,那么这段园木的周长是(D)(A)3 米 (B)9 米 (C)3 米 (D)6 米知识点:圆柱体体积、圆面积、圆周长的概念、关系、求法。思想方法:倒推法:圆木周长圆木半径圆木底面积圆木体积
5、和长度。(参阅:卢正勇,编制高认知层次选择题的几种途径,全国第二届高教自学考试命题工作专题研讨论文集,电子科技大学出版社,1995,10)3、难度结构(1)试题难度是题目难易程度的指标,在经典测验理论中:试题难度=考生在该题得分平均值/试题满分值难度值在 0-1 间取值,难度值越大,题目越易。考后可统计出每道题的难度值。考前可按试题内容属性,由教师评估其“内容难度”。这些属性包括:试题的能力层次、问题情境的复杂性、试题包含的知识点,解答该题的策略、推理、计算的复杂性等。(参阅:卢正勇,标准参照性考试试题的内容难度及其专家共同评判法,应用概念统计,7 卷 2 期)(2)试题难度一般可分为四类(也
6、有只分易、中、难三类的):容易题 中等偏易 中等偏难 难题难度值 10.7 0.70.5 0.50.3 0.30难度结构即考虑四类题目的比例分配及全卷平均难度值。4、题型结构(1)目前各类考试所用题型五花八门,如果以能否客观评分来划分,可分为客观题与非客观题(主观题)两大类。客观型:单项选择题、双项选择题、多项选择题、不定项选择题、是非题、是非并说明理由题、配对题、填空题等。非客观型:名词解释、简述题、论述题、案例分析题、作文题、计算题、证明题、应用题等。(2)选用题型的基本原则:适合本课程考核目的。如案例分析适合法律、医药;作文适合写作课程及外语;计算、证明适合数学等,通常考试大纲中对本课程
7、题型都已作了明确规定。客观型试题应当发挥其优点;主观型试题也应当发挥其优点;使两者优势互补,抵销各自的缺点。客观型应发挥的优点:思考、不书写、答题速度快,可增加题量,扩大覆盖面,评分客观,可提高信度及内容效度;缺点:难以考核组织能力、表达能力和创新能力、编制高认知层次能力的题目难。较好题型为单项选择题(4 选 1、5 选 1)。主观型试题应发挥的优点:考核高认知层次能力,考核组织、表达、创新能力。缺点:答题费时多,题量不可能多,影响覆盖面;评分误差大。简述、论述、案例分析、作文、计算、证明等均为可用题型。两种题型基本分工识记 领会 简单应用 综合应用客观型 主观型 客观型:主观型=5050 或
8、 4060 或 6040题型不是越多越好;应选用常用(包括中学生已习惯使用),勿使学生因不适应新题型的作答而产生答题误差。对于开卷考试,可能照抄书本的题型不宜使用,如名词解释、文科课程的填空题等。四、试卷蓝图设计试卷蓝图是描述试卷内容结构、能力层次结构、题型题量结构及难度结构等有关试卷构成细则的文件。它通常以一个表格(双向细目表或多向细目表)呈现。1、试卷蓝图设计示例:设某数学课程考试大纲共五章,其中 3、4 章为重点章,第 5 章为次重点。(1)内容结构第一章 第二章 第三章 第四章 第五章10 10 30 30 20(2)能力层次识记 领会 简单应用 综合应用10 30 40 20(3)题
9、型:选择题(四选一);计算题;证明题;应用题(选择题(一):识记层次,每题 1 分;选择题(二):领会层次:每题 2 分)题满分 题量 合计分数选择题(一) 1 10 10选择题(二) 2 15 30计算题 5 6 30证明题 10 1 10应用题 10 2 20选择题共 25 题非选择题:9 题总题量:34 题客观:非客观=40:60(4)难度:容易题 中等偏易 中等偏难 难题20 40 30 10示例:某课程试卷蓝图识记 领会 简单应用 综合应用 认知层次分 题型数知识内容(选择题)(一)(选择题)(二)计算题证明题应用题计算题证明题应用题小计第一章 3 2 5 10第二章 1 4 5 1
10、0第三章 2 8 10 10 30第四章 2 8 10 10 30第五章 2 8 10 20合 计 10 30 40 20 100(参阅:卢正勇,高等教育自学考试命题概论,高等教育出版社,1989,11)2、设计试卷蓝图的意义(1)体现考试要求:内容方面,保证重点,照顾覆盖面,能力要求体现在认知层次分配上。本例:识记 领会 简单应用 综合应用 合计10 30 40 20 100及格要求 9(90%)24(80% )24(60%) 3 60对及格学生能力要求偏低的设计例子识记 领会 简单应用 综合应用 合计20 40 30 10 100及格要求 18(90%)32(80% )10(33%) 0
11、60(2)便于领导审核,控制试卷内容的有效性。(3)控制试卷平行,建设题库。平行试卷:内容结构比例相同、能力层次结构比例相同、题型结构比例相同、难度结构比例相同。(参阅:卢正勇等,平行试卷的概念、性质及其数学模型,中国考试,1994,3)(4)根据蓝图编题和组卷。根据蓝图编题根据蓝图从题库中抽题五、题库1、题库的概念:题库一词最早出现于上世纪 60 年代。早期的题库概念是指为了某种考试编制试卷的需要,在教育测量理论指导下编制的一批质量优良、附有性能指标、分类贮存的试题集合。当前的题库概念已发展为在某种测验理论指导下,为某种测验目的编制试卷的需要服务的一个计算机系统。该系统包含具有必要参数编码存
12、贮的大量优质试题,并具有试题管理功能、组卷功能、系统管理功能,有的还附有测试功能及数据分析功能等。特点:目的性、教育测量理论基础(CTT、IRT)、组成单位为试题、试题有性能指标、答案及评分标准是一个计算机系统。2、题库的设计技术建设目标设计、测量指导理论设计、计算机性能设计、试题存贮结构设计(蓝图设计、存贮试题的指标体系设计)、试卷生成系统设计、计算机软件系统设计。3、题库建设的实施人员组织与培训、编制考核点及考核要求、研制试卷蓝图及题库结构蓝图、编制试题、审题与参数赋值、试题的编码与存贮、研制试卷生成系统等计算机软件系统。六、作业以你所担任学科课程的一个学期(或一个单元)的内容,编制一份该课程考的试卷蓝图,并简要说明编制蓝图的思路。