1、利用信息技术规范教学过程、提交教学质量Blackboard中国教育研究院研究员 张 丹 博士2 普通高等学校本科专业类教学质量国家标准 3 国标 三大基本原则学生中心本科教学从“教得好 ”向“学得好 ”转变产出导向提高人才培养的目标达成程度、社会适应度、条件保障度、质保有效度和结果满意度持续改进建立学校质量保障体系(教学过程质量监控机制、毕业生跟踪反馈机制、专业的持续改进机制)把常态监测和定期评估有机结合及时评估、及时反馈、持续改进4评估与评测Assessment5Assessment 评估、评测、考核 寻求证据来支持论断学生学会了吗?他们具备 能力了吗? 评估和评测是自然发生的,我们一直都在
2、做 评测是持续改进的引擎和 基础 通过 第三 方评估机构 的评估与认证是副产品Assessment is the systematic collection of information about student learning in order to inform decisions that affect student learning.6评测的三个层面课程评测院系评测学校评测7评测的步骤目标Goals, outcomes, objectives考核测量Measures, information, evidence行动Action, closing the loop8收集信息进行评测
3、 问卷 校友问卷、用人单位问卷、学生问卷等 标准化考试 综合知识技能( CLA/ETS/ACT) 课程考核环节 Classroom Work 与目标成果 /能力匹配 作业 题目和要求需要认真设计9收集什么样的课程作业?使能力精通的课程的学生作业(临近毕业) 毕业设计、高年级专业课研究论文、项目报告等 发现学生在即将毕业时,能力有什么优势和劣势? 选一些薄弱能力,采取改进措施前后期对比 抽取学生进入大学专业学习之初和结束时的作业样本 学生在校四年学习完,获得了什么样的能力的提升个人学习档案夹 portfolios 学生学习成长档案:包含不同阶段不同时期完成的作业 学生的能力是如何一步一步培养建立
4、的?10如何收集?1. 抽样选取一部分 老师请他们提交他们所教的学生的作业请他们分析学生作业,提交分析报告2. 抽样选取一部分 学生请他们提交自己的作业3. 从在线学习平台中下载这部分学生作业11评测 方法 评分量规 Rubrics诊断性数据详细描述每个分数段的表现学生利用评分量规来指导他们的作业研究项目 75分学生在 P和 Q方面能力优秀,在 X和 Y方面还很薄弱,需要加强。12书面沟通能力数值 1 2 3 4写作 不满意 一般 满意 优秀风格拼写 /语法错误覆盖论文 1/3以上;风格不适合读者,没有遵循规定的格式。要点陈述有条理,但观点阐述不清楚;每页有两个以上语法 /拼写错误;遵循规定的
5、格式但写作风格不适合对应读者群。表达观点清楚;每页有一到两个语法/拼写错误;遵循规定的风格。清晰准确地表达观点,表述和呈现整齐专业,没有语法 /拼写错误,采用专业的写作风格,符合规定的格式。组织结构 文字冗长,主要观点的陈述缺乏条理性。 大部分材料有条理性,个别段落阐述多个主题,章节划分不明确。 能够按照逻辑顺序组织材料来加强读者的理解,文章内容丰富 能够按照逻辑顺序组织材料。文章内容丰富、有说服力图像 /图表 /表格与文字材料的关系即使要求采用图像 /图表 /表格的格式,也很少使用。不知道什么时候应该用图像 /图表 /表格的形式来说明数字或实例,从而增进读者的理解文中能够包含要求使用的图像
6、/图表 /表格;不能在上下文中明确介绍图像 /图表 /表格的重要性文中能够包含要求使用的图像 /图表 /表格;能够模仿之前类似的形式,用图像 /图形 /表格的方式来归纳展示数字 /实例;在上下文中能够明确介绍图像 /图表 /表格的重要性能够独立设计和制作图像 /图表 /表格,用来归纳和展示数字 /实例,不是借用或参考之前工程作业中出现的例子;在上下文中能够明确介绍图像 /图表 /表格的重要性图像 /图表 /表格的格式即使要求采用图像 /图表 /表格,但是没有使用图像 /图表 /表格有时很难读懂,标签 /图例 /标题缺失或不恰当图像 /图表 /表格容易读懂;图像 /图表 /表格有恰当的标签和图例
7、;图形的相关部分(坐标轴、图例、行列的标题等)配有适当的标题提交的作业中的图像 /图表 /表格表意清楚,标题、标签、图例等完整切当,图表整齐美观参考文献很少或没有参考文献;即使引用了参考文献,也不能按照引文格式书写仅引用了课堂上给出的参考文献;引文格式不符合任何标准格式,文献之间的格式也不统一引用了充足的权威性的参考文献;大部分文献都可以根据提供的信息追踪到每个论断都有参考文献支持;所有的引用文献采用 IEEE格式或者其他标准引文格式;所有文献都可以根据提供的信息追踪到13评测 方法教师根据一定标准,批阅学生作业记录下每份作业的优势和劣势研究分析学生个人学习档案夹 包含他们大学四年提交的主要作
8、业,访谈记录、问卷调查、学生作业和考试分数 教师集体讨论,定性分析14汇总和分析学生作业方案一任课教师根据作业评分量规给学生作业打分,提交量规单项得分统计/学生作业优劣势分析报告汇总分析量规分项得分 /任课教师优劣势分析报告方案二课程外由其他老师根据能力量规给抽样学生作业评分,评审老师提交量规得分 /学生作业整体优劣势分析报告决策者:院系、学校、管理者学生课程作业15分析 数据怎么分析评估结果?什么样的结果说明学生已经成功获得这项能力?什么样的结果说明学生在 能力上还需要加强和改进?16书面 交流能力量规成绩数值 1 2 3 4写作 不满意 一般 满意 优秀风格5% 的学生:拼写 /语法错误覆
9、盖论文 1/3以上;风格不适合读者,没有遵循规定的格式。30% 的学生:要点陈述有条理,但观点阐述不清楚;每页有两个以上语法 /拼写错误;遵循规定的格式但写作风格不适合对应读者群。50% 的学生:表达观点清楚;每页有一到两个语法 /拼写错误;遵循规定的风格。15% 的学生:清晰准确地表达观点,表述和呈现整齐专业,没有语法 /拼写错误,采用专业的写作风格,符合规定的格式。组织结构 5% 的学生:文字冗长,主要观点的陈述缺乏条理性。25% 的学生:大部分材料有条理性,个别段落阐述多个主题,章节划分不明确。40% 的学生:能够按照逻辑顺序组织材料来加强读者的理解,文章内容丰富30% 的学生:能够按照
10、逻辑顺序组织材料。文章内容丰富、有说服力图像 /图表 /表格与文字材料的关系5% 的学生:即使要求采用图像 /图表 /表格的格式,也很少使用。不知道什么时候应该用图像 /图表 /表格的形式来说明数字或实例,从而增进读者的理解25% 的学生:文中能够包含要求使用的图像 /图表 /表格;不能在上下文中明确介绍图像 /图表 /表格的重要性55% 的学生:文中能够包含要求使用的图像 /图表 /表格;能够模仿之前类似的形式,用图像 /图形 /表格的方式来归纳展示数字 /实例;在上下文中能够明确介绍图像 /图表 /表格的重要性15% 的学生:能够独立设计和制作图像 /图表 /表格,用来归纳和展示数字 /实
11、例,不是借用或参考之前工程作业中出现的例子;在上下文中能够明确介绍图像 /图表 /表格的重要性图像 /图表 /表格 的格式10% 的学生: 即使要求采用图像 /图表 /表格,但是没有使用45% 的学生:图像 /图表 /表格有时很难读懂,标签 /图例 /标题缺失或不恰当35% 的学生:图像 /图表 /表格容易读懂;图像 /图表 /表格有恰当的标签和图例;图形的相关部分(坐标轴、图例、行列的标题等)配有适当的标题10% 的学生:提交的作业中的图像 /图表 /表格表意清楚,标题、标签、图例等完整切当,图表整齐美观参考文献15% 的学生: 很少或没有参考文献;即使引用了参考文献,也不能按照引文格式书写
12、40% 的学生:仅引用了课堂上给出的参考文献;引文格式不符合任何标准格式,文献之间的格式也不统一35% 的学生:引用了充足的权威性的参考文献;大部分文献都可以根据提供的信息追踪到10% 的学生:每个论断都有参考文献支持;所有的引用文献采用 IEEE格式或者其他标准引文格式;所有文献都可以根据提供的信息追踪到17实验能力量规成绩18行动通过评估发现问题,基于已有的研究和经验,寻找解决问题的办法化学专业的学生,解决问题的能力差大班授课方式也许对这些学生不是很有效 增加锻炼解决问题能力的小组作业 增加问题解决类的评分作业,并及时给予反馈研究建议19闭环 Close the Loop评测改进措施是否有
13、效 小规模(如不同专业的10门课),抽样,改进,审查改进结果 大 样本不好控制,影响因素(变量)太 多20Blackboard支持成果导向的评测21设定学习成果(毕业能力)目标22Course Type Course Title PLO 1 PLO 2 PLO3 PLO4PLO 1.1 PLO 1.2 PLO 2.1 PLO 2.2 PLO 3.1 PLO 3.2 PLO 4.1 PLO 4.2Core CoursesOrganizational Behaviour M I MManagement Ecnomics M I I MOperational Management M I I MMa
14、nagement Statistics M M M I I IAccounting M M I IFinancial ManagementI M M IMarketing Management M I M I MHuman Resource Management I I M MStrategic Management M I M I M MManageemnt Information System M I IBusiness Ethics and Social ResponsibilityI I IInnovation and Revolution ManagementM I M IArt o
15、f Leadership M构建课程地图( Curriculum Map)23课程考核环节与目标(毕业能力)匹配表Course Type Course TitlePLO 1 PLO 2 PLO3 PLO4PLO 1.1 PLO 1.2 PLO 2.1 PLO 2.2 PLO 3.1 PLO 3.2 PLO 4.1 PLO 4.2Core CoursesFinal Exam, Group Report( M)Final Exam,Case Study, Group Report( M)Organizational BehaviourFinal Exam( M) Final Exam( M)Man
16、agement EcnomicsFinal Exam,Case Study, Group Report( M)Final Exam,Case Study, Group Report( M)Operational ManagementCase Study( M) Case Study、 GroupReport( M)Case Study、Group Report( M)Management StatisticsFinal Exam( M) Final Exam( M)AccountingFinal Exam( M) Final Exam( M)Financial ManagementFinal
17、Exam,Case Study( M)Final Exam,Case Study( M)Final Exam,Case Study( M)Marketing ManagementFinal Exam,Case Study( M)Final Exam,Case Study( M)Human Resource ManagementFinal Exam( M)Final Exam,Case Study( M)Group Report( M)Individual Presentation( M)Strategic ManagementFinal Exam( M)Manageemnt Information SystemCase Study、 Group Report( M)Group Report( M)Innovation and Revolution Management24将课程考核环节与毕业能力相匹配25系统中将课程作业与毕业能力目标匹配26将作业评分量规的单项标准与毕业能力目标匹配27将测试题目与毕业能力目标匹配28每门课程评估报告29学生表现评估报告30课程层面学生毕业能力达成度报告