1、评价责任机构和人员组成
专业毕业要求达成评价由院、系两级专门机构实施。学院毕业要求达成评价机构由院教学指导委员会成员构成,负责审查毕业要求及其观测点分解的合理性,并与专业教师确定各项观测点的支撑教学活动,制定审核评价方法,由专业教师实施评估与收集数据。以系为单位成立了毕业要求达成情况评价小组,对毕业要求达成情况数据合理性进行分析,最终经教学指导委员会讨论确认毕业要求的达成情况。毕业要求达成情况评价机构和人员职责如表1所示。
2、评价对象和评价周期
评价周期为1年,对每届获得学士学位的学生评价一次,通过对全体学生的学习成果对毕业要求进行达成评价,充分反映学生毕业要求达成的总体情况。
3、评价过程和方法
针对不同类型的毕业要求,采用不同类型的评价方法,这些毕业要求达成评价方法包括直接评价和间接评价两类,以直接评价为主,以间接评价收集的数据作为补充。直接评价以课程考核成绩分析法、评分表法为主;间接评价主要指问卷调查法。
(1)课程考核成绩分析法
首先计算各教学环节对毕业要求观测点的达成情况,即用支撑毕业要求观测点的教学环节课程目标的达成度乘以该课程目标对毕业要求观测点的支撑权重,得到各教学环节对毕业要求观测点的达成度;然后计算毕业要求观测点的达成情况,即将各教学环节对毕业要求观测点的达成度求和,计算出该毕业要求观测点的达成度;最后确定毕业要求的达成度,即选取毕业要求各观测点达成度的最小值为该毕业要求的达成度。
(2)评分表法
评分表法主要用于评价非技术性指标,通过制定详细、具体、可衡量的评价指标,设置不同的达成情况层级,并对观测点的不同达成情况给出定性描述,形成评分表。结合学生的实验报告、实习报告、设计报告、作业等依据评价学生在该项指标上的表现,通过满意程度给出量化分数,从而计算出达成度评价值结果。按照评分表给出的分制算出的结果,转化为百分比,汇总评价结果。评价结果通过算术平均,计算某项评价指标对应某一项毕业要求观测点的评价值。
以此方法,对某一项毕业要求观测点,计算各门支撑课程的达成度评价值结果,根据各门课程的支撑权重,加权重算出该项毕业要求观测点的评价值,加权和计算的方法参照课程考核成绩分析法。
(3)问卷调查法
间接评价主要基于毕业生和用人单位的问卷调查结果,即从学生自身角度和第三方角度分别评价毕业要求的达成情况。具体方案如下:
①调查问卷中除了学生能力、培养目标评价、师资情况评价等问题外,针对12项毕业要求设置“教学效果评价”问题类,为每项毕业要求设置五个选项(1至5分),不同分值代表不同的达成度评价值(5表示完全达成)。
②分发调查问卷,分别由毕业生和用人单位进行填写。
③回收调查问卷,筛选有效问卷,统计毕业要求达成问题的回答结果。
④计算获得各类问卷的毕业要求达成度评价结果后,并进行汇总。
此法可参照评分表分析法进行对某一毕业要求观测点进行毕业要求达成评价结果的定量计算。
(4)毕业要求达成标准确定方法
以取得毕业证和学位证的绩点最低的毕业生成绩为参考标准,以该生的各项毕业要求达成最低值为合格标准。如果专业毕业要求的达成度评价值大于等于该生的毕业要求达成度评价值,即为达成,否则为没有达成。合格标准拟定2~4年调整一次。
4、评价过程
(1)确定用于评价的教学环节及其支撑权重
学院组织教学指导委员会和专业全体教师讨论确定用于评价的教学环节及对应的课程目标,并对各课程目标支撑毕业要求观测点的支撑权重赋值。
(2)评价依据的搜集
针对不同的评价方法,收集不同时期的评价数据作为评价依据。数据收集过程中,发现评价方法有不合理之处,及时调整,或补充采用其他的评价方法收集数据。要求教师在收集数据的过程中及时跟进反馈情况、及时调整教学活动。
课程考核成绩分析法使用的评价数据为与专业直接相关的技术性指标达成情况数据。依据各门课程的考核材料,根据课程考核方式的不同,包括试卷、作业、实验、小论文、实习报告、程序、及创新性等进行课程达成情况评价数据,数据要明确指出对课程支撑观测点的对应评分标准。
评分表分析法中的评价依据是团队合作、沟通、工程职业道德等非技术性指标达成情况评价数据,主要包括实验报告、设计报告、实习报告、作业、课堂表现等。
问卷调查法中的评价依据主要包括应(往)届毕业生及用人单位的调查问卷结果。
(3)确认评价依据的合理性
由计算机科学与技术专业人才培养工作组对支撑毕业要求观测点各门课程的评价依据(主要包括各门课程的试卷、作业、报告、设计等)进行合理性确认,确保课程教学活动能够支撑毕业要求,课程考核内容和评分要求也能反映对该项毕业要求观测点的评价。合理性确认内容包括一是确认考核内容是否完整体现了对相应毕业要求观测点的考核(试题难度、分值、覆盖面等);二是确认考核形式是否合理(期末考试、设计或作业、报告);三是确认评分标准是否严格。若确认结果为不合理,则不采用上述试卷或报告作为达成度评价依据。
(4)计算毕业要求的达成度
按照前述评价方法计算各教学环节对毕业要求观测点的达成情况、各毕业要求观测点的最终达成情况,以及各毕业要求的最终达成度。由于不同的毕业要求可能适用不同的评价方法,对于采用多种评价方法的观测点,最终的评价结果要通过多种不同的评估方法交叉对比、相互佐证、综合分析形成最终的评价结果。
(5)形成评价记录文档及确定评价结果
形成毕业要求达成度评价过程及结果记录文档,交由院教学指导委员会审核;院教学指导委员会讨论确定毕业要求达成的最低合格标准,明确各项毕业要求是否达成。
5、评价结果使用要求
由于不同的毕业要求可能适用不同的评价方法,对于采用多种评价方法的观测点,最终的评价结果要通过多种不同的评估方法交叉对比、相互佐证、综合分析形成最终的评价结果。毕业要求的达成情况评价结果采取“毕业要求达成情况评价表”等形式进行结果反馈,要体现出对评价结果达成情况的明确判定。
毕业要求达成情况评价小组负责将评价结果通知各课程组教师,包括评价过程中的数据和最终评价结果。教师针对评价结果的不足确定改进方法,用于教学活动的持续改进。