(2)专业综合评估。以学生、教学工作为中心,从投入、加工、产出来设计一、二级指标;在若干个反映专业办学状态的指标中,选取具有代表性、方便量化且可重复验证的指标;设计科学合理的评估标准,将定量与定性(以定量为主,占近70%)、过程性与终结性评价方法相结合,客观反映专业改革和建设的真实状态。
(3)学院本科教学工作状态评估。评价指标既体现了国家教育政策和教学评估导向,更多的指标则体现了学校发展规划任务、日常教学管理工作以及学校的具体情况,突出评价学校阶段性工作的重点和难点,采用新增数据,以鼓励当前的发展进步。
(4)学校本科教学基础状态数据监测。以全校本科教学基本状态数据为依据,对照院校审核评估指标体系,对学校本科教学质量进行写实性自我评价,涵盖了教育部规定的质量报告必须提交的支撑数据,学校通过横向比较和纵向比较,查找影响教学质量的突出问题,分析主要原因,提出解决问题的措施及建议,成果是学校年度质量报告。
5. 建设了基本状态数据与时点评价数据相结合的结果呈现平台 先后自主研发了学生网评系统、网络辅助教学平台、本科专业综合评估系统、专家(同行)评教数据库、学院本科教学工作基础状态数据库等,并依托教育部评估中心的高等教育质量监测国家数据平台,形成了学校层面的本科教学基础状态数据库,作为年度质量报告的基础数据来源。采取“以基本状态数据为基础,将定量与定性评价相结合”的评价方式,用数据和事实说话,既解决了“教学质量难以量化”的难题,又增强了评价结果的信度和效度,提高了工作效率。
6.形成了评价激励与约束机制相结合的持续改进机制
学校出台系列政策,积极应用评价结果,除予以专项奖励外,将评价结果纳入资源配置、招生计划编制、学院绩效考核、遴选和建设优势特色专业、评奖评优条件、教师职称评聘条件等重要依据。学校评估工作持续开展,在“评估—反馈—整改—再次评估”的不断运行过程中,监测教学工作整改成效,实现教学质量的持续改进。
三、成果的创新点: 1.理论创新
本成果提出了“将‘点、线、面、体’自我评估作为高校内部教学质量监控与保障体系的核心和关键”的理论,为教育部“五位一体”评估制度中的自我评估制度做出了有益的诠释。成果借鉴学习国内外高校最新评估理念和做法,选取影响高校本科人才培养质量的核心要素--课程、专业、学院、学校,构建了“点、线、面、体”融合的教学质量自我评估与诊断系统,四者的评价分别自成体系、边界清晰,但又环环相扣,互为联系、互为补充,实现了自我评估的全方位、全过程常态监测,并运用信息化手段,实现评价结果的量化和排序,为校内教学质量监控与保障体系的有效运行提供了抓手,使自我评估真正成为整个体系的核心和关键,保证了体系的有效运行。项目的实施,
2.实践创新
(1)坚持用数据说话,实现了评价结果的量化和排序,为教学质量的持续改进提供了抓手
教学质量评价难以量化是长期困扰高校管理人员的问题。从一定意义上说,在高等教育大众化的今天,不可量化就不便管理,持续改进也就失去了抓手,教学质量保障体系的效度则大打折扣。
南昌大学通过实践,坚持探寻大数据时代“互联网+评估”的路径,遵循高等教育与信息化相融合。设计了以基本状态数据为基础,以定量评价为主、定性评价为辅的教学评价体系和评价模式,开发建设了评估系统平台,使教师授课结果数字化、使专业和学院教学状态与水平可以排序并得到验证,使学校基础状态数据的分析比较中发现问题,可以使一大批默默无闻的优秀教师脱颖而出,使教学问题持续改进有了抓手,从而促进了各方面教学质量的稳步提高。
(2)创新了多种评价方法,保证评价结果的可信度
①在授课质量评价中,首创“人课”概念,并创新“课程分类评价”方法。以同一位老师(或课程组)上同一门课程为评价对象,即所谓的以“人课”为评价对象。课程分类评价是为了避免由于课程性质不同对学生评价结果造成的影响,在排序时按课程亚类(如II类通识课里的人文社科亚类)进行。
②在学生网评时,设计了一系列办法,保证学生参评率、保证学生评价数据是真实意愿的表达。如网上设计两段式评价,使学生一次性对本学期所有课程进行总体比较评价;要求同时评价课内和课外教学质量,保证评价结果的全面性。
③ 专业综合评估时,参考江西省对同一专业进行评价的经验,抽取其中共性的可量化或可对比、检验的指标,制定较为科学的计算
公式,采取按学科分类评价的方式,巧妙地破解了“不同专业难以比较排序”的难题。评估结果得到了普遍认可。
④学院本科教学工作状态评估,强调校院两级教学管理新体制下,学院在教学质量监控过程中的作用,实现教学管理重心下移。在指标体系设计时,将审核评估指标体系与学校教学过程常态数据与重点工作完成情况评价相结合,更多地体现学校发展任务、日常教学管理工作以及学校具体工作的重点和难点等完成情况。
四、成果的推广应用效果
1.授课质量评价工作成效明显
自2010年评教工作开展以来,共评出授课质量优秀奖768项、提名奖1248项,网络辅助教学优秀奖385项;共有97门次评价成绩后10%的人课经帮扶和教师努力,进入评价成绩前30%行列,同时也淘汰了一批教学质量低的课程。
2.专业结构不断优化
学校将专业评估结果作为校内专业结构调整优化的重要依据,依据评估结果,近3年先后停招公共事业管理、财务管理等10个本科专业。项目实施推动了学校专业认证(或评估)工作,食品科学与工程、土木工程、建筑学、材料科学与工程、临床医学专业先后通过国家级专业认证(或评估),化学工程与工艺、制药工程、环境工程三个专业获批参加2018年工程教育专业认证。
3.学院本科教学持续改进
6年来,学院状态评估共评出一等奖40项、二等奖44项,6年评估中全部学院(部)均有获奖,评估即时滚动、竞争发展的功能充
分显现。各学院共凝练办学特色60余条,查找本学院本科教学方面存在的大小各种问题100余条,制定整改措施300余条,教学质量稳步提升。
4.学校本科教学整体水平持续提升
学校近七年查找到影响教学质量的主要问题14条,均认真制定改进方案并顺利完成整改。近五年,学校荣获第七届高等教育国家级教学成果奖二等奖2项;新增国家级虚拟仿真实验中心2个(含医学1个),国家级工程实践教育基地4个,国家级大学生校外实践教育基地2个,国家级实验教学示范中心2个,国家双语教学示范课程1门,5门课程入选国家资源共享课和国家精品视频公开课,主编的多门教材评为国家规划优秀教材, 10项多媒体课件获第十三届全国多媒体课件大赛二等奖及优秀奖等。中国管理科学研究院《中国大学评价》研究数据显示:南昌大学本科人才培养单项得分从2014年的45位稳步逐年提升至2018年的39位。
5.本科人才培养质量持续提高
学生在各级各类竞赛中表现优秀,在近两届“互联网+”大学生创新创业大赛中,学校共获得全国金奖1项、银奖3项,铜奖5项,并获最具人气奖(全国唯一)和集体奖(排名15位);在近两届“创青春”全国大学生创业大赛中,学校连创佳绩,多项作品入围终审决赛;三年累计获得美国数学建模大赛、美国IDEA工业设计竞赛、全国大学生电子设计竞赛、德国红点概念设计大赛、大学生“飞思卡尔”杯智能汽车竞赛、全国临床医学技能竞赛等各级各类国家级学科
竞赛一等奖60余项,二等奖85项,三等奖近百项。2015年中国大学创业竞争力评级榜我校排行25位,充分显示了学校的实力与水平。
毕业生就业情况良好,年底就业率持续保持在93%以上,考研率保持22%以上,招就处4年“用人单位调查问卷”显示:98%的用人单位对学校毕业生综合素质高度认同。
6.成果示范与辐射作用显著
项目实施以来,受到同行与社会广泛认可。中国农业大学、北京航空航天大学、广西民族大学、江西师范大学等30余所高校的教务或评估部门先后来我校考察调研,南昌大学的做法得到同行普遍认可。
学校先后在“清华教育信息化论坛”“ 全国数字校园建设与创新发展高峰论坛”“高校教学督导工作交流会”“全国高校过程装备与控制工程专业教学与科研校际交流会”“教育部高等教育教学评估中心数据库建设研讨会”等全国性会议中做项目主旨发言和交流,得到广泛认同。
2017年11月,教育部审核评估专家集体评价:南昌大学质量保障体系不断完善,“点、线、面、体”的质量监控初见成效。
南昌大学专业综合评估的做法和经验在江西省得到推广和运用,2015年,江西省开展了以南昌大学为专指委主任委员单位的本科专业综合评价工作,该工作得到教育部陈宝生部长的充分肯定。2017年12月4日,中国教育报头版头条以“一场静悄悄的质量觉醒——江西创新高校本科专业综合评价工作纪实”为题,对江西省专业综合评价工作做了全面报道。