基于测评系统的诊断性评价和教学行为改进研究

《普通高中英语课程标准(2017年版)》(以下简称《课程标准》)指出,教师应处理好评价与教和学之间的关系,推动教、学、评一体化实施。学生日常学习的阶段性评价,亦是教学过程的重要组成部分,应充分发挥其诊断性评价功能,着重考查学生特定时段的学习成效和存在的不足。教学评一致性的起点是对学情的诊断,教师需要通过诊断性评价了解学情,以便做出适当的教学调整。

随着信息技术在教育领域的普及和推广,测评系统被广泛运用于诊断性评价。基于大数据分析的测评系统不仅仅是教学评价工具,结合一定的方法和策略,还有助于教师构建以测评数据为核心的“以评促学”模式。但是目前,教师在解读和使用测评系统大数据时存在一些问题,如只关心评价的整体难度系数,只解读平均分、优秀率、及格率和低分率等基本面,只关注学生的最高分或最低分,却忽视了诊断性评价反映的学生学科能力情况、学科知识和能力、个体学习优势和劣势、教师教学行为上的问题以及学生后续学习策略和行为改进等。

因此,教师有必要研究如何利用测评系统大数据分析,发挥诊断性评价对教学的反拨作用,促进教师反思和调整教学行为,对学生实施精准的个性化反馈,帮助学生改进学习,提升学习能力。

一、基于测评系统的诊断性评价和数据采集策略

精准把握学习起点是基于测评大数据实施精准教学的逻辑起点。要抓住精准教学的起点,必须充分认识诊断性评价的目的和意义,研究诊断性评价的命题和功能,合理确定考查内容和考查形式,创新评价题型等。要获得反映学生学习真实情况的阶段性评价数据,笔者认为要做好以下三方面的工作。

(一)依据课标、教材,确定考查内容

诊断性评价可用于课程教学的不同阶段,是依据课程教学目标命题的标准参照性质的测试。对此,学校教研组应该定期组织教师学习《课程标准》和教材,掌握年段教学目标,明确教学重点、难点,为客观地命题打下基础。

首先,教师要依据《课程标准》的学科能力结构,认知英语学科能力表现指标体系模型,熟悉英语学科能力要素和能力框架(见表1)。命题中,教师应将英语学科核心素养融入英语学科能力指标,以测评的方式诊断学生英语学科能力发展情况。

表1 英语学科能力框架

其次,教师要学习课程分级目标(三至五级分别对应七至九年级),梳理年级教材结构,确定诊断性评价重点,明确考查范围和内容。以英语(外研版)九年级上册前两个模块为例,教师梳理的阶段性教学内容和目标见表2。

表2 教学内容和目标梳理

(二)遵循命题原则,优化评价工具

诊断性评价要遵循命题原则,命制的试题应符合语言测试学的基本理念和发展方向。鲁子问等人指出,命题内容应遵循适纲性、适度性(难度、梯度、区分度、信度和效度)、整体性和规范性原则。教师应熟悉命制试题的基本流程,即先拟订命题思路,再编制试题,然后进行试测,最后磨题定稿。在编制试题之前,教师应通过集体备课的形式,结合阶段教学重难点和学科能力结构框架,拟订命题细目表。这有利于克服教师在选题、命题、组卷中的主观随意性,保证评价标准的准确性和一致性,减少命题工作中的误差。

测试材料的选择是命制试卷的一个重要环节,命题者可以从报刊、网络或语料库中选取素材,获取典型的表达方式和地道的语料,以保证命题质量。马建锋指出,教师选取的语篇材料应与学生的生活和学习经验相关,具有时代性、教育性和真实性。

教师要树立科学的命题理念。阶段性的诊断评价要对教学和课程改革起到积极的导向作用,发挥评价激励学生学习的作用。为此,教师要精细把握试题的难度,优化评价工具,从而发挥诊断性评价监控教学过程、反馈教学信息的作用。

(三)科学管理测评,精准采集数据

为了保证诊断性评价的科学性和有效性,在组织测试过程中,教师要保障评价工作的严谨性、客观性和公平性。特别是在主观性试题的网络阅卷过程中,教师要严格参照试题的评分标准,统一评分要求,以双评甚至三评的方式降低评分误差。尤其是对书面表达题的评分,应结合内容要点、语法句型、语意结构、书写规范的维度评分法,更为真实地反映学生的英语语言运用能力,确保所采集数据的客观性和有效性。

二、基于测评系统的大数据分析和教学行为改进

图片

有学者构建了基于测评大数据的有效教学框架,其包括精准把握学习起点、动态组织教学内容、灵活调整教学策略、个性化反馈和推荐个性化学习等重要环节。因此,研读分析测评数据、梳理教学共性问题、聚焦疑点难点、精准分析反馈和个性化精准指导,是诊断性评价后教学行为改进的核心内容。

(一)研读数据报告,审视测评结果

教师基于测评系统开展诊断性评价后,测评系统会生成一份学科评价分析报告,涵盖区域、校级、年级和班级的各项相关诊断数据。以智能阅卷评价系统为例,基于九年级学生第一学期英语期末诊断性评价数据,教师可以获取的区域层面数据包括:各学校参考人数及比例,各学校总分等距分段对比,各学校总分平均分、优秀率、良好率、及格率和低分率,学科及总分平均值,学科及总分难度系数,各学校学科平均分、优秀率、良好率、及格率和低分率,各学校学科等距分段对比等。

通过数据报告,教师可以得知学生学科总体掌握情况以及各校间的数据对比情况,知晓各校在区域中的相对位置,或对比上一阶段并计算各校学科教学质量增量情况,也可评判本次评价中学科总体目标和难度值的达成状况。

(二)对照全卷分析,梳理共性问题

语言学家休斯(Hughes)认为,测试是课堂教学的自然延伸,为教师和学生提供有用的信息,从而促进教与学。教师根据课程的特定教学目标检测学生的掌握情况,可有效地制订下一步的教学方案。

基于测评系统,教师可以快速获得诊断性评价的全卷分析数据,从而精准定位当前阶段教学的共性问题,发现各校乃至各班学生学习上的短板及问题所在。表3显示了区域学生答卷表现的部分数据分析。本次测评中,23、53、63、64、49、60、65七个小题难度最大,得分率最低,也是测评系统诊断出的教学共性问题。

(三)锚定学科能力,聚焦难点疑点

结合测评系统数据,教师可以梳理教学班级学生的得分明细表,诊断并发现学生存在的学科能力缺陷,然后进行课堂讲评和分析的教学设计,做到目标明确,有的放矢。以S校1班(30人)为例,测评系统会自动显示(标红叹号)须重点分析的第23小题(如图1)。在平台上双击该栏目,教师即可进入该小题的讲评页面(如图2)。页面显示班级第23小题的得分率为40%,12人正确,14人选A,4人选B。该题考查的知识点为“完形填空——辨析形容词last”,对应的学科能力要素为“B-2分析论证”,考查点所在的语境和具体语句如下。

Some hours later, the jeweler went to them and gave them the diamonds. He was offered the 23 price, which was three times the value of the diamonds. But he said, “I will 24 accept the first price that you offered this morning.”

23. A. honest B. lowest C. half D. last

由此可以推断,学生在阅读过程中捕捉前后段落关联事件和线索的能力较弱 (“which was three times the value of…”是前一段落中提到的最后一次报价)。本题反映的学生能力缺陷应该引起教师的重视,并采取对应的教学改进措施。

(四)优化教学策略,精准分析反馈

分析试题过程中,教师还要让学生了解命题意图和考点分布,逐步形成结构化的认知能力。同时,教师须根据评价反馈情况对学生进行矫正、补偿或巩固。例如,可以通过同类型练习题、变式训练增加学生灵活运用所学知识的机会。例如,第37、41小题为S校1班学生阅读理解板块呈现的焦点问题,1/3的学生在提炼作者写作意图(C-1 推理判断)、提炼文本标题(B-2 分析论证)两个能力维度上存在缺陷。

1.精准分析问题

教师首先要深入分析学生在答题过程中可能遇到的困难,是在题干、选项的语句理解上存在问题,还是不能从全文站位上提炼作者的写作意图?从诊断结果(10人选择C项)来看,学生主要是因为存在“以偏概全”的问题而判断错误。对此,教师应引导学生进行段落主旨和全文中心大意的语句分析与概括练习。

37. The writer’s purpose is mainly to tell people to .

A. have short-term joys
B. use the phone in a proper way
C. do more sports instead of using the phone
D. form a close relationship with the phone

2.同类题匹配训练

完成上述分析之后,教师要同步推送类似的阅读题,并以单篇单题的形式进行快速检阅(如图3),目的是让学生能够以全文视角和作者立场来推断、分析作者的写作意图。

图片

图3 作者写作意图训练

此外,课后巩固练习中须加入该专项训练,要求学生进行对应的答题分析和反思,促使学生形成推理判断力。

(五)突出学生主体,个体精准指导

在诊断性评价的反馈过程中,教师应积极鼓励学生参与评价,把测试反馈变为学生自我反思、总结的平台。结合测评系统数据,学生可以更为清晰地了解个人学科能力发展情况。以智能阅卷评价系统为例,完成评价后,学生可以收到个体成绩分析报告。

例如,S校1班H学生的英语成绩为105.5分(满分120分),而班级平均分是104.28分,年级平均分是86.43分,可以看出该生处于班级中等水平。个人知识掌握情况分析表则更为清晰地显示出该生当前阶段存在的部分关键问题(见表4)。在数据分析的支持下,教师可以设计并实施精准的、个性化的辅导方案:(1)加强听力训练,着重辨析对话中的人物及关系 ;(2)熟悉主动语态和被动语态的语法、判断和运用,分析主语和行为动词之间的关系;(3)提升语句分析能力,着重补充训练宾语从句的连接词和主从句构成。

显然,结合诊断性评价数据分析的辅导策略和教学方向是明确的,也是精准的,有利于教师改进后续教学行为,提高学生学习效率。

另外,结合学生个体知识掌握情况雷达图(如图4),学生能够更为清晰地认识当前个人的学科学习优势和劣势,利于个体反思和总结。一方面,分析图可以帮助学生树立信心,明确个人在知识能力维度上的领先优势;另一方面,可以清楚地认知个人能力缺陷维度,找准下一阶段突破整改的方向,实现全面提升,形成更强的语言综合能力。

三、进一步思考

语言测试的目的是为教学服务。诊断性评价是学生英语学习过程中不可或缺的环节,可以让学校、教师及时了解《课程标准》落实情况,促进教师改进教学行为,提高教育教学水平,也可以为学生提供自我反思和学习改进的方向,提升其学习能力。结合实践,教师需要更深入地反思和研究,以便取得更好的教学效果。

(一)教学评价工具制作要科学合理,准确反映学生学习情况

评价目标和标准的确定、评价内容和方式的选择、评价方案的实施等,均应以促进学生的英语学科核心素养发展为指向,符合学生的心理和认知发展阶段及年龄特征,任务情境和活动内容应为学生所熟悉,并为学生提供充分的展示机会。测评系统有其独到的数据分析功能,要充分发挥其诊断评价作用,前提是拥有高质量的、科学的评价工具,这样才能为教师提供精准的学习起点分析。因此,教师要特别重视评价工具的制作和编写,开展基于课程目标的评价深度研修,科学地命题,组织教学活动。

(二)教学评一致性要贯穿整个教学过程,形成教学合力

基于测评系统大数据的教学评需要有学情分析数据,基于学情分析开展教学内容的动态解读,制定以提升学生学科核心素养及薄弱点为目的的教学目标,设计以教学目标为依据的教学活动和教学评价,这样才能有效达成教学评一致性。有了测评系统的支持,教学评工作更应该形成合力,开启良性循环。

(三)教学行为改进目标是促成学习,培养学习能力

教学是一门综合艺术,评价分析是教学的重要环节,同样需要方法和技巧。在测评系统大数据分析技术的支持下,教师应改变“逐题讲解、就题论题、一讲到底”的做法,不断改进评价分析的教学行为研究,充分发挥教学评价的激励、诊断、强化、示范功能。同时,学生是学习的主体,也是评价的主体。学生对自己的发展变化最为了解,通过诊断性评价和数据图表,他们更易于发现自己的进步和不足,形成更强有力的反思和学习能力。

黄雪祥:正高级教师,浙江省衢州市柯城区石梁中学英语教师、区兼职教研员,浙江省教育学会中小学外语教育分会理事。荣获第十届全国中小学外语教师园丁奖、浙江省初中英语课堂教学评比一等奖,被评为浙江省优秀教研员、浙江省教科研先进个人。工作上秉持“主题引领、整体设计、活动化实施”的教学主张,先后主持省、市教学规划重点课题5项,在核心期刊发表论文20多篇。教育信念:教育是事业,事业的成功在于奉献;教育是科学,科学的探索在于求真;教育是艺术,艺术的真谛在于创新。