评价中心评分者培训与评分效果

评价中心中的评分是一个非常复杂的过程,它是由多个评分者,按照预先设计好的维度,从被评价者所表现出的诸多行为中辨别、筛选、记录其典型行为,评分者们通过集中讨论使评分结果达成一致,或者用统计的方法对评分结果进行整合,最终得到被评价者行为表现的综合评价,观察和评价的过程需要在很短的时间内完成,这些对评分者的要求是非常高的.因此,如何使评分者的评分更加准确,一直是研究者们关心的问题.Bitner,(1948年)就认识到对评分者进行培训能提高评分有效性的这种潜在的价值.

参照系培训法在评价中心评分者培训中的应用

本文分析了FOR培训的四个步骤,以及FOR培训法有效的原因,指出了应用FOR培训法需注意的问题。

评价中心的评分维度和评分效果

对近年来国内外关于评价中心的研究进行了比较系统的介绍。首先,文章讨论了评分维度的数目对于评分结果的影响,以及评价中心中的4个元维度;其次,介绍了评价中心中衡量评分效果的指标,并讨论了评分者培训的分类及其对评分效果的影响;第三,虽然评价中心具有良好的效标关联效度,但对于其结构效度的研究至今尚无统一结论。最后,文章对评价中心未来的研究趋势进行了探讨。

采用多面Rasch模型提高英语运用测试的评分质量

目前电大系统英语考试的口试和作文部分多采用语言运用测试的方式。语言运用测试由于引入评分者而使评分的主观性变大。如何控制评分者差异对考生分数的影响成为保证语言运用测试评分质量的重要环节。本文在比较了行为测试中评分质量控制方面常用的三种理论的基础上,着重介绍了多面Rasch模型在提高评分质量方面的贡献,并探讨了在电大系统如何采用该模型对英语运用测试中的评分者进行培训,以控制评分质量和提高考试信度。

多面Rasch模型在主观题评分培训中的应用

主观题的评分受到很多因素的影响，如评分者的知识水平、综合能力和个人偏好等。这些评分者偏差不仅会导致不同评分者之M存在主观差异，也会到导致同一评分者在不同的时间也具有主观不稳定性。最终导致主观题评分信度的降低。本研究将多面Rasch模型运用到某国家级考试论述题的评分培训中。通过分析6名有经验评分者对58份试卷的试评数据，鉴别出四种评分者偏差，然后据此对每个评分者进行个别反馈,从而提高评分的客观性和精确性。