面试中的评分者贡献度指数及其应用     

杨志明  王雯  丁港  徐庆树 《教育测量与评价(理论版)》2021,(10):3-7

面试是过程评价和综合评价特别是高水平大学选拔拔尖创新人才的重要手段.但目前常用的面试质量评价方法,如评分者信度或概化系数估计方法,并不能快捷评估每个评分者的工作表现,影响了面试的质量.借助经典测验理论和概化理论,通过逐一核查各评分者评分信息缺失条件下的信度估计值变化情况,构造了一个评分者贡献度指数,并举例展示其使用方法和注意事项,为实时监控评分者的表现、保障和提高面试质量提供了新的方法.  相似文献   

基于自然语言处理的民航飞行人员英语能力测试与CSE的对接研究     

杨志明  徐庆树  祁长生 《中国考试》2023,(6):34-39+75

通过与考试对接等手段,《中国英语能力等级量表》（CSE）可以有效指导并规范各种英语语言能力测试项目。传统对接方法以设定临界分为关键环节,其步骤比较复杂,需要调动的人力物力较多,限制了CSE在专门用途英语考试中的应用。通过中国民航飞行人员英语语言能力测试（PEPEC）与CSE的对接研究,探讨基于自然语言处理的对接原理和方法,其主要步骤包括：1）运用德尔菲法界定对接文本;2）运用自然语言处理的文本相似度算法确立PEPEC与CSE之间的对接关系;3）收集内外部效度证据以检验对接效度。结果表明,基于自然语言处理的方法在保障对接精度的同时,大大提升了对接工作效率,为进一步探索对接的方法和路径提供了重要参考。  相似文献   

我国教育考试现代化面临的五个方面挑战     

杨志明  陈一龙  徐庆树 《中国考试》2023,(2):19-24

教育考试现代化是建设教育强国、推进教育现代化的重要组成部分。实现教育考试现代化面临诸多方面的挑战。结合国际考试行业的现代化经验和我国考试实践,着重讨论考试公平、理论创新、技术应用、行业标准与运作机制、基础学科建设与人才培养5个方面问题,提出应更新考试公平的认知观念以妥善应对公平性疑问、构建权威行业标准以确保考试质量、建立激励机制以推动理论创新和技术应用、加强心理计量学学科建设以促进考试专业人才培养等路径建议。  相似文献