分步增值评分——提高主观题评分质量的有效方法

发布时间：2017-10-09 09:15

  本文关键词：分步增值评分——提高主观题评分质量的有效方法

  更多相关文章： 作文 分步增值评分 综合评分 多面Rasch模型 评分效率

【摘要】：主观题特别是作文题评分的客观性和有效性存在着一定的问题,有必要通过优化评分流程降低作文评分的误差程度。本研究通过多面Rasch模型对500份国家级考试作文题的评分进行了分析,比较了分步增值评分模式和传统综合评分模式对评分成绩的影响。结果显示,相对于综合评分模式,分步增值评分模式对评分结果的分布和区分度更好、评分者在评分偏差程度指标上的表现更加理想。虽然作文题评分依然普遍存在着评分等级不一致的问题,但采取分步增值评分模式可以提高评分成绩的合理性,并且更好地控制评分者评分成绩间的差异。此外,这种评分模式还能有效提高评分程序的效率。
【作者单位】： 中国科学院心理研究所;中国科学院大学;
【关键词】： 作文 分步增值评分 综合评分 多面Rasch模型 评分效率
【分类号】：B841
【正文快照】： 1问题的提出1.1主观题评分中存在的问题主观题包括简答题、论述题、应用题、作文题等。相对客观题,主观题能更为真实地反映考生的能力,因此被广泛运用于人员选拔考试和语言类考试中,对人员的录用和筛选具有重要的现实意义。然而,主观题评分的客观性和有效性却不容乐观(关丹丹,

【参考文献】

中国期刊全文数据库 前3条

1 陈睿;;国内外写作评分量表的对比研究[J];考试研究;2011年06期

2 李中权;孙晓敏;张厚粲;张立松;;多面Rasch模型在主观题评分培训中的应用[J];中国考试(研究版);2008年01期

3 关丹丹;;主观题评分质量的估计方法评述[J];中国考试(研究版);2008年10期

【共引文献】

中国期刊全文数据库 前10条

1 钮志东,史颖,安哲峰;多元概化理论在音像教材评价中的应用研究[J];北京广播电视大学学报;2005年02期

2 魏高峡;李佑发;孙晓敏;;概化理论及其在运动成绩主观评定中的应用[J];北京体育大学学报;2006年01期

3 赵向民,王占礼;海船船员英语口语评估的概化研究[J];大连海事大学学报;2005年02期

4 杨志明,张雷;改进普通话测试的概化理论分析[J];湖南师范大学教育科学学报;2003年01期

5 席仲恩;汪顺玉;;英语作文整体评分与分项评分的计量学考量[J];英语研究;2010年03期

6 袁淑敏;;英语作文评分结果的现代测量理论分析[J];长春教育学院学报;2014年23期

7 余浩,杨涛,肖卫兵,田平;潜水员心理特征分析[J];海军医学杂志;2001年04期

8 杨志明;用多元概化理论变革命题方法[J];湖南师范大学社会科学学报;2002年01期

9 任春艳;HSK作文评分客观化探讨[J];汉语学习;2004年06期

10 张利岩;郑艳芳;高歌;韩淑贞;宋慧娜;管晓萍;陈秀荣;王颖;;结构化面试在护士长选拔中的效度实证研究[J];解放军护理杂志;2008年23期

中国重要会议论文全文数据库 前1条

1 杨志明;张雷;;试论普通话水平测试的信度估计方法[A];首届全国普通话水平测试学术研讨会论文集[C];2002年

中国博士学位论文全文数据库 前7条

1 田金亭;基于CAT的中学生创造力评价技术探讨[D];南京师范大学;2011年

2 彭平;评价中心的测评有效性及其影响因素的实证研究[D];华东师范大学;2003年

3 张雨强;开放题编制的理论与技术研究[D];华东师范大学;2006年

4 席仲恩;语言测试分数的导出、报道和解释：对TEM的几点建议[D];上海外国语大学;2005年

5 王文成;论当代中国公务员考试权的运行与控制[D];华中师范大学;2008年

6 郑显亮;大学生网络利他行为：量表编制与多层线性分析[D];上海师范大学;2010年

7 孙珊珊;项目反应理论与认知诊断的统计推断方法[D];东北师范大学;2013年

中国硕士学位论文全文数据库 前10条

1 郭磊;稀疏数据矩阵条件下应用公式法估计方差分量的影响因素研究[D];江西师范大学;2011年

2 黄星艳;现代测验多面Rasch技术在学科能力测评中的应用[D];浙江师范大学;2011年

3 段然;基于多层面Rasch模型的CET-SET评分员效应研究[D];河北科技大学;2012年

4 任春艳;HSK作文评分客观化探讨[D];北京语言文化大学;2001年

5 陈菊咏;评分员信度LONGFORD方法计算和实验研究[D];北京语言文化大学;2003年

6 汤玲莉;智慧显义理论研究：成年人生活规划能力及其评价[D];华东师范大学;2003年

7 余浩;海军潜水员工作能力评价研究[D];华东师范大学;2001年

8 严芳;用多元概化理论（MGT）分析国家公务员录用面试中的评分者信度[D];华东师范大学;2002年

9 黎光明;多元概化理论及其在教学人员测评设计中的应用研究[D];江西师范大学;2004年

10 秦磊;企业多源评估质量的概化分析[D];江西师范大学;2004年

【二级参考文献】

中国期刊全文数据库 前7条

1 黄石卫;国家公务员考试面试评分者信度的研究[J];安徽教育学院学报(哲学社会科学版);1998年03期

2 张昌应;高考网上评卷误差控制的方法与实施[J];高教探索;2003年03期

3 谭智;;应用Rasch模型分析英语写作评分行为[J];外语教学理论与实践;2008年01期

4 雷新勇;周群;;基于局域网评分中阈值设置和评分一致性研究[J];考试研究;2006年04期

5 周群;;主观题评分教师评分效应研究[J];考试研究;2007年03期

6 李中权;孙晓敏;张厚粲;张立松;;多面Rasch模型在主观题评分培训中的应用[J];中国考试(研究版);2008年01期

7 丁文;裴峗;;评分趋中性现象的初步分析[J];中国考试(研究版);2008年08期

中国硕士学位论文全文数据库 前1条

1 丁琳;基于互联网的网上阅卷系统的设计和实现[D];华东师范大学;2003年

，

本文编号：999353