两种评分量表的评分效应比较研究

发布时间：2019-01-09 10:33

【摘要】：本研究运用多面Rasch模型对比分析了大、小两种评分量表下评分员的评分效应。结果显示,与小尺度评分量表相比,评分员在大尺度评分量表下不能使用全距分值,容易给出趋中分数;而且,在大尺度评分量表下评分员间的评分一致性较差。据此,提出应改进我国各项考试中写作评分量表的设置,并单独报告写作成绩的建议。
[Abstract]:In this study, the multi-sided Rasch model was used to compare and analyze the scoring effects of the graders in the large and small rating scales. The results show that, compared with the small scale rating scale, the graders can not use the full distance score under the large scale, so it is easy to give the average score, and the consistency among the graders under the large scale rating scale is poor. On the basis of this, it is suggested that we should improve the setting of writing rating scale in each examination in China, and report the writing achievement separately.
【作者单位】： 教育部考试中心;
【基金】：全国教育科学规划教育部重点课题“在硕士研究生入学考试中设置一般能力测试的研究”(课题批准号:GFA097020)研究成果之一
【分类号】：H09

【参考文献】

相关期刊论文 前1条

1 刘远我，张厚粲;概化理论在作文评分中的应用研究[J];心理学报;1998年02期

【共引文献】

相关期刊论文 前10条

1 魏高峡;李佑发;孙晓敏;;概化理论及其在运动成绩主观评定中的应用[J];北京体育大学学报;2006年01期

2 杨志明,张雷;改进普通话测试的概化理论分析[J];湖南师范大学教育科学学报;2003年01期

3 余浩,杨涛,肖卫兵,田平;潜水员心理特征分析[J];海军医学杂志;2001年04期

4 杨志明;用多元概化理论变革命题方法[J];湖南师范大学社会科学学报;2002年01期

5 任春艳;HSK作文评分客观化探讨[J];汉语学习;2004年06期

6 王占礼;试卷样本同质性对概化理论测评精度的影响[J];青岛远洋船员学院学报;2004年04期

7 李庆本,许雪立;中国汉语水平考试(高等)口试评分的误差控制[J];世界汉语教学;1999年03期

8 李树梅,孙庆祝;对主观性体育测试评价中非主体性因素的研究[J];体育科学;2005年05期

9 王占礼,张红梅;SEPT口试方案设计[J];外语电化教学;2005年02期

10 杨秀君,苏永华;概化理论在国家公务员面试评分中的应用研究[J];人类工效学;2001年01期

相关会议论文 前1条

1 杨志明;张雷;;试论普通话水平测试的信度估计方法[A];首届全国普通话水平测试学术研讨会论文集[C];2002年

相关博士学位论文 前3条

1 彭平;评价中心的测评有效性及其影响因素的实证研究[D];华东师范大学;2003年

2 张雨强;开放题编制的理论与技术研究[D];华东师范大学;2006年

3 席仲恩;语言测试分数的导出、报道和解释：对TEM的几点建议[D];上海外国语大学;2005年

相关硕士学位论文 前10条

1 任春艳;HSK作文评分客观化探讨[D];北京语言文化大学;2001年

2 陈菊咏;评分员信度LONGFORD方法计算和实验研究[D];北京语言文化大学;2003年

3 汤玲莉;智慧显义理论研究：成年人生活规划能力及其评价[D];华东师范大学;2003年

4 余浩;海军潜水员工作能力评价研究[D];华东师范大学;2001年

5 严芳;用多元概化理论（MGT）分析国家公务员录用面试中的评分者信度[D];华东师范大学;2002年

6 黎光明;多元概化理论及其在教学人员测评设计中的应用研究[D];江西师范大学;2004年

7 秦磊;企业多源评估质量的概化分析[D];江西师范大学;2004年

8 张冬梅;中学化学教学测量与评估中的概念图研究[D];南京师范大学;2004年

9 姜洪志;HSK（高等）口试评分时间的概化理论分析[D];北京语言大学;2005年

10 张红霞;口语能力各要素对评分误差的影响[D];山西大学;2006年

【二级参考文献】

相关期刊论文 前2条

1 蔡基刚;大学英语四、六级写作要求和评分标准对中国学生写作的影响[J];解放军外国语学院学报;2002年05期

2 孙晓敏;张厚粲;;国家公务员结构化面试中评委偏差的IRT分析[J];心理学报;2006年04期

【相似文献】

相关期刊论文 前10条

1 罗娟;肖云南;;基于多元概化理论的英语写作评分误差分析研究[J];中国外语;2008年05期

2 扈涛;高考主观题评分误差控制的研究与实践[J];河南大学学报(社会科学版);1996年04期

3 刘冬冰;魏海棠;赵思达;;论普通话水平测试中的评分误差[J];河南科技大学学报(社会科学版);2010年02期

4 江业国，覃可霖;论高考作文评分误差的有效控制[J];广西师院学报(哲学社会科学版);1996年01期

5 刘红云;陈阅;骆方;王云峰;;学业水平测试中作文评分误差的多面Rasch分析[J];心理科学;2010年04期

6 陈佳民,曾桂兴;用电脑建立常模监控高考作文评分[J];华南师范大学学报(社会科学版);1996年02期

7 饶乐三;相关法计算评分者信度应注意的问题[J];上海教育科研;1992年01期

8 戴海崎;曹绍游;;高考作文阅卷者信度再探[J];江西教育科研;1988年04期

9 宋红波;耿殿磊;;成人高考英语作文网上阅卷的思考[J];理工高教研究;2007年03期

10 陈田顺;;谈高等HSK的主观性考试[J];世界汉语教学;1995年03期

相关会议论文 前6条

1 陈阅;;学业水平测试中作文评分误差的多面Rasch模型分析[A];全国教育与心理统计与测量学术年会暨第八届海峡两岸心理与教育测验学术研讨会论文摘要集[C];2008年

2 周群;;探讨具有泄题信息考生的试题作答时间主观题评分教师评分效应研究[A];全国教育与心理统计与测量学术年会暨第八届海峡两岸心理与教育测验学术研讨会论文摘要集[C];2008年

3 许燕;张珊珊;刘红云;;概化理论和多面Rasch模型在作文评分中的应用[A];全国教育与心理统计测量学术年会论文摘要集[C];2006年

4 周群;;Rasch评分量表模型在论述题评分等级研究中的应用[A];全国教育与心理统计测量学术年会论文摘要集[C];2006年

5 黄慧静;余娜;辛涛;;用多元概化理论分析pisa中国数学试测中的评分者一致性[A];全国教育与心理统计与测量学术年会暨第八届海峡两岸心理与教育测验学术研讨会论文摘要集[C];2008年

6 任训学;;关于高等学校课程考试公平与效率问题的思考[A];全国教育与心理统计与测量学术年会暨第八届海峡两岸心理与教育测验学术研讨会论文摘要集[C];2008年

相关重要报纸文章 前10条

1 记者 吕宝林;高考网上阅卷好处多[N];甘肃日报;2009年

2 本报记者 林业霞;“阅卷严谨公正,我们很放心很满意!”[N];北海日报;2011年

3 本报记者 樊丽萍;作文阅卷每篇不少于3分钟[N];文汇报;2009年

4 雁坤;360度考核[N];中国建材报;2002年

5 黔西南州招生办 谢毅;中考网上阅卷体现效益与正确兼顾[N];黔西南日报;2009年

6 孙国荣　记者 付宇;今年中考首次实行网上阅卷[N];牡丹江日报;2011年

7 本报记者 徐光明;为什么这里的高招静悄悄?[N];中国教育报;2009年

8 本报记者 皇甫征声;网上阅卷，给考生最大公正[N];电脑报;2004年

9 许菊;我省２００５年高招政策有重大调整[N];江阴日报;2005年

10 本报记者 陆威;公开 公平 公正[N];北海日报;2009年

相关硕士学位论文 前6条

1 韩景峰;成绩测试中EFL写作评分标准的研究[D];山西大学;2008年

2 王文成;笔试主观性试题评分误差及其控制研究[D];华中师范大学;2005年

3 娄庆华;高考作文评分误差控制研究[D];浙江师范大学;2007年

4 梅f3;高考英语写作评分伦理问题研究[D];山西大学;2008年

5 宋涛;网上阅卷评卷员评卷质量评价分析体系及模型研究[D];河南大学;2010年

6 郑笠;高考语文现代文阅读试题改革研究[D];福建师范大学;2001年

，

本文编号：2405507