甄别答案抄袭的kappa2.0方法及与其它方法的比较

发布时间：2017-05-12 18:12

  本文关键词：甄别答案抄袭的kappa2.0方法及与其它方法的比较，，由笔耕文化传播整理发布。

【摘要】： 抄袭现象的存在对考试信度、效度以及考试的公平性和信誉都产生了很大的影响。从20世纪20年代起测量学界就提出了多种甄别答案抄袭的方法,包括g_2、K指数、ω及错同率方法等。Sotaridona等(2006)提出用kappa统计量(本研究中将其称为kappa1.0方法)甄别答案抄袭,研究表明其统计性能良好,但这种方法本身存在着缺陷。例如,把选项重新标记到一个4个等级的顺序量表上,无法刻画选项之间的差距有多大。 针对kappa1.0方法的缺陷,本研究提出了一种新的甄别答案抄袭的方法:kappa2.0方法。这种方法充分考察了成对考生作答的一致性,它把顺序量表细化为10个等级,使得各等级间具有了一定的可比性;并且在假设检验时,利用了所有考生kappa值的经验分布,降低了Ⅰ型错误率。 此外,本研究设计了不同被抄袭者水平、不同抄袭人数、不同抄袭面积、不同临界水平共64种实验条件,对kappa1.0方法、kappa2.0方法、错同率方法以及g_2方法进行了比较研究。结果表明,kappa2.0的统计性能不仅优于kappa1.0方法,而且大部分条件下还优于g_2方法和错同率方法。在抄袭人数较多、抄袭面积较大时,统计性能最好,Ⅰ型错误率低于理论临界水平,且甄别率较高。对每种方法来讲,临界水平对Ⅰ型错误率和甄别率影响最大,当临界水平降低时,Ⅰ型错误率减小,甄别率降低;抄袭人数和抄袭面积对其也有影响,一般来讲,抄袭人数多、题数多时,Ⅰ型错误率小,甄别率高;被抄袭者水平对其影响不大。 Kappa1.0方法2008年已经应用到实际考试中。基于kappa1.0之上的kappa2.0方法性能得到优化,相信在今后的实际应用中能发挥更大的作用。
【关键词】：kappa1.0 kappa2.0 I型错误率 甄别率
【学位授予单位】：北京语言大学
【学位级别】：硕士
【学位授予年份】：2009
【分类号】：G424.74
【目录】：

• 摘要3-4
• Abstract4-6
• 第一部分 引言6-8
• 1.1 选题及研究价值6-7
• 1.1.1 甄别答案抄袭的重要性6
• 1.1.2 kappa统计量的研究价值6-7
• 1.2 研究目的7-8
• 第二部分 文献综述8-19
• 2.1 甄别答案抄袭的方法回顾8-16
• 2.1.1 甄别答案抄袭的各种方法8-13
• 2.1.2 检验甄别方法性能的两个指标13-14
• 2.1.3 各种甄别方法的比较研究14-16
• 2.2 kappa统计量16-19
• 2.2.1 kappa统计量的介绍16-17
• 2.2.2 用于甄别答案抄袭的kappa1.0方法17-19
• 第三部分 实证研究19-38
• 3.1 研究方法19-24
• 3.1.1 kappa1.0方法的优缺点19-20
• 3.1.2 新的kappa方法—kappa2.020-24
• 3.2 研究过程24-29
• 3.2.1 数据准备24-25
• 3.2.2 研究设计25-29
• 3.3 结果与分析29-36
• 3.3.1 研究结果29-34
• 3.3.2 结果分析34-36
• 3.4 不足之处与进一步研究的方向36-38
• 第四部分 结论38-39
• 参考文献39-42
• 致谢42

【参考文献】

中国期刊全文数据库 前5条

1 刘景玉;肖立宏;;甄别多项选择题考试中答案抄袭的不同方法的比较[J];考试研究;2008年03期

2 苏炳华,史秉璋,熊宗t

本文编号：360495