合作解决问题能力测评及其实践

发布时间：2021-06-14 07:52

　　合作解决问题能力是在学术以及职场取得成功的一项重要能力。探讨对合作解决问题能力进行标准化测评所面临的挑战以及测评设计的一般思路和分析方法。作为这方面实证研究的例子,介绍美国教育考试服务中心（ETS）深度参与的PISA2015关于合作解决问题能力的测评以及ETS自身在测评合作解决问题能力方面的一些大规模实证研究。 

【文章来源】：中国考试. 2019,(09)CSSCI

【文章页数】：12 页

【部分图文】：

PISA2015合作解决问题能力测试的界面2.3PISA2015合作解决问题能力测试的评分

号对话节点时，学生获取同等量的信息。这种“救援”结构给评分带来困难，在第2题中答对的学生并没有机会回答第3题，而答错的学生则有机会多答1道题，这导致2道题目的关联度有可能出现负数。针对这种情况，将第2题和第3题合并采取多元计分的方法，即当学生选择第80号对话路径时，可以得2分；选择第83号对话路径（为第3题的正确选项）可以得1分；选择其他路径得0分。图1PISA2015合作解决问题能力测试的界面7778798081Item2Item384821308789858883图2PISA2015合作解决问题试题设计中的“救援”结构示例··16

l‐laborativeAssessmentandLearning,EPCAL）是ETS研发的一个用以支持大规模在线合作学习及测评的软件基础设施，该平台不仅满足前面提到的6点要求，而且还对测评任务进行了模块化管理[15]。一个非合作的测评任务在经过简单的调整后，就可以部署到该平台上成为一个合作任务，从而大大提高了合作任务的研发效率，降低了研发成本。值得指出的是，该平台的智能反馈系统也可以支持虚拟队友，从而为大规模实施人机模式合作解决问题能力的测评奠定了基矗图3为EPCAL的各个组成部分。除此之外，鉴于测评过程中会产生复杂的时序数据，ETS还研发了配套的数据分析系统[16]以及基于自然语言处理的智能标注系统[15,17]。这些基础设施的研发为大规模的实证研究提供了有力的保障。3.3测评方法框架及测评原型合作解决问题能力是认知能力和社交能力的综合，这一特性使其更适合形成性测评（formativeassessment），而不是总结性测评（summativeassess‐ment）。因此，ETS关于合作解决问题能力的测评研究主要面向针对个人的形成性测评以及针对群体的测评，而不是针对个人的总结性测评。基于此出发点，我们提出了一个量化分析的评分策略，明确从3个方面提取量化的证据来支持合作解决问题能力的测评[18]：第一个方面是基于合作结果的量化证据。大部分的合作任务，其结果都可以量化为成功或者失败或者更详细标度的指标，因此对合作结果进行量化相对比较容易。第二个方面是对合作过程进行量化表征，具体而言就是把合作参与者的语合作任务管理用户及团队管理系统设置进程信息仪表盘管理模块交互通信分析模块数据模块智能反馈模块通信模块任务模块图3ETS合作测评?

【参考文献】：
期刊论文
[1]合作问题解决能力的测评:PISA2015和ATC21S的测量原理透视[J]. 袁建林,刘红云.  外国教育研究. 2016(12)



本文编号：3229389