用移动设备研究大学生情感变化:方法及其分析模型

发布时间：2021-11-18 19:30

　　情感研究历史悠久。西方近代在达尔文的影响下,跨学科情感研究成果丰富,研究方法和分析模型层出不穷。本文简要回顾了脸部表情研究法、诱发事件分析法与结果反推法、实验法以及人工智能、情感机器人与情感计算,并在此基础上探讨用移动设备研究情感变化的方法及其分析模型。志愿者每隔一小时用移动设备自录音录像,记录当下情感。前后有22位大学生、研究生志愿者参加。采录到的语料构成了由转写文字、语音流和视频流三类数据组成的多模态专门用途语料库。文章根据多模态语料库语言学原理勾画了语料处理的概念建模、数据建模和操作实施评估三阶段法,并对本方法的优劣加以讨论。 

【文章来源】：外语电化教学. 2018,(01)北大核心CSSCI

【文章页数】：9 页

【部分图文】：

考试与情感研究示意图

芏鹊男枰??山??步细化。本项目把“情感己”进一步细化为:“背景情感己”、“基本情感己”和“社会情感己”;“社会情感己”还进一步细化为“对人”和“对己”;后者再进一步细化为“正面”和“负面”。“行为举止己”先细化为“言语己”和“体态语己”;前者再细化为“语力己”、“言词己”和“韵律己”;后者再细化为“脸部表情己”、“目光己”和“手势己”。本项目的整人概念模型如图10所示。图10本项目情感研究整人建模图3．2．2数据建模确定填入“己{…{…}…}”的数据类型。以“背·7·张舍茹等:用移动设备研究大学生情感变化:方法及其分析模型

景情感己”为例。本项目能够得到的数据类型是志愿者关于自己当下情感的口述，属于反思型的数据。由于本项目还有自录音录像，因此研究者从录音录像中得到研究者视听觉感知到的信息，属于视听感知分类型。再以“言语己”为例。“言词己”的数据类型是文字转写型;“韵律己”的数据类型是数字化声学和韵律特征提取。本项目的数据类型如图11所示。图11本项目数据类型国内外同类研究一般不做数据类型建模。做与不做的区别在于:做数据类型建模对于评估语料库处理加工的质量来说是非常重要的。例如，“言词己”的原始数据是音频流，把音频流里的内容用文字转写下来，即把原始的音频数据类型转化为文字数据类型，这个转换过程会发生信息丢失。再比如，志愿者自述当下情感，本质上是属于自我反思类，而自我反思类数据是有可能违心地说出来的。研究者听到和看到志愿者的录音录像，对其进行分类，带有很大的主观性。本项目利用音频处理工具Praat和视频处理工具ElAN对“情感己”和“行为举止己”同时做分析，由此得到不同数据类型的实时同步状态，实现了不同数据类型的互补。3．2．3实际分析操作与验证现以学生李某(女)2013年12月23日提供的语料作为样例演示实际分析操作与验证。该生早晨7点半开始当天的第一次采样，为我们的分析提供了有用的背景知识。其录音转写如下:……现在是12月22号［注:日期记错了］，早上七点半，哎呦，早上好挣扎地起床呀，哎，想想还有那么多东西还没有复习呢，好紧张呀，嗯，哎呀，没办法，起床吧，再坚持一下，过了这一刻就可以多睡会儿了，嘿嘿，下一个时刻?

【参考文献】：
期刊论文
[1]当下亲历与认知、多模态感官系统与大数据研究模型——以新生婴儿亲历为例[J]. 顾曰国.  当代语言学. 2016(04)
[2]论言思情貌整一原则与鲜活话语研究——多模态语料库语言学方法[J]. 顾曰国.  当代修辞学. 2013(06)



本文编号：3503482