动作意图理解的双模态分析及分类研究

发布时间：2021-01-01 06:28

　　动作意图理解是指人在观察他人动作时,自发地理解动作所包含的意图的一种行为,这种行为对人类心智、语言和社会化的发展都具有重要的意义。目前针对动作意图的理解的研究大多采用单模态的脑成像技术,在测量的效果和时空分辨率上都存在一定的缺陷。而本研究采用脑电（electroencephalography, EEG）和功能近红外（functional near-infrared spectroscopy, fNIRS）结合的双模态脑成像技术,可以同步测量大脑活动的电位信息和血氧变化信息,实现动作意图理解神经机制的多信息、多层面研究。本研究选择了三种手与杯子进行接触的图片来表示喝水、移动和不合理的动作意图；使用EEG-fNIRS双模态设备测量被试在观察这三种图片时的大脑活动；并通过溯源分析、幅值差异分析和脑网络分析探究动作意图理解的神经机制；最后结合差异分析的结果采用支持向量机（support vector machine, SVM）对两种不同的动作意图进行分类。本研究通过溯源分析对动作意图理解激活的脑区进行定位,EEG溯源分析的结果显示：左侧脑区的颞顶叶在100 ms-160 ms之间激活最强,右侧... 

【文章来源】：东南大学江苏省 211工程院校 985工程院校 教育部直属院校

【文章页数】：71 页

【学位级别】：硕士

【部分图文】：

图１－１本研究的研究思路及技术路线??为了准确、直观地反映大脑在理解动作意图时的激活位置和激活强度，同时为实验??结论提供可靠的理论支持，本研究对ＥＥＧ和ｆＮＩＲＳ信号分别进行了溯源分析?

图２－１实验环境??２．４实验范式??实验要求被试观察显示屏中出现的手与杯子接触的图片，并根据如图２－２中所示Ｈ??种不同的手势判断该动作的意图，其中１表示拿杯子喝水，２表示移动杯子，３表示不??合理的意图。??物例??一一＾?ＭＭ??方］轉公?．Ｊ??图２－２刺激材料（１；喝水意图；２：移动意图；３；不合理意图）??为了实现ＥＥＧ－ｆＮＩＲＳ的双模态测量，我们设计如图２－３所示的实验范式；??（１）实验开始的前６秒是休息阶段，屏幕呈现黑屏和一个白色十字。被试注视十??１０??

??图２－１实验环境??２．４实验范式??实验要求被试观察显示屏中出现的手与杯子接触的图片，并根据如图２－２中所示Ｈ??种不同的手势判断该动作的意图，其中１表示拿杯子喝水，２表示移动杯子，３表示不??合理的意图。??物例??一一＾?ＭＭ??方］轉公?．Ｊ??图２－２刺激材料（１；喝水意图；２：移动意图；３；不合理意图）??为了实现ＥＥＧ－ｆＮＩＲＳ的双模态测量，我们设计如图２－３所示的实验范式；??（１）实验开始的前６秒是休息阶段，屏幕呈现黑屏和一个白色十字。被试注视十??１０??

【参考文献】：
期刊论文
[1]复杂脑网络研究:现状与挑战[J]. 张方风,郑志刚.  上海理工大学学报. 2012(02)
[2]复杂脑网络研究进展——结构、功能、计算与应用[J]. 孙俊峰,洪祥飞,童善保.  复杂系统与复杂性科学. 2010(04)
[3]基于改进CSP算法的运动想象脑电信号识别方法[J]. 李明爱,刘净瑜,郝冬梅.  中国生物医学工程学报. 2009(02)
[4]EEG/fMRI融合分析综述:脑模型、算法和应用[J]. 何继军,沈辉,胡德文.  计算机工程与科学. 2007(12)



本文编号：2951095