基于三维眼球模型和改进Itracker的视线估计方法研究

发布时间：2020-06-05 09:12

【摘要】：视线方向作为一种重要的预测目标注意力的手段,在科学、医疗、商业、教育、刑事、人机交互等各个领域都有深入广泛的应用。随着微电子技术和数字图像处理的不断发展和进步,越来越多的眼动跟踪与视线估计方法被发现。然而,现有的视线估计系统往往具有很多缺陷和限制。如何在尽量减少设备、降低系统复杂性、简化标定过程的同时,打破光照条件的限制,提高对于头部姿态的耐受度,提升估计精度是一个非常具有挑战性的课题。本文针对基于形状的虹膜中心定位方法不够精确的问题,提出基于三维眼球模型的虹膜中心定位方法。针对现有的基于深度学习的视线估计方法模型复杂度较高的问题,本文改进了网络结构,同时引入时序信息,在减少网络复杂度的同时,增加了网络的预测精度以及对于不同光照和图像分辨率的鲁棒性。本文提出一种基于三维眼球模型的精准虹膜中心定位方法,利用虹膜中心位置与眼球中心位置之间的位置关系与虹膜轮廓的几何关系,解决眼球转动引起的虹膜轮廓变化问题。首先,使用监督式下降方法(SDM)定位得到脸部特征点,利用得到的特征点初步计算虹膜中心位置;然后,对初始虹膜中心位置在八领域方向进行迭代;最后,根据虹膜中心的位置对虹膜轮廓进行更新,以相邻两次迭代的方向相反时的位置作为最终的虹膜中心位置。在BioID和GI4E数据集上的实验结果表明,本文方法可精准定位虹膜中心位置。在实际的室内环境下实验,本文方法亦取得鲁棒精准的定位结果。本文提出一种改进Itracker静态模型的方法来预测单帧图像的视线方向,并利用多对一的双向长短时记忆网络时序模型来拟合时序信息。通过移除原有Itracker模型的人脸网格模块,合并左右眼模块来改进静态模型。实验表明,改进后的静态模型在参数减少接近一半的情况下,在MPIIGaze数据集下与现有最新方法相比,视线估计精度得到了11.6%的显著改善,且对于不同的图像分辨率具有鲁棒稳定的估计精度。在EyeDiap数据集的评测中,提出的时序模型又为静态模型带来了3%的精度提升。
【图文】：

2图 1- 1 视线估计的应用Figure 1-1. Some application of gaze estimation.（4）教育领域[12] [13] [14]。通过眼动跟踪与视线估计方法可以有效地采集好动且注意耐久度低的婴幼儿的眼动数据，然后通过分析婴幼儿与周围的人和环境之间交互的数据，研究人员可以获得关于婴幼儿某些能力的发展及变化的深层次认识。通过对婴幼儿学习模式的认识，，更好地指导和改进当下的教育模式，有效地提升教育质量。同样的，在体育运动的教学中，研究人员使用视线跟踪方法来考

snakuscule的结构
【学位授予单位】：浙江工业大学
【学位级别】：硕士
【学位授予年份】：2019
【分类号】：TP391.41;TP18

【参考文献】

相关硕士学位论文 前2条

1 王林;头部可运动的头戴式视线跟踪系统关键技术研究[D];中国科学技术大学;2014年

2 徐兴民;视线跟踪技术及其应用研究[D];南京航空航天大学;2007年

本文编号：2697822