基于多级平滑滤波器的人脸特征点跟踪稳定化方法

发布时间：2020-08-03 17:19

【摘要】：随着人们对娱乐和安全等需求的不断升级,视频中3D人脸实时重建的应用场景变得越来越多。这时3D人脸重建结果的稳定性就十万的重要,因为它会直接影响人的视觉观感。而特征点跟踪轨迹的稳定性是影响3D人脸重建稳定性的主要因素,人脸特征点的大幅度“漂移”和局部抖动都使得人脸重建的结果大打折扣。但是,目前的特征点跟踪方法大多针对特征点的全局稳定,只能解决人脸“漂移”的问题,并不能够解决局部特征点抖动的问题,所以人脸特征点轨迹的稳定化是一个有趣且具有实际应用前景的研究方向。除了特征点的轨迹,3D人脸重建的方法是重建结果稳定性的直接影响因素。为了使3D人脸重建的结果更加稳定和平滑,本文分别通过对人脸特征点跟踪过程的稳定化和3D人脸重建过程进行了改进。主要创新点如下:(1)本论文提出了基于多级平滑滤波器的人脸特征点跟踪稳定化方法,用来解决视频中人脸特征点跟踪轨迹不稳定的问题,包括人脸“漂移”和局部抖动的问题。多级平滑滤波器由全局平滑滤波器和局部平滑滤波器构成,这个新的工作流程是第一次在全局和局部的维度上对特征点的防抖动进行了研究。在全局滤波阶段创新地引入了 3D人脸模型,在局部滤波阶段提出了局部特征点抖动质量评估模型以对特征点的平滑融合进行指导。实验结果表明:该稳定性方法能够有效提升特征点轨迹的稳定性以及头部的3D姿态变化轨迹的稳定性。并且,本文提出的多级平滑滤波方法易于实现,可搭配不同特征点检测方法,具有较强的应用价值。(2)本论文提出了针对3D重建过程的3D人脸实时重建稳定化方法。该方法包含了一系列从形状初始化、模型拟合过程到最后的纹理贴合部分的改进。大量的重建结果表明,我们的工作不仅可以有效提高3D人脸模型的稳定度,还对3D模型缺失的纹理部分进行了填充,使得重建后的观感更流畅。
【学位授予单位】：北京交通大学
【学位级别】：硕士
【学位授予年份】：2019
【分类号】：TP391.41;TN713
【图文】：

图１－１视频数据集中特征点标注不稳定逡逑－

图１－２多级平滑滤波器整体流程图逡逑Ｆｉｇｕｒｅ邋１－２邋Ｏｖｅｒｖｉｅｗ邋ｏｆ邋ｏｕｒ邋ｈｉｅｒａｒｃｈｉｃａｌ邋ｓｔａｂｉｌｉｚｉｎｇ邋ｆｉｌｔｅｒｉｎｇ逡逑

图２－１矩形区域积分图像逡逑Ｆｉｇｕｒｅ邋２－１邋Ｉｎｔｅｇｒａｌ邋ｉｍａｇｅ邋ｏｆ邋ＳＡＢＣＤ逡逑

【相似文献】

相关期刊论文 前10条

1 袁铭择;夏时洪;;人脸特征点跟踪系统与仿真分析[J];系统仿真学报;2018年12期

2 吴礼洋;熊磊;仲柔在;;基于模糊聚类回归的人脸特征点定位研究[J];计算机工程;2017年08期

3 谭暑秋;陈东义;郭承刚;黄志奇;熊小锋;;一种基于稀疏编码的人脸特征点检测方法[J];微电子学与计算机;2017年09期

4 刘仁明;毛建旭;历艳琨;;基于随机森林回归的人脸特征点定位[J];电子测量与仪器学报;2016年05期

5 黄琛;丁晓青;方驰;;一种鲁棒高效的人脸特征点跟踪方法[J];自动化学报;2012年05期

6 王丽婷;丁晓青;方驰;;一种鲁棒的全自动人脸特征点定位方法[J];自动化学报;2009年01期

7 柳龙飞;伍世虔;徐望明;;基于人脸特征点分析的疲劳驾驶实时检测方法[J];电视技术;2018年12期

8 杨佳萍;;基于人脸特征点对齐的协同表示分类算法[J];信息系统工程;2017年11期

9 郭修宵;陈莹;;非约束环境下人脸特征点的稳定跟踪[J];计算机辅助设计与图形学学报;2014年07期

10 赵恩环;杜玲;;基于模型约束的人脸特征点跟踪[J];光盘技术;2008年10期

相关会议论文 前2条

1 谢琛;;基于ASM的人脸特征点定位浅析[A];中国电子学会第十六届信息论学术年会论文集[C];2009年

2 毛慧芸;庞家昊;金连文;杜明辉;;一种美丽人脸的计算机合成方法[A];第十五届全国图象图形学学术会议论文集[C];2010年

相关重要报纸文章 前2条

1 本报记者 程红琳;以科技的名义：别让“丁义珍们”跑了[N];中国政府采购报;2017年

2 清华大学 李迎春;多姿态人脸图像的估计及合成[N];计算机世界;2006年

相关博士学位论文 前9条

1 王军南;人脸特征点检测方法研究[D];浙江大学;2015年

2 崔滢;基于统计学习的人脸特征点定位算法研究[D];南京理工大学;2015年

3 杜春华;人脸特征点定位及识别的研究[D];上海交通大学;2008年

4 谭暑秋;面部动态增强现实的特征点检测方法研究[D];电子科技大学;2018年

5 胡媛;三维人脸形体匹配与属性分类研究[D];上海交通大学;2011年

6 冯振华;参数化统计新模型及其应用研究[D];江南大学;2015年

7 党力;自动人脸分析与识别的若干问题研究[D];中国科学技术大学;2012年

8 李永强;基于动态贝叶斯网络的人面部运动识别方法研究[D];哈尔滨工业大学;2013年

9 赵海明;3D打印设计与个性化制造技术[D];浙江大学;2017年

相关硕士学位论文 前10条

1 詹力;三维人头重建及算法研究[D];电子科技大学;2019年

2 邓芳;基于迁移学习和几何特征分析的人脸吸引力人脸模板设计与研究[D];西北大学;2019年

3 仲海啸;基于视觉的驾驶员疲劳驾驶车载检测系统研究[D];江苏科技大学;2018年

4 王硕;AR应用场景下的人脸特征点检测[D];吉林大学;2019年

5 王亮;基于3D人脸重建的大姿态人脸样本扩充与识别研究[D];电子科技大学;2019年

6 郭星妍;基于多级平滑滤波器的人脸特征点跟踪稳定化方法[D];北京交通大学;2019年

7 倪辉;多模态及异质人脸识别问题研究[D];上海交通大学;2016年

8 潘艺云;基于级联姿态回归的局部遮挡人脸特征点定位研究[D];武汉理工大学;2018年

9 柳龙飞;基于人脸分析的疲劳驾驶检测方法研究[D];武汉科技大学;2019年

10 尚W氼

本文编号：2779953