基于Kinect与网格几何变形的人脸表情动画

发布时间：2018-07-31 15:16

【摘要】：面部表情重建的实时性与重建效果的真实性是人脸表情动画的关键问题,提出一种基于Kinect人脸追踪和几何变形技术的面部表情快速重建新方法。使用微软的Kinect设备识别出表演者面部并记录其特征点数据,并利用捕捉到的特征点建立覆盖人脸的网格模型,从中选取变形使用的控制点数据,由于Kinect可以实时地自动追踪表演者面部,由此实现了利用三种不同变形算法对目标模型实时快速重建。实验结果表明,该方法简单易实施,不用在表演者面部做任何标定,可以自动地将人脸表情动作迁移到目标模型上,实现人脸表情快速重建,并且保证目标模型表情真实自然。
[Abstract]:The real time and authenticity of facial expression reconstruction are the key problems of facial expression animation. A new method of facial expression reconstruction based on Kinect face tracking and geometric deformation technology is proposed. Using Microsoft's Kinect device to recognize the performer's face and record its feature point data, and using the captured feature points to establish a mesh model covering the face, and select the control point data used in the deformation. Because Kinect can automatically track the performer's face in real time, three different deformation algorithms can be used to reconstruct the target model in real time and fast. The experimental results show that the method is simple and easy to implement, and can automatically transfer facial expression action to the target model without any calibration on the performer's face, so that the facial expression can be reconstructed quickly, and the facial expression of the target model can be guaranteed to be real and natural.
【作者单位】： 河北工业大学计算机科学与软件学院;河北省大数据计算重点实验室;
【基金】：河北省引进留学人员资助项目(No.C2013003015) 河北省科技计划项目(No.15210124) 河北省高等学校科学技术研究项目(No.Z2015105)
【分类号】：TP391.41

【参考文献】

相关期刊论文 前4条

1 万贤美;金小刚;;时空人脸表情动画编辑[J];计算机辅助设计与图形学学报;2013年08期

2 石曼银;;Kinect技术与工作原理的研究[J];哈尔滨师范大学自然科学学报;2013年03期

3 张满囤;李智;吴鸿涛;;表情动画技术和应用综述[J];河北工业大学学报;2007年05期

4 金小刚,鲍虎军,彭群生;计算机动画技术综述[J];软件学报;1997年04期

相关硕士学位论文 前3条

1 孙晨;表演驱动的实时人脸表情动画合成[D];浙江大学;2014年

2 严若鹤;基于三维网格模型的参数化人脸表情模拟方法研究[D];厦门大学;2009年

3 岳振;个性化人脸建模技术研究[D];浙江大学;2008年

【共引文献】

相关期刊论文 前10条

1 袁帅英;郭大波;;一种基于彩色+深度的人脸识别算法[J];测试技术学报;2017年03期

2 武乾坤;胡冰;兰浩;;基于Android+Kinect的失能老人自助系统设计与实现[J];计算机技术与发展;2017年04期

3 杨竹;王洪源;陈慕羿;;Unity3D中的Kinect声源定位与人机交互技术[J];沈阳理工大学学报;2017年01期

4 李春晓;孙瑞志;戴佚舟;蔡赛华;李骞;李嘉瑶;;基于Unity 3D的中国古代农耕虚拟场景智能展示平台[J];农业工程学报;2017年S1期

5 邢燕;樊文;檀结庆;许任政;;一类C~2连续的单位四元数插值样条曲线[J];计算机辅助设计与图形学学报;2017年01期

6 林瑞;王俊英;孙水发;董方敏;;基于Kinect的骨骼配准的人体三维重建[J];信息通信;2016年12期

7 蔡凌豪;;基于增强实境的地形设计沙盘系统研究[J];西部人居环境学刊;2016年04期

8 张满囤;霍江雷;单新媛;王小芳;吴鸿韬;;基于Kinect与网格几何变形的人脸表情动画[J];计算机工程与应用;2017年14期

9 代钰洪;;计算机动画发展历程及特征分析[J];信息记录材料;2016年04期

10 何钦政;王运巧;;基于Kinect的人脸表情捕捉及动画模拟系统研究[J];图学学报;2016年03期

相关硕士学位论文 前10条

1 于佳骏;数据驱动的人像卡通与表情动画生成技术[D];上海大学;2016年

2 赵欢;三维人脸建模及表情动画合成[D];新疆大学;2015年

3 葛新杰;基于运动捕捉数据的人脸表情动画研究[D];河北工业大学;2015年

4 王杰雄;虚拟手术中肝脏个性化信息获取与模型驱动方法研究[D];福州大学;2014年

5 孙园园;面向客户满意的人像产品三维建模相似度提升及评价技术研究[D];重庆大学;2014年

6 陈续旭;基于Candide-3模型的人脸图像表情生成研究[D];山东财经大学;2014年

7 李方芬;数字化试镜装置的研究与开发[D];广东工业大学;2013年

8 马晓磊;四维人脸表情识别[D];北方工业大学;2012年

9 高立;基于图像变形的人脸表情拟合研究[D];云南大学;2012年

10 徐雪绒;基于单张正面照片的三维人脸建模及表情合成的研究[D];西南交通大学;2011年

【二级参考文献】

相关期刊论文 前3条

1 王玉顺;肖俊;庄越挺;王宇杰;;基于运动传播和Isomap分析的三维人脸动画编辑与合成[J];计算机辅助设计与图形学学报;2008年12期

2 王奎武,董兰芳,王洵,陈意云;基于MPEG-4的人脸变形算法的研究[J];计算机辅助设计与图形学学报;2002年01期

3 金小刚，鲍虎军，彭群生;一种新的基于factor　curve的变形控制方法[J];软件学报;1996年09期

相关硕士学位论文 前7条

1 雷丽坤;AAM人脸特征点定位及在表情动画中的应用[D];北京交通大学;2010年

2 普波;基于视频的三维人脸动画驱动的设计与实现[D];电子科技大学;2010年

3 韩炜;基于特征提取的三维人脸动画的设计与实现[D];电子科技大学;2009年

4 刘洁娟;基于MPEG-4的人脸建模和动画实现研究[D];华东师范大学;2008年

5 李想;骨骼皮肤绑定技术的研究及实现[D];浙江大学;2006年

6 陈廓;基于区域控制模型的人脸重建技术及应用[D];浙江大学;2006年

7 陈亚勇;基于文字驱动的人脸动画及其人脸模型的快速重建[D];浙江大学;2002年

【相似文献】

相关期刊论文 前10条

1 万贤美;金小刚;;真实感3D人脸表情合成技术研究进展[J];计算机辅助设计与图形学学报;2014年02期

2 左坤隆,刘文耀;基于活动外观模型的人脸表情分析与识别[J];光电子·激光;2004年07期

3 陈静,董平,杨国为;人脸表情动画[J];微计算机信息;2004年12期

4 李旭东,张振跃;多表情源的人脸表情合成技术[J];计算机辅助设计与图形学学报;2005年01期

5 刘伟锋;汪增福;;面向人脸表情分析的表情空间模型[J];中国科学技术大学学报;2009年02期

6 杨康;陈晓;彭国华;;基于统计学习的人脸表情分类[J];计算机仿真;2009年06期

7 续爽;贾云得;;基于表情相似性的人脸表情流形[J];软件学报;2009年08期

8 杜志军;王阳生;;利用主动外观模型合成动态人脸表情[J];计算机辅助设计与图形学学报;2009年11期

9 丁宾;邵晓根;孙天凯;杜志军;;表演驱动的二维人脸表情合成[J];计算机工程与设计;2012年08期

10 万贤美;金小刚;;时空人脸表情动画编辑[J];计算机辅助设计与图形学学报;2013年08期

相关会议论文 前4条

1 张楠;耿雪;张有为;;人脸表情诱因分析[A];第十三届全国信号处理学术年会（CCSP-2007）论文集[C];2007年

2 唐京海;应自炉;张有为;;人机自然交互过程中情态的识别与融合[A];第十二届全国信号处理学术年会（CCSP-2005）论文集[C];2005年

3 陈辉;张家树;;人脸表情的混沌仿生识别[A];第二届全国信息获取与处理学术会议论文集[C];2004年

4 陶建华;谭铁牛;;语音和人脸表情同步的双模态情感表达研究[A];第一届中国情感计算及智能交互学术会议论文集[C];2003年

相关博士学位论文 前10条

1 万贤美;真实感人脸表情合成的关键技术研究[D];浙江大学;2012年

2 蒋斌;鲁棒人脸表情识方法研究[D];北京工业大学;2014年

3 宋明黎;人脸表情的识别、重建与合成[D];浙江大学;2005年

4 左坤隆;人脸表情自动分析与识别系统的研究[D];天津大学;2004年

5 常江龙;三维人脸表情合成研究[D];中国科学技术大学;2009年

6 於俊;低比特率真实感人脸视频编码研究[D];中国科学技术大学;2010年

7 王磊;人脸表情自动提取与跟踪技术研究[D];湖南大学;2007年

8 王进;基于视频的人脸表情建模研究[D];浙江大学;2003年

9 方小勇;人脸运动捕捉数据处理及表情动画重构研究[D];大连理工大学;2010年

10 Ebenezer Owusu;[D];江苏大学;2014年

相关硕士学位论文 前10条

1 严政;人脸表情运动单元识别系统[D];杭州师范大学;2015年

2 赵静;基于树结构的人脸属性识别[D];中国矿业大学;2015年

3 葛新杰;基于运动捕捉数据的人脸表情动画研究[D];河北工业大学;2015年

4 屈美娟;面部情感特征描述及识别方法研究[D];西安工业大学;2013年

5 产文涛;基于卷积神经网络的人脸表情和性别识别[D];安徽大学;2016年

6 詹辉煌;人脸表情协同识别方法研究[D];福州大学;2013年

7 周颖;标记分布在人脸图像属性识别上的应用[D];东南大学;2016年

8 甘荧;自然场景下人脸表情数据集的构建与应用研究[D];江西师范大学;2016年

9 付雪平;基于图像识别的人脸表情特征的提取分析[D];深圳大学;2017年

10 陈辉;人脸表情自动识别系统[D];西南交通大学;2005年

，

本文编号：2155979