基于RGBD深度图像的实时手势识别研究

发布时间：2017-08-07 15:27

  本文关键词：基于RGBD深度图像的实时手势识别研究

  更多相关文章： 手势识别 深度图像 手势分割 特征融合 k-DTW

【摘要】：手势识别是机器视觉以及人机交互的研究热点之一,在虚拟现实、机器人遥控、智能驾车、办公辅助、游戏娱乐、手语识别等领域应用前景十分广阔。随着计算机软硬件技术的不断增强,由深度摄像机捕获的深度图像因为其三维信息可以为手势识别提供更丰富的数据,而被广泛应用于手势识别研究当中。本文选取了Kinect深度摄像机,利用其获取的RGBD深度图像,对手势进行实时处理。本文主要对静态手势和动态手势进行手势分割和识别,并将手势识别的研究应用到了原型系统的开发当中,设计了一套基于实时手势识别的汽车驾驶交互模拟平台。具体如下:1)针对复杂背景当中手势分割的问题,本文提出了基于MTS的手势分割方法,利用手部运动信息进行运动区域定位,设定动态阈值对手部区域进行提取,然后利用肤色特征将图像映射到HSV和YCbCr彩色空间当中进行肤色定位,可以实时地将手部准确提取出来。2)针对静态手势识别过程中的特征提取问题,本文提出了多特征融合进行手势提取,融合了手的轮廓特征、几何参数特征与Hu矩特征,并制作了静态手势数据集SHGD,通过SVM分类器进行训练分类,得到分类模型。经实验,算法对本文设计的8个静态手势都具有良好的识别准确率。3)针对动态手势识别中的有效匹配问题,本文基于DTW时间序列匹配算法,加入了kNN的分类策略,从而提出了k-DTW动态手势识别算法。制作了动态手势数据集DHGD,利用DTW距离计算作为kNN的核心测算部分。并通过距离加权对手势类别相关性进行投票,从而进行有效匹配。实验结果表明,利用k-DTW算法对本文设计的4个动态手势识别具有较高的准确率。4)基于静态和动态手势识别研究,本文将手势识别应用到了原型系统的开发当中,设计了基于实时手势识别的汽车驾驶交互模拟平台,并且为了便于理解平台的原理、结构和功能,实现了一套车载手势识别交互原型系统。该原型系统实现了电话接听模块、音乐播放模块和汽车偏道检测报警模块。通过模拟环境,该原型系统可以利用手势识别有效地辅助驾驶员驾驶。实验表明,该原型系统具有较好的识别率、实时性与稳健性。
【关键词】：手势识别 深度图像 手势分割 特征融合 k-DTW
【学位授予单位】：苏州大学
【学位级别】：硕士
【学位授予年份】：2016
【分类号】：TP391.41
【目录】：

• 中文摘要4-6
• Abstract6-10
• 第一章 绪论10-20
• 1.1 课题研究背景及意义10-11
• 1.2 手势识别研究现状11-17
• 1.2.1 传统手势识别方法12-15
• 1.2.2 基于RGBD深度图像的手势识别15-17
• 1.3 目前存在的主要问题17-18
• 1.3.1 复杂背景中进行手势分割的问题17
• 1.3.2 特征提取的问题17
• 1.3.3 动态手势中有效匹配的问题17-18
• 1.4 本文主要工作及创新点18-19
• 1.5 本文组织结构19-20
• 第二章 基于多特征融合的静态手势识别20-41
• 2.1 传统的静态手势识别策略20-22
• 2.1.1 基于机器视觉的手势分割策略20-21
• 2.1.2 传统的静态手势分类策略21-22
• 2.2 静态手势识别框架22-23
• 2.3 利用多特征融合的手势识别23-39
• 2.3.1 基于MTS的手势分割23-28
• 2.3.2 融合轮廓特征、几何参数特征和Hu矩特征进行手部特征提取28-36
• 2.3.3 利用SVM进行手势训练36-39
• 2.4 实验结果分析39-40
• 2.5 本章小结40-41
• 第三章 基于k-DTW的动态手势识别41-53
• 3.1 传统的动态手势识别策略41-42
• 3.2 动态手势识别框架42-43
• 3.3 基于动态时间规整的动态手势识别43-51
• 3.3.1 核心算法介绍43-47
• 3.3.2 动态手势获取与预处理47-49
• 3.3.3 基于k-DTW的动态手势匹配49-51
• 3.4 实验结果分析51-52
• 3.5 本章小结52-53
• 第四章 基于实时手势识别的汽车驾驶交互平台应用53-69
• 4.1 实验意义53-54
• 4.2 基于Kinect的人机交互开发平台搭建54-57
• 4.2.1 Kinect结构简介54-55
• 4.2.2 以SONO为核心的深度图像开发平台搭建55-57
• 4.3 基于手势识别的汽车驾驶交互原型系统57-68
• 4.3.1 原型系统的构建57-60
• 4.3.2 系统具体实现流程60-63
• 4.3.3 实验与分析63-68
• 4.4 本章小结68-69
• 第五章 总结和展望69-72
• 5.1 论文工作总结69-70
• 5.2 未来工作展望70-72
• 参考文献72-77
• 攻读学位期间参与科研项目和科研成果77-78
• 致谢78-79

【相似文献】

中国期刊全文数据库 前10条

1 ;新型手势识别技术可隔着口袋操作手机[J];电脑编程技巧与维护;2014年07期

2 任海兵,祝远新,徐光，

本文编号：635334