虚拟界面及其在智能电视界面中的应用研究

发布时间：2017-09-20 15:01

  本文关键词：虚拟界面及其在智能电视界面中的应用研究

  更多相关文章： 人机交互 Midas Touch Problem 虚拟界面 手势识别

【摘要】：人机交互是人和计算机为完成确定任务,以某种交流语言和某种交互方式进行信息交换的过程。实现自然、和谐、方便的交互是人机交互技术的目标。随着计算机技术的发展,人机交互技术正逐渐从以计算机为中心转移到以人为中心。手势作为人类表达情感和与外界进行沟通交流的重要方式,成为人机交互领域中的研究热点。基于视觉的手势交互系统主要是利用摄像头对人手动作进行捕捉,然后对手势所要表达的动作信息进行处理,从而完成与系统的交互任务。在基于视觉的手势交互系统中,由于手势是隔空操作,所以其具有非接触性和模糊性的特点。计算机处理系统会不加选择地对进入视频范围内的所有手势命令进行处理,以致于用户的一些无意识的手势也往往会被解释成有效命令,造成系统紊乱。这种现象也被称为“Midas Touch Problem”,即点石成金问题,它是基于视觉的手势交互界面中普遍存在的一个问题。本论文依托国家自然科学基金(No.61472163)和山东省重点研发计划项目(2015GGX101025)等项目基金的支持,对“Midas Touch Problem”进行了研究。主要的研究内容如下:(1)提出了虚拟界面的概念,并用统计分析的方法构建虚拟界面的认知基础。为了探讨交互过程中,人手运动的规律性,设计认知实验。实验结果表明虽然不同的操作者有不同的操作方式和交互方式,但操作区域大都在一定范围内,此范围对于操作者来说是舒适和方便的,该范操作区域即为虚拟界面。在交互过程中,虚拟界面的存在使得处于其之内的手势是有效的,而处于其之外的手势是无效的。因此,虚拟界面提供了一种解决“Midas Touch Problem”的有效方法。(2)提出了虚拟界面的构建算法,并对构建算法进行讨论。本文提出了两种基于用户认知行为模型的虚拟界面构建算法。在第一种构建算法的基础上,考虑用户舒适度等方面的需求提出了第二种构建算法。第二种构建算法又分为静态构建和动态构建。动态构建的方式为:操作者按照自己的行为习惯在空中随意画一闭合轨迹,此闭合轨迹的外接包围盒即为虚拟界面。静态构建的方式为:操作者将手自然抬起,并做拳头手势,在空中静止几秒后,在人手的周围以人手为中心会自动建立一个虚拟界面。该虚拟界面的大小,可由认知实验的结果确定。(3)实现了虚拟界面的分区操作和动态刷新功能。为了通过虚拟界面完成不同的交互功能,提出虚拟界面的分区操作,并通过调查问卷的方式确定功能分布模型。实现虚拟界面的动态刷新功能,使得不论是在用户位置发生变化还是在用户记忆发生遗忘的情况下,虚拟界面都能始终存在于空间中,从而使用户通过虚拟界面与系统进行交互。(4)针对较远距离的手势识别,提出了一种基于手势多区域分布特征的手势识别方法。首先对二值化后的手势图像建立二维手势直角坐标系进行特征提取,然后利用欧氏距离和K近邻算法求得最终的识别结果。实验结果表明,该方法能够取得令人满意的识别效果。
【关键词】：人机交互 Midas Touch Problem 虚拟界面 手势识别
【学位授予单位】：济南大学
【学位级别】：硕士
【学位授予年份】：2016
【分类号】：TP391.41;TP11
【目录】：

• 摘要8-10
• Abstract10-12
• 第一章 绪论12-20
• 1.1 研究背景和意义12-13
• 1.2 研究概况13-18
• 1.2.1 Midas Touch Problem研究现状13-14
• 1.2.2 智能电视交互方式14-16
• 1.2.3 手势识别研究现状16-18
• 1.3 研究内容18
• 1.4 论文的结构安排18-20
• 第二章 基于视觉的手势交互关键技术20-29
• 2.1 手势分割概述20-22
• 2.2 基于Kinect的手势分割22-25
• 2.2.1 Kinect简介22-23
• 2.2.2 OpenNI开源框架介绍23-24
• 2.2.3 基于Kinect的手势分割24-25
• 2.3 密度分布特征25-28
• 2.4 本章小结28-29
• 第三章 虚拟界面的理论研究及其构建方式29-43
• 3.1 虚拟界面介绍29
• 3.2 实验环境29-30
• 3.3 虚拟界面理论研究30-34
• 3.3.1 认知基础30
• 3.3.2 认知实验设计30-32
• 3.3.3 认知实验分析32-34
• 3.4 虚拟界面的表示34-35
• 3.4.1 符号表示34-35
• 3.4.2 投影表示35
• 3.5 虚拟界面的构建算法35-42
• 3.5.1 初始构建算法35-36
• 3.5.2 初始构建算法步骤36-37
• 3.5.3 算法讨论37-38
• 3.5.4 算法的优化38-40
• 3.5.5 实验结果及分析40-42
• 3.6 本章小结42-43
• 第四章 虚拟界面的分区及动态刷新算法43-52
• 4.1 智能电视系统介绍43
• 4.2 虚拟界面的分区算法43-47
• 4.2.1 界面设计原则43
• 4.2.2 确定功能分布模型43-46
• 4.2.3 具体的分区算法46-47
• 4.3 虚拟界面的动态刷新算法47-51
• 4.3.1 遗忘刷新47-49
• 4.3.2 遗忘刷新的具体步骤49
• 4.3.3 移动刷新49
• 4.3.4 移动刷新的具体步骤49-51
• 4.4 本章小结51-52
• 第五章 基于手势多区域分布特征的手势识别算法52-58
• 5.1 手势多区域分布特征52-54
• 5.2 建立手势模板库54
• 5.3 识别算法步骤54-55
• 5.4 实验结果及分析55-57
• 5.4.1 算法识别率分析56-57
• 5.4.2 算法时间分析57
• 5.5 本章小结57-58
• 第六章 虚拟界面在智能电视界面中的应用58-71
• 6.1 手势交互框架58-60
• 6.1.1 视觉注意机制58
• 6.1.2 手势交互状态转移模型58-60
• 6.1.3 手势交互框架60
• 6.2 实验结果及分析60-70
• 6.2.1 实验操作场景60-61
• 6.2.2 交互过程61-66
• 6.2.3 算法评价66-70
• 6.3 虚拟界面的普适性70
• 6.4 本章小结70-71
• 第七章 总结与展望71-73
• 7.1 全文总结71
• 7.2 工作展望71-73
• 参考文献73-76
• 致谢76-77
• 附录77-78

【参考文献】

中国期刊全文数据库 前10条

1 黎万义;王鹏;乔红;;引入视觉注意机制的目标跟踪方法综述[J];自动化学报;2014年04期

2 林燕;冯志全;朱德良;尚爱丽;盖伟;;以多模型融合为特征的三维手势跟踪算法[J];计算机辅助设计与图形学学报;2013年04期

3 边玉芳;;遗忘的秘密——艾宾浩斯的记忆遗忘曲线实验[J];中小学心理健康教育;2013年03期

4 王艳;张奇志;;基于Kinect深度信息的手势识别[J];北京信息科技大学学报(自然科学版);2013年01期

5 谢世海;刘苏;;浅谈智能电视人机交互方式[J];科技信息;2013年03期

6 吴家洲;江泽涛;李志杰;;基于视觉的媒体播放器控制算法[J];微电子学与计算机;2012年02期

7 汪俊;杨恢先;冷爱莲;;一种与局部模型相结合的自适应肤色检测方法[J];计算机工程与应用;2013年04期

8 高凯亮;覃团发;陈跃波;常侃;;一种混合高斯背景模型下的像素分类运动目标检测方法[J];南京大学学报(自然科学版);2011年02期

9 杨波;宋晓娜;冯志全;郝晓艳;;复杂背景下基于空间分布特征的手势识别算法[J];计算机辅助设计与图形学学报;2010年10期

10 张雷;闫苍松;;选择性注意理论解释的研究进展[J];吉林体育学院学报;2009年05期

，

本文编号：888727