机器视觉手势交互的交互映射研究

发布时间：2017-03-25 05:03

  本文关键词：机器视觉手势交互的交互映射研究，由笔耕文化传播整理发布。

【摘要】：基于机器视觉的非接触手势交互技术由于附着感低、侵入性弱、能够摆脱设备束缚等优点,被认为是最自然的人机交互技术,并逐步成为人机交互研究领域的重点方向之一。与传统的交互方式相比,手势交互具有更加自然的交互体验,但由于其开放、多变的交互空映射特性,使得该类型的交互方式存在不稳定、精度低等可用性问题,影响了手势交互的广泛应用。人机交互中的交互映射是指操作空间(Motor space or Control space)与视觉空间(Visual space or Display space)之间的空间关系。与传统接触式交互方式的交互映射相比,在基于机器视觉的手势交互过程中,用户无需局限在输入设备附近的空间,交互控制权不再是输入设备持有者独有,因此其交互映射不再是静态情景中人、任务和设备的一对一的关系,而是动态情景下多对多的关系。为了进一步提升手势交互的自然性,使人-机交互不断接近人-人交互的状态,实现以人为中心的人机交互,需要充分探究手势交互映射及其应用空间的物理、社会特性,深刻理解手势人机交互的复杂本质,探索用户在手势交互相关认知环境下的行为特征。本文作者在参与机器视觉手势交互技术的研究和开发基础上,针对机器视觉手势交互的应用场景,通过定性分析与定量测量相结合的研究方法,从理论分析到情景实验等多个方面对手势交互的交互映射特性及其与用户行为特点的关系进行了深入的研究,获得了以下研究进展:(1)用户映射模式偏好与舒适操作空间研究。映射模式决定了用户手势动作与交互命令之间的响应关系,而舒适的手势活动范围为以人为中心映射空间设计提供重要依据。手势的多样性使得研究人员可根据应用需求开发多种映射模式。本文从手势交互的技术特性、人体工程学以及认知心理学等多个角度分析手势交互空间映射模式的特征,结合手势交互的应用情景,根据用户操作行为与交互界面上下文的关联关系,提出用户映射模式偏好的研究方法,研究机器视觉手势交互中用户映射模式的偏好。另一方面,以用户操作表现为主要依据,结合人体工学相关知识,根据用户操作表现与操作范围的关联关系研究并确定用户舒适的手势交互操作空间范围。(2)手势交互点击精度的研究。点击精度反映了用户使用特定交互技术进行精细操作的能力,本文从交互舒适度的角度提出一种以用户为中心的手势交互点击精度,从运动神经学和信息科学的角度分析其内涵,并提出一种基于菲兹定律(Fitts’Law)的手势交互点击精度的研究方法,研究和评估用户在水平、垂直以及深度3个维度上的点击精度,构建用户手势交互点击精度与操作维度(水平、垂直、深度),任务幅度之间的关联关系。(3)交互空间多变性与用户交互表现关系研究。本文根据手势交互的技术实现过程,结合手势的主要应用场景特点,分析手势交互的完整映射过程,以及导致交互空间多变性的原因。根据分析结果,本文结合真实的交互情景,提出交互多变性与用户交互表现关系的研究方法,研究交互空间的多变性对用户对视觉空间认知的影响,以及用户与屏幕相对位置关系对用户客观交互行为的作用,并构建用户实际操作空间与有效空间的偏差与其客观操作表现的关联关系。(4)以用户为中心的映射方式研究与设计。本文结合上述的研究结果,提出一种以用户为中心的映射方式。该映射方式能够根据用户的交互习惯,调整映射比例,使人机交互所需的手部活动范围保持在舒适的操作范围,降低手势交互造成的疲劳度,同时保证交互的稳定性。本文通过定性分析与定量研究相结合的研究方法,利用理论分析和情景实验相结合的手段研究手势交互的映射特性及其与用户交互行为的内在联系,不但有助于深刻理解人机交互的复杂性,为实现以人为中心的手势交互技术供有效的理论指导,而且对于促进我国人机交互研究的开展,在理论探讨、研究方法以及实验手段等方面有重要的积极意义。此外,手势交互是一种面向开放交互空间的交互技术,研究该交互技术的交互映射有助于深刻理解用户在开放空间中进行人机交互时的行为特征,对于智能家居、数字家庭、可穿戴设备等空间智能中的人机交互技术研究有重要的借鉴意义。
【关键词】：机器视觉 手势交互 交互映射 操作空间 视觉空间 映射偏好 以人为中心 点击精度
【学位授予单位】：华南理工大学
【学位级别】：博士
【学位授予年份】：2015
【分类号】：TP391.41
【目录】：

• 摘要5-7
• Abstract7-13
• 第一章 绪论13-28
• 1.1 课题背景、目的与意义13-16
• 1.1.1 课题背景13-14
• 1.1.2 目的和意义14-16
• 1.2 手势交互映射研究综述16-23
• 1.2.1 操作/显示增益调整技术研究17-20
• 1.2.2 手势交互映射模式研究20-22
• 1.2.3 手势点击精度研究22-23
• 1.3 研究内容23-26
• 1.3.1 关键问题23-24
• 1.3.2 主要研究内容24-25
• 1.3.3 本课题的创新点25-26
• 1.4 文章的组织结构26-28
• 第二章 人机交互研究理论基础28-55
• 2.0 引言28
• 2.1 人机交互研究的对象、方法和模型28-44
• 2.1.1 用户的含义及其信息处理特性29-32
• 2.1.2 人机交互研究方法32-34
• 2.1.3 交互模型34-38
• 2.1.4 交互研究中的数据分析38-44
• 2.2 菲兹定理（Fitts’ Law）44-54
• 2.2.1 菲兹定理的物理内涵44-46
• 2.2.2 性能指数（Index of Performance）与有效宽度46-48
• 2.2.3 菲兹定理的推广48-51
• 2.2.4 菲兹定理与 3D交互51-54
• 2.3 本章小结54-55
• 第三章 机器视觉手势交互的用户映射偏好试验研究55-77
• 3.0 引言55-56
• 3.1 手势交互的交互空间及其映射模式56-58
• 3.2 试验研究 1：用户映射偏好58-67
• 3.2.1 对象与环境58-59
• 3.2.2 思路和假设59-60
• 3.2.3 试验方法60-61
• 3.2.4 试验过程与方法设计61
• 3.2.5 数据分析方法61-62
• 3.2.6 测试结果62-67
• 3.3 试验研究 2：手势交互中用户合适操作空间研究67-71
• 3.3.0 试验假设67-68
• 3.3.1 试验方法68
• 3.3.2 试验过程与方法设计68-69
• 3.3.3 分析方法69
• 3.3.4 试验结果69-71
• 3.4 结果讨论71-75
• 3.5 不足之处75-76
• 3.6 本章总结76-77
• 第四章 机器视觉手势交互的点击精度试验研究77-93
• 4.0 引言77
• 4.1 人机交互中的点击精度77-80
• 4.1.1 点击精度定义77-79
• 4.1.2 点击精度测量方法79
• 4.1.3 关键问题讨论79-80
• 4.2 手臂活动的测量方法80-81
• 4.3 试验研究81-90
• 4.3.1 试验对象与试验环境81-82
• 4.3.2 试验方法82-83
• 4.3.3 试验流程与方法设计83
• 4.3.4 分析方法83
• 4.3.5 研究结果83-90
• 4.4 研究讨论90-92
• 4.5 本章总结92-93
• 第五章 交互空间多变性与用户行为关系试验研究93-107
• 5.0 引言93-94
• 5.1 手势交互映射空间的多变性94-96
• 5.1.1 算法与技术导致多变性94-95
• 5.1.2 应用场景导致多变性95-96
• 5.2 有效操作空间与实际操作空间96-98
• 5.3 试验 1：交互空间多变性对用户主观映射偏好的影响98-101
• 5.3.1 试验对象与环境98
• 5.3.2 试验任务和过程98-99
• 5.3.3 结果讨论99-101
• 5.4 试验 2：交互空间多变性对用户客观操作的影响101-105
• 5.4.1 试验方法与过程102
• 5.4.2 方法设计102-103
• 5.4.3 结果讨论103-105
• 5.5 分析与讨论105-106
• 5.6 本章小结106-107
• 第六章 以用户为中心的手势交互映射方式设计与实现107-125
• 6.0 引言107
• 6.1 手势交互映射设计的关键问题107-110
• 6.1.1 合适的操作空间107-108
• 6.1.2 用户习惯的手部移动速度108-109
• 6.1.3 点击精度109-110
• 6.1.4 交互空间映射多变性110
• 6.2 以用户为中心的机器视觉手势交互映射方式设计110-118
• 6.2.1 操作空间的范围设定与交互空间的配准110-112
• 6.2.2 映射关系的稳定性调整方法设计112-113
• 6.2.3 用户手部移动速度习惯研究113-115
• 6.2.4 映射方程的设计115-117
• 6.2.5 映射关系的自适应调整117-118
• 6.3 映射技术的系统实现与评估实验118-122
• 6.3.1 映射设计的系统实现118-119
• 6.3.2 参数设置119
• 6.3.3 评估设计119-122
• 6.4 讨论122-123
• 6.4.1 映射方式设计的作用122
• 6.4.2 交互空间不稳定性与映射方式设计122-123
• 6.4.3 不足123
• 6.5 本章小结123-125
• 结论与展望125-128
• 一、论文工作总结125
• 二、未来工作展望125-126
• 三、研究工作感悟126-128
• 参考文献128-141
• 攻读博士学位期间取得的研究成果141-142
• 致谢142-143
• 附件143

【共引文献】

中国期刊全文数据库 前1条

1 金昕沁;葛列众;王琦君;;点击增强技术研究综述[J];人类工效学;2015年01期

  本文关键词：机器视觉手势交互的交互映射研究，由笔耕文化传播整理发布。

，

本文编号：266677