增强现实辅助维修关键技术研究

发布时间：2018-01-11 01:23

  本文关键词：增强现实辅助维修关键技术研究　出处：《河北工业大学》2016年博士论文　论文类型：学位论文

  更多相关文章： 增强现实 辅助维修 特征识别 跟踪注册 人机交互 评价

【摘要】：增强现实技术应用于复杂装备维修,为用户提供了一种身临其境的“虚实结合”的维修环境和更加直观灵活的操作方式,对于缩短装备维护周期、提高维修效率、降低维修成本具有重要意义。开展增强现实辅助维修关键技术研究,对改进维修对象自然特征识别、跟踪注册以及人机交互等相关算法,优化增强现实辅助维修系统设计与实现具有重要的指导意义和参考价值。本文在对国内外增强现实辅助维修研究发展动态分析基础上,对增强现实辅助维修原型系统实现过程中涉及的自然特征识别、跟踪注册、手势识别以及评价方法等关键技术进行了研究,取得了一些创新性研究成果。针对增强现实辅助维修场景中的维修对象多视角快速识别问题,利用维修对象2D图像的边缘方向直方图描述其典型全局特征,利用角点描述其外观的独特性和差异性特征,构建了基于角点-边缘复合特征的维修对象自然特征识别方法,利用分类器训练复合特征得到多分类模型,利用基于K-D树的类内匹配进行准确定位,实现了维修对象的快速识别与定位,为开展增强现实辅助维修系统无标志物条件下的维修部组件跟踪注册技术研究奠定基础。针对增强现实辅助维修中无标志物条件下的跟踪注册问题,利用识别定位结果设定感兴趣区域,构建了粒子滤波框架下的基于压缩感知特征描述的感兴趣区域跟踪算法。通过提取维修对象纹理特征和灰度均值特征,并将二者综合作为特征表示模型,利用粒子滤波对感兴趣区域进行跟踪,并在跟踪过程中根据目标区域变化情况实时更新参考特征向量,克服了基本粒子滤波跟踪方法跟踪精度差以及目标形态变化适应性差等问题,提高了跟踪注册的实时性与鲁棒性。其次,利用视频帧感兴趣区域目标平面上随机点对的特征值差异性构造描述子,求解单应性矩阵得到维修对象3D虚拟模型的2D投影矩阵,实现了真实维修场景与虚拟信息的“虚实结合”效果。针对增强现实辅助维修中人机交互的各类手势指令识别问题,基于辅助维修状态分析,提出了一种增强现实维修环境下的裸手手势识别方法。利用肤色累计方法在YCbCr颜色空间对图像进行手势分割,综合手势形状和位置状态信息,将手势划分为静态手势和动态手势,分别提取基于图像属性的静态手势特征和基于方向编码的动态指尖特征,而后将上述手势特征向量输入到支持向量机进行训练并得到识别模型。通过丰富多样的手势语义,可有效捕捉、分析、处理及识别各类手势指令信息,实现了提示信息的翻页、选择、拉伸、缩放等人机交互功能。针对增强现实辅助维修现有评价方法缺乏指标的完备性与系统的验证手段,在实验室条件下搭建了一套ARSAM原型系统,重点研究了光学透射式头戴显示器光学系统小型化设计与基于自由曲面棱镜的视频透射式头戴显示器轻量化设计,结合具体维修活动,设计实现了传统维修方法与ARSAM原型系统的主观评价实验,为进一步优化增强现实辅助维修系统设计、改进人机交互手段提供了评价手段。研究增强现实辅助维修原型系统实现过程中的关键技术对现有自然特征识别、跟踪注册、手势识别等相关算法研究和系统实现具有重要的指导意义,对增强现实技术应用于复杂装备维修,提高维修保障效率具有重要的理论意义和实用价值。
[Abstract]:This paper studies the key technologies such as natural feature recognition , tracking registration , gesture recognition and evaluation method in real - time auxiliary maintenance . Combined with the specific maintenance activities , the design realizes the subjective evaluation experiment of the traditional maintenance method and the ARSAM prototype system , provides an evaluation method for further optimizing the design of the augmented reality auxiliary maintenance system and improving the man - machine interaction method . The key technology in the realization process of the augmented reality auxiliary maintenance prototype system has important guiding significance to the research and the system realization of the related algorithms such as the identification of the existing natural feature , the tracking registration , the gesture recognition and the like , and has important theoretical significance and practical value for the application of the augmented reality technology in complex equipment maintenance and improving maintenance and protection efficiency .

【学位授予单位】：河北工业大学
【学位级别】：博士
【学位授予年份】：2016
【分类号】：TP391.41;TP391.9

【相似文献】

相关期刊论文 前10条

1 林P;杨珂;王涌天;刘越;;移动增强现实系统的关键技术研究[J];中国图象图形学报;2009年03期

2 徐超;;增强现实,3G的潜在“杀手”应用?[J];通信世界;2010年10期

3 ;苹果两项新专利解读:增强现实与半透明屏幕[J];硅谷;2011年15期

4 蔡苏;宋倩;唐瑶;;增强现实学习环境的架构与实践[J];中国电化教育;2011年08期

5 ;移动增强现实国家重大专项正式启动[J];信息技术与标准化;2012年03期

6 赵越;;基于移动增强现实的学习形式研究[J];科技资讯;2013年06期

7 张健;蔡新元;;“增强现实”在传统出版领域中的应用探索[J];科技与出版;2013年10期

8 裴燕;;“增强现实”的革命[J];IT经理世界;2013年24期

9 陈靖,王涌天,闫达远;增强现实系统及其应用[J];计算机工程与应用;2001年15期

10 徐伟平,朱仲涛,丁晓玲,赵强;增强现实硬件平台的实现与应用[J];实验技术与管理;2003年01期

相关会议论文 前10条

1 刘越;王涌天;闫达远;;增强现实系统显示技术研究[A];第三届全国数字成像技术及相关材料发展与应用学术研讨会论文摘要集[C];2004年

2 张旭光;阎镇;;面向遥科学实验的增强现实应用研究[A];第二十三届全国空间探测学术交流会论文摘要集[C];2010年

3 王倩;高长城;徐大卫;;基于虚实像结合的增强现实研究[A];图像图形技术研究与应用2009——第四届图像图形技术与应用学术会议论文集[C];2009年

4 李丹;黄有群;;增强现实交互技术的研究[A];2007北京地区高校研究生学术交流会通信与信息技术会议论文集（上册）[C];2008年

5 葛莹;;基于视频影像的地理数据增强现实可视化研究[A];中国地理学会百年庆典学术论文摘要集[C];2009年

6 葛学东;;增强现实一致光照技术研究[A];第十三届全国图象图形学学术会议论文集[C];2006年

7 周志颖;郑思远;昌明;;增强现实内容管理云平台在数字科技馆中的应用[A];第十六届中国科协年会——分16以科学发展的新视野，，努力创新科技教育内容论坛论文集[C];2014年

8 王坚;;虚拟现实和增强现实的人机交互技术[A];计算机技术在工程建设中的应用——第十二届全国工程建设计算机应用学术会议演讲辑录[C];2004年

9 王红;周雅;高宇;闫达远;;光学透视式增强现实系统虚实亮度匹配研究[A];中国光学学会2006年学术大会论文摘要集[C];2006年

10 赵小军;游旭群;石常秀;甘硕秋;;基于增强现实技术的催眠治疗:心理压力和焦虑[A];心理学与创新能力提升——第十六届全国心理学学术会议论文集[C];2013年

相关重要报纸文章 前10条

1 本报记者 逄丹;“增强现实”用虚拟美化现实[N];通信产业报;2010年

2 中国移动研究院业务研究所 陈志刚;“增强现实”适宜后向收费[N];通信产业报;2010年

3 本报记者 邹大斌;增强现实:互联网应用的新热点[N];计算机世界;2011年

4 ;移动增强现实：是炒作还是下一件大事?[N];网络世界;2010年

5 ;AR：更深刻的现实[N];中国高新技术产业导报;2002年

6 本报记者 刘霞;2020年的可能和不可能[N];科技日报;2011年

7 特约作者 苏驰;真亦假时假亦真[N];电脑报;2010年

8 华凌;NASA为商业飞行员开发增强现实设备[N];科技日报;2012年

9 荆晶;手机带你穿越时空,如梦如幻回到从前[N];新华每日电讯;2009年

10 陈志鸿;荷兰邮票使用“增强现实”技术展现“托塔”情景[N];中国集邮报;2011年

相关博士学位论文 前10条

1 林一;基于上下文感知的移动增强现实浏览器构建及优化方法研究[D];北京理工大学;2015年

2 赵越;实时增强现实中运动目标及场景的跟踪注册关键问题研究[D];东北大学;2015年

3 陆平;移动增强现实中的图像处理关键技术研究及应用[D];东南大学;2015年

4 魏小东;面向教育应用的增强现实系统关键问题研究[D];北京理工大学;2015年

5 赵守伟;增强现实辅助维修关键技术研究[D];河北工业大学;2016年

6 赵新灿;增强现实维修诱导系统关键技术研究[D];南京航空航天大学;2007年

7 姚远;增强现实应用技术研究[D];浙江大学;2006年

8 董子龙;面向增强现实的实时三维跟踪[D];浙江大学;2010年

9 冯晓伟;增强现实工业培训系统研究[D];华东师范大学;2012年

10 桂振文;面向移动增强现实的场景识别与跟踪注册技术研究[D];北京理工大学;2014年

相关硕士学位论文 前10条

1 徐灵;增强现实广告技术的创新扩散研究[D];湖南大学;2012年

2 Pp冬慧;基于增强现实的手部康复训练系统的研究[D];南京信息工程大学;2015年

3 夏德芳;移动增强现实中位姿计算与静态手势识别交互研究[D];南京理工大学;2015年

4 李洁;基于Android平台的增强现实系统研究与应用[D];河北农业大学;2015年

5 张恺夫;基于增强现实的交通安全公益广告设计及其效果研究[D];哈尔滨工业大学;2015年

6 康磊;地标性建筑的增强现实系统设计研究[D];哈尔滨工业大学;2015年

7 赵王军;面向信息物理Web的增强现实浏览器设计与实现[D];浙江大学;2015年

8 彭雪;基于传感器的增强现实关键技术研究[D];上海大学;2015年

9 田远霞;增强现实下多通道交互模型研究与实现[D];浙江大学;2015年

10 严玉若;增强现实中视觉反馈关键技术研究[D];上海大学;2015年

本文编号：1407591