动态视觉手势识别下手工装配时序控制的智能防错方法

发布时间：2019-06-18 09:18

【摘要】：为提高手工装配生产过程的效率,提出一种保证过程时序性的手势视觉识别与防错方法,通过识别信号控制增强现实装配引导系统,减少装配过程中检错和返工消耗的时间。在第一视角下采集手工装配过程的样本视频,用预定时间方法分析单步操作的标准手势和时间序列。在虚拟装配环境中建立了装配操作序列仿真引导模型。用肤色检测获取装配图像的手部区域,定义了区域几何特征并进行概率分布拟合,提取装配手势特征及其识别条件。基于装配动作的时序约束,建立了时序锁定的装配手势识别方法,进而判断装配状态,触发推送、隐藏或更新引导信息。计算机主板装配实例表明,所提出的智能防错方法提高了装配序列的执行效率和一次完成率。
[Abstract]:In order to improve the efficiency of manual assembly production process, a gesture visual recognition and error prevention method to ensure the timing of the process is proposed. The augmented reality assembly guidance system is controlled by the recognition signal, and the time of error detection and rework consumption in the assembly process is reduced. The sample video of manual assembly process is collected from the first angle of view, and the standard gestures and time series of one-step operation are analyzed by predetermined time method. The simulation guidance model of assembly operation sequence is established in virtual assembly environment. The hand region of the assembly image is obtained by skin color detection. The geometric features of the region are defined and the probability distribution fitting is carried out to extract the assembly gesture features and their recognition conditions. Based on the timing constraint of assembly action, an assembly gesture recognition method based on timing locking is established, and then the assembly state is judged, the push is triggered, and the guidance information is hidden or updated. The assembly example of computer motherboard shows that the proposed intelligent error prevention method improves the execution efficiency and primary completion rate of assembly sequence.
【作者单位】： 上海交通大学机械与动力工程学院计算机集成制造研究所;上海市网络化制造与企业信息化重点实验室;
【基金】：国家自然科学基金资助项目(51205328,51405403) 教育部人文社会科学研究青年基金资助项目(12YJCZH296) 四川省应用基础研究计划资助项目(2014JY0232)~~
【分类号】：TP391.41

【参考文献】

相关期刊论文 前10条

1 王小巧;刘明周;葛茂根;凌琳;马靖;刘从虎;;复杂机械产品装配过程质量门监控系统与关键技术[J];计算机集成制造系统;2015年11期

2 徐丽夫;王安军;;基于视觉防错的发动机活塞环装配机[J];制造技术与机床;2015年05期

3 侯文君;雷雨;李铁萌;刘亚醉;;面向增强装配中手部特征检测的改进算法[J];计算机集成制造系统;2015年02期

4 王云;窦本虎;;关键零部件装配防错及追溯技术[J];汽车工艺与材料;2014年07期

5 张晓军;;面向变速箱总成装配的防错系统研究及应用[J];机械工程与自动化;2014年03期

6 王建国;;防错技术在发动机制造中的应用[J];汽车与配件;2014年19期

7 冯志全;杨波;郑艳伟;徐涛;李毅;朱德良;;基于特征点分布分析的手势特征检测方法[J];计算机集成制造系统;2011年11期

8 王学良;;防错设计原理剖析及其在航空工业企业的应用[J];航空标准化与质量;2009年06期

9 于鸿彬;郭伟;赵家黎;;面向防错的混合装配线物流监控[J];计算机集成制造系统;2007年04期

10 汪邦军;;Poka-Yoke及其在航空产品研制过程的应用[J];航空标准化与质量;2006年03期

【共引文献】

相关期刊论文 前10条

1 尹旭悦;范秀敏;顾岩;汪嘉杰;;动态视觉手势识别下手工装配时序控制的智能防错方法[J];计算机集成制造系统;2017年07期

2 陈秋池;;面向变速箱装配过程的在线质量控制方法研究[J];机械工程师;2016年09期

3 易靖国;程江华;库锡树;;视觉手势识别综述[J];计算机科学;2016年S1期

4 田宏伟;王晓亮;王毅;;防错技术在船舶建造过程应用的思考[J];船舶标准化与质量;2016年02期

5 宗才才;刘冲;;发动机零件拧紧效果检测与问题研究[J];中小企业管理与科技(下旬刊);2016年02期

6 张墨逸;张秋余;芦俊池;段宏湘;;基于结构特征点的手势建模与高层特征提取[J];华中科技大学学报(自然科学版);2015年10期

7 张吴波;;发动机外协件装配线防错系统设计与实现[J];湖北汽车工业学院学报;2015年03期

8 雷剑刚;;不平衡网络入侵特征下的博弈检测仿真[J];计算机仿真;2015年09期

9 罗远扬;陶丽;;防错技术(Poka-Yoke)在油泵装配线上的应用[J];硅谷;2014年22期

10 张国亮;王展妮;王田;;应用计算机视觉的动态手势识别综述[J];华侨大学学报(自然科学版);2014年06期

【二级参考文献】

相关期刊论文 前10条

1 刘明周;王小巧;马靖;张铭鑫;刘从虎;;基于互信息和博弈论的复杂机械产品装配质量控制阈在线优化方法及应用[J];计算机集成制造系统;2014年11期

2 徐滨士;董世运;史佩京;;中国特色的再制造零件质量保证技术体系现状及展望[J];机械工程学报;2013年20期

3 李文川;景熠;王旭;;基于采纳过程视角的离散制造企业无线射频识别运行模式[J];计算机集成制造系统;2013年07期

4 顾新建;代风;陈芨熙;杨青海;祁国宁;;智慧制造与智慧城市的关系研究[J];计算机集成制造系统;2013年05期

5 杨静萍;王万雷;康晶;米守防;;基于PSO-SVM的多阶段产品质量预测控制方法研究[J];大连民族学院学报;2013年01期

6 张映锋;赵曦滨;孙树栋;王军强;司书宾;;一种基于物联技术的制造执行系统实现方法与关键技术[J];计算机集成制造系统;2012年12期

7 万峰;刘检华;宁汝新;李章锦;;面向复杂产品离散装配过程的数据采集和管理方法[J];计算机集成制造系统;2012年08期

8 唐慧;;基于机器视觉技术的易拉罐罐底喷码检测系统设计[J];自动化博览;2012年07期

9 刘明周;赵志彪;凌先姣;蒋增强;王小巧;凌琳;;基于最短路径的复杂机械产品装配过程质量控制点公差带在线优化方法[J];机械工程学报;2012年10期

10 谭同德;郭志敏;;基于双目视觉的人手定位与手势识别系统研究[J];计算机工程与设计;2012年01期

【相似文献】

相关期刊论文 前10条

1 武霞;张崎;许艳旭;;手势识别研究发展现状综述[J];电子科技;2013年06期

2 ;新型手势识别技术可隔着口袋操作手机[J];电脑编程技巧与维护;2014年07期

3 任海兵,祝远新,徐光，

本文编号：2501363