基于毫米波雷达及深度学习视觉信息融合的前方车辆检测方法研究
发布时间:2020-11-20 16:25
【摘要】:前方车辆多源信息检测技术是先进驾驶辅助系统(ADAS,Advanced Driving Assistant System)和无人驾驶系统领域中的重要研究方向之一。而在目前常用的毫米波雷达与视觉信息融合方法中,由于静态毫米波雷达出射波束角窄和传统机器视觉车辆检测处理时间长精度低,导致其难以准确实时地动态监视并跟踪弯道行驶中的前方车辆目标(以下简称跟踪目标),造成跟踪目标的丢失,甚至引发车辆追尾事故。因此,针对弯道行驶时毫米波雷达跟踪目标丢失和传统机器视觉车辆检测高耗时低精度的问题,提出了基于毫米波雷达及深度学习视觉信息融合的前方车辆检测方法。首先,第二章针对弯道行驶时毫米波雷达跟踪目标丢失的问题,根据毫米波雷达测距测速原理,建立了处于不同行驶车道(直道和弯道)上跟踪目标的毫米波雷达检测模型,借此分析了跟踪目标丢失时弯道半径和自车行驶状态之间的关系,从而提出了面向跟踪目标丢失的毫米波雷达及视觉相机信息融合方法;该方法以跟踪目标的毫米波雷达历史数据信息为状态信息,以跟踪目标的视觉相机图像信息为测量信息,利用无损卡尔曼滤波(Unscented Kalman Filter,UKF)计算出跟踪目标的距离、速度等行驶状态参数,并以此作为下一时刻跟踪目标的状态信息进行持续跟踪,解决弯道行驶时毫米波雷达跟踪目标丢失的问题。其次,第三章针对视觉相机采用传统机器视觉车辆检测方法所带来的高耗时低精度问题,使用了基于卷积神经网络的YOLOv3深度学习算法来进行跟踪目标的检测。并为了加快算法的检测速度,使用剪枝量化的方法对YOLOv3算法模型进行了简化,完成了YOLOv3-tiny算法模型的训练,从而在检测时间及检测精度上达到了实时准确的跟踪目标检测要求。然后,第四章综合以上两方面的工作,建立了毫米波雷达及视觉相机数据信息融合模型,根据坐标转换关系完成了毫米波雷达和视觉相机的空间坐标统一,根据最小公共采样周期完成了毫米波雷达和视觉相机的时间坐标统一,从而搭建了基于毫米波雷达及深度学习视觉信息融合的前方车辆检测系统(以下简称融合系统);在此融合系统中,利用毫米波雷达生成跟踪目标的感兴趣区域,利用YOLOv3-tiny深度学习算法完成跟踪目标的验证,根据制定的融合规则算出融合后的跟踪目标,最终利用UKF算法实现对跟踪目标的实时跟踪。最后,第五章验证了融合系统跟踪目标检测方法的有效性。分别进行了融合系统各部件的选型,安装并调试标定了由毫米波雷达及视觉相机组成的融合系统,并利用该系统及基于高精度GPS互定位的VBOX检测设备分别获取跟踪目标状态信息,完成了在不同弯道曲率半径下的跟踪目标检测实验。通过对比分析VBOX数据与融合系统检测得到的跟踪目标数据,验证了弯道跟踪目标丢失算法有效解决弯道目标丢失问题。
【学位授予单位】:华南理工大学
【学位级别】:硕士
【学位授予年份】:2019
【分类号】:U463.6;TN958;TP391.41
【图文】:
第一章 绪论2009 年 Anselm H 和 Anton K 基于 Haar-like 特征进行车辆检测,通过使波器计算整体图像特征,通过一系列增强分类器和自适应滑动窗口进行前方车2013 年 Mahdi R 和 Mutsuhiro T 提出了一种基于多特征分析和融合的方法检测,并使用了自适应全局的分类方法进行白天和黑夜条件下的车辆检测[20]2016 年 Pawe F 和 Nowosielski A 等通过安装在前挡风玻璃的摄像机拍摄行卷积神经网络对前方车辆进行检测和分类[21]。Feature mapsf.mapsf.maps
图 2-5 目标静止时信号随时间变化规律是毫米波频率带宽, f 是发射信号与反射信号混频止目标时,发射信号与反射信号产生差频值仅由于自沿与下降沿的差频数值都相同,且发射信号与反射信因此,对于静止目标而言,通过其延时时间 t 就可以:D = t × c/ 2速,而对于 FMCW 来说,延时时间 t 远小于雷达的原理可得:/ 2t fT F = 带入式(2-4),整理即可得前方目标距离公式:
图 2-6 运动目标接收信号频率变化为动态目标反射信号与发射信息上升沿的频率差值,静态信号,由于多普勒效率,动态目标的反射信号除接收延时外,还会产生多普勒频移。其频率差之间的b df f f+= -+b df = f f于多普勒频移而带来的差频频率,由式(2-6)和式(( )/ 2d b bf f f += ( + )/ 2b bf f f + =带入式(2-5)得动态目标的距离计算公式为:
【参考文献】
本文编号:2891685
【学位授予单位】:华南理工大学
【学位级别】:硕士
【学位授予年份】:2019
【分类号】:U463.6;TN958;TP391.41
【图文】:
第一章 绪论2009 年 Anselm H 和 Anton K 基于 Haar-like 特征进行车辆检测,通过使波器计算整体图像特征,通过一系列增强分类器和自适应滑动窗口进行前方车2013 年 Mahdi R 和 Mutsuhiro T 提出了一种基于多特征分析和融合的方法检测,并使用了自适应全局的分类方法进行白天和黑夜条件下的车辆检测[20]2016 年 Pawe F 和 Nowosielski A 等通过安装在前挡风玻璃的摄像机拍摄行卷积神经网络对前方车辆进行检测和分类[21]。Feature mapsf.mapsf.maps
图 2-5 目标静止时信号随时间变化规律是毫米波频率带宽, f 是发射信号与反射信号混频止目标时,发射信号与反射信号产生差频值仅由于自沿与下降沿的差频数值都相同,且发射信号与反射信因此,对于静止目标而言,通过其延时时间 t 就可以:D = t × c/ 2速,而对于 FMCW 来说,延时时间 t 远小于雷达的原理可得:/ 2t fT F = 带入式(2-4),整理即可得前方目标距离公式:
图 2-6 运动目标接收信号频率变化为动态目标反射信号与发射信息上升沿的频率差值,静态信号,由于多普勒效率,动态目标的反射信号除接收延时外,还会产生多普勒频移。其频率差之间的b df f f+= -+b df = f f于多普勒频移而带来的差频频率,由式(2-6)和式(( )/ 2d b bf f f += ( + )/ 2b bf f f + =带入式(2-5)得动态目标的距离计算公式为:
【参考文献】
中国期刊全文数据库 前9条
1 杜佳;宋春林;;一种改进的毫米波雷达多目标检测算法[J];通信技术;2015年07期
2 李星;郭晓松;郭君斌;;基于多特征融合的前向车辆检测方法[J];计算机工程;2014年02期
3 胡彬;赵春霞;;基于MHT模型的毫米波雷达车辆检测方法[J];南京理工大学学报;2012年04期
4 尚在飞;肖文健;李永科;;基于CCD图像传感器的路径识别算法分析[J];电子设计工程;2012年16期
5 胡彬;赵春霞;刘家银;;基于毫米波雷达与图像融合的车辆检测[J];华中科技大学学报(自然科学版);2011年S2期
6 杜青云;雷正保;魏书彬;王志起;;基于汽车安全状况的CST控制方法[J];交通科学与工程;2009年02期
7 杨保平;江修富;卜格鸿;许斌;;基于扩谱技术的高精度无线电测距[J];装备指挥技术学院学报;2006年05期
8 刘勃,周荷琴,魏铭旭;基于颜色和运动信息的夜间车辆检测方法[J];中国图象图形学报;2005年02期
9 张建辉,刘国岁,顾红,,苏卫民;多斜率步进调频连续波信号在汽车防撞雷达中的应用[J];电子与信息学报;2002年02期
中国硕士学位论文全文数据库 前2条
1 黄晓慧;车辆弯道安全辅助驾驶控制系统设计[D];大连理工大学;2013年
2 肖斌;多传感器信息融合及其在工业中的应用[D];太原理工大学;2008年
本文编号:2891685
本文链接:https://www.wllwen.com/kejilunwen/xinxigongchenglunwen/2891685.html