基于深度学习的人体行为识别技术的研究与应用

发布时间：2020-05-12 06:05

【摘要】：基于视频的人体行为识别一直是计算机视觉领域的热门研究方向,在智能视频监控、安全驾驶、人机交互和视频检索等领域有着重要的应用价值。随着深度学习技术的发展成熟,人体行为识别取得了突破性进展,但由于人体行为复杂性和背景噪音等问题,如何高效准确地提取人体行为特征,设计一种高精度、泛化能力强的人体行为识别算法仍是巨大的挑战。针对这些问题,本文的主要研究工作如下:提出一种基于二维注意力卷积神经网络的人体行为识别算法。为了减少背景噪音干扰,准确提取关键区域的特征信息,本文提出一种基于像素级别的注意力机制,驱动网络自主学习特征权重,有效地提高了算法性能。提出一种基于三维残差卷积神经网络的人体行为识别算法。为了充分利用视频的空间和时间信息,本文设计一种三维卷积神经网络,同时提取时空特征,并嵌入三维残差结构,加深网络宽度的同时提高性能,为减少模型参数量,使用全局平均池化代替全连接层。该算法在准确率和速度上具有良好的效果。提出一种基于多流卷积神经网络的人体行为识别算法。为了增强模型的泛化性能,本文提出使用多模态数据输入,包括RGB图、光流图和梯度图,并使用二维和三维多种网络结构,最后提出两种网络加权融合策略,该算法在UCF101数据集和HMDB51数据集上的准确率分别为95.1%和71.6%。提出基于滑动窗口的驾驶员异常行为监控预警机制,通过累计异常值和与异常阈值判断是否触发预警,进一步设计并完成原型系统,通过自主采集的驾驶员行为数据集完成应用层面的算法验证。
【图文】：

研宄内容将包括以下几个方面：人体行为识别算法的研究与创新、驾驶员异常监逡逑控预警机制的设计与实现、原型系统的设计与实现。其中，参考于Ｍａｂｒｏｕｋ教授逡逑等人的综述＠］，，本文将人体行为识别的整体流程归纳如图１－１所示，本文具体工逡逑作展开如下。逡逑一逦行为}柙げ忮义暇植阌颪B逦逦逦逦逡逑行逦ｒ＾ｌ逦有栜逡逑力逦逦邋逦逡逑｜逦行为壚：训练和学习一？逦半监替逡逑／＼逦无监替逡逑１邋ｒ逦逦逡逑逦—＝ｚ＝＾ｚ＝—逦＾逡逑牛逦形娜正逡逑今制ＩＢＳ述逦—逦逦逦：逡逑逦Ｉ邋？栜持征逡逑＾逦Ｍ邋＿乍持征￣￣逡逑表逦ｕ逦逦逡逑示逦逦逡逑特征提取逦一［Ｈ？局部特征：ＨＯＦ／ＨＯＧ／ＭＢＨ等逡逑低层语义介逦‘全局持征：~T等逡逑１邋，

本文编号：2659780