基于深度学习和注意力机制的车辆灯语检测与识别研究

来源 :华南理工大学 | 被引量 : 0次 | 上传用户:li9599
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着汽车的使用量越来越多,交通安全成了目前智能化城市发展亟待解决的问题之一。根据交通法律法规,车辆在行驶的过程中有一套特定的灯语表示,车辆灯语是行车过程中辅助驾驶决策的一个关键的因素,而在复杂环境中目前已有的检测方法很难自动且准确地识别出前面车辆的灯语语义。因此本论文中提出的车辆灯语检测与识别的方法有很重要的研究意义和应用价值。本文基于深度学习和注意力机制的车辆灯语检测与识别的工作主要有以下四个贡献点:(1)鉴于现有的公开的针对车辆尾灯灯语检测与识别任务的数据集十分稀缺,本文从真实的城市环境中采集大量的行车视频,经过筛选、截断、抽取视频帧、图像标注等流程,首创了一个颇具研究难度的车辆灯语数据集,同时为本文提出的车辆灯语检测与识别方法的验证提供了有力的数据支撑。(2)根据车辆尾灯灯语检测与识别任务本身的特点和数据集在低光照等环境干扰下车辆轮廓不明、灯语表示不清晰的研究难点,本文采用由粗到细的研究思路,设计并搭建了粗糙/全局的注意力模块(Coarse Attention module),充分利用原始图像的整体信息,能够对被测物体进行粗略的分类和定位。并通过理论推导和在通用数据集的实验证明了该方法的可行性。(3)针对车辆尾灯灯语检测与识别任务易受强光照下的反光、街灯、其他车辆灯光以及拍摄视角范围内各种发光物体的影响,我们在粗糙/全局注意力模块(Coarse Attention module)的基础上进一步对网络进行优化,提出并构建了精细/局部注意力模块(Fine Attention module),用来深入学习车尾灯的细节信息,进一步定位到车尾灯区域,减少灯语语义之间的混淆,与先进方法相比,实现了最佳的车辆灯语识别效果。(4)在通用目标检测网络的基础上,加入以上两个可嵌入亦可拆卸的注意力模块,提升检测的平均准确率,再通过深度学习网络优化方法,加快网络计算速度,最终完善并搭建了一个高效的端对端车辆灯语检测与识别系统,实现了对输入行车视频进行实时的灯语检测识别与预警,在实际的应用场景中可以极大地增强驾驶的智能性和安全性。
其他文献
随着有限合伙企业被2006年新《合伙企业法》写入法律,私募股权投资基金的组织形式也发生了重大变化。有限合伙与私募的结合绝非偶然,有限合伙人力与资本的完美融合、有限合伙
美国的专利制度改革引起了各方的关注,其中最值得关注的是2013年已经在众议院通过的《创新法案》。《创新法案》旨在解决美国由“专利蟑螂”所引发的严重的滥诉问题,该法案综
与微波通信相比,激光通信在通信速率、通信距离、系统体积、重量、功耗等方面都表现出极大的优势。空间激光通信系统中由于通信双方处于相对运动状态,因此需要快速、精确的瞄准、捕获与跟踪(PAT)系统以建立并维持信道的稳定。与近地激光通信相比,深空通信距离远、空间噪声强,对PAT的性能要求更为严格,因此需要对深空激光通信跟踪技术进行深入研究。本文围绕深空激光通信的精跟踪技术开展具体研究。首先,对深空激光通信
高斯整数序列是实部和虚部均为整数的一类复数序列。高斯整数序列不同于传统复数根序列,是一类非恒定幅度序列。且这类序列包含了正交幅度调制序列作为特殊情况。具有良好自相关性的完备高斯整数序列已经被广泛应用于无线通信系统中,例如应用于码分多址无线通信系统中作为扩频序列,可以抑制多径干扰;应用于正交频分复用通信系统中,作为预编码矩阵,可以降低峰均功率比。因此该文以序列的自相关函数为关键要素,对完备以及几乎完
随着教育理念的发展和教育模式的进步,现代教育不断对教育空间提出新的要求。人们开始逐渐意识到非正式学习条件在正式教育空间设计规划中的重要性。本文围绕如何使新科技服
电容层析成像技术(Electrical Capacitance Tomography,ECT)是过程层析成像技术(Process Tomography,PT)研究的热点之一,由电容阵列传感器子系统、数据采集子系统和计算机图
在大数据的背景下,聚类分析作为数据挖掘重要的技术手段之一,应用领域十分广泛。基于密度峰快速搜寻的聚类分析方法由于良好的聚类效果,且不受簇类形状所约束,在众多聚类算法
随着机器人技术与医学技术的发展,机器人被广泛应用于医学手术当中,出现了一些比较成熟的外科手术系统,比如达芬奇系统、宙斯手术机器人系统等。这些手术系统不是专门针对喉
单个机器人从外界获取信息的能力十分有限,采用多个机器人协作高效地完成复杂任务是未来的趋势。多个机器人联合执行任务时,需要通过信息交流来进行多机器人之间的同步或协调,对多移动机器人通信系统的研究十分重要。本文针对分布式多移动机器人通信系统移动性强,动态组网等特点,采取了Ad hoc作为组网方式。路由协议是保障Ad hoc网络准确运转的一个关键因素,本文对Ad hoc组网下的多机器人通信时AODV路由
无人艇因其尺寸小、吃水浅和功能多样等特点,被广泛用在内河和近海场景执行无人任务,例如水质采样、岛礁测绘等。本文以课题组的“精海8-b”无人艇为研究对象,对无人艇的路径