【摘 要】
:
当前,无人机航拍已经成为人类获得信息的途径之一,研究航拍行人目标检测关键技术,对军用侦查、公共安全、人员搜索等应用领域有重大意义。然而,航拍场景通常具有环境复杂、目标对比度低等特点。另外,由于嵌入式设备功耗及计算能力受限,基于深度学习的目标检测算法的部署与应用也是值得研究的问题。本文以航拍行人目标为检测对象,针对航拍行人目标检测算法精度不足和单一传感器获取图像信息有限的问题,基于红外与可见光图像对
论文部分内容阅读
当前,无人机航拍已经成为人类获得信息的途径之一,研究航拍行人目标检测关键技术,对军用侦查、公共安全、人员搜索等应用领域有重大意义。然而,航拍场景通常具有环境复杂、目标对比度低等特点。另外,由于嵌入式设备功耗及计算能力受限,基于深度学习的目标检测算法的部署与应用也是值得研究的问题。本文以航拍行人目标为检测对象,针对航拍行人目标检测算法精度不足和单一传感器获取图像信息有限的问题,基于红外与可见光图像对YOLO目标检测展开研究。本文主要工作及贡献如下:(1)融合注意力机制优化的YOLO检测算法。通过融合注意力机制CBAM优化YOLOv4-tiny的特征提取网络,保持检测速度基本不变的同时提升算法的检测精度。在大型公开无人机航拍数据集Visdrone上进行实验,结果表明改进算法在速度基本不变的情况下,提升了平均检测精度。此外,在公开红外行人数据集FLIR上的对比实验也表明改进算法的有效性。(2)利用卷积自编码网络融合红外与可见光图像进行行人目标检测。红外与可见光图像融合网络由编解码网络与中间的特征融合层两部分组成。首先,通过两个类似结构的孪生编码网络分支分别对红外与可见光图像进行编码,得到相应的多通道特征图并压缩成为单通道特征图;然后根据区域能量特征融合生成新的特征图,经过解码网络重建出红外与可见光图像的融合图像。采用公开数据集KAIST进行实验表明,所设计算法融合效果更好,且更适应航拍场景下的行人目标检测。(3)融合显著图增强的热红外图像目标检测。使用U2-Net网络提取热红外图像的显著图,使用提取出的显著图对原始热红外图像进行融合增强,更加突出行人目标区域,从而显著提升行人目标检测的性能。采用公开航拍红外数据集Com Net,通过对多种不同的航拍行人目标检测方法和图像融合方法进行实验对比,验证了所提方法的有效性与泛化性。(4)面向算力和功耗受限的嵌入式设备,研究并实现了基于Jetson TX2和Tensor RT的航拍行人目标检测算法的优化与部署。在保持推理精度比较优势的同时,检测速度得到了显著提升,从而提高无人机机载设备算法的实时性。
其他文献
型钢混凝土梁因其综合性能优异而被广泛用于高空间大跨度结构中,而结构在使用过程中,不免会受到静态荷载和冲击荷载的作用,与此同时型钢混凝土梁会因为混凝土在施工和使用过程中而形成缺陷,这些缺陷的存在会影响型钢混凝土梁的受力性能。当含有缺陷的型钢混凝土梁应用于工程建设中时,在静态荷载和爆炸、地震等冲击荷载的作用下更容易产生严重的损坏,会使人民的生命、财产等无法得到保障,所以开展含混凝土缺陷的型钢混凝土梁的
近年来,我国正在大力推进新型城镇化建设,着力发展绿色建筑,提高建筑质量和效率,走向建筑工业化,新型装配式建筑成为我国未来建筑事业发展的必然趋势。预制底板出筋的RC叠合板作为主要的水平承重构件,在工程中已广泛应用,相较于传统的整体现浇楼板,出筋RC叠合楼板能在一定程度上降低资源浪费、环境污染及施工机械化程度低等缺点。然而,预制底板存在侧出筋,使得叠合板拼缝之间留有现浇带,仍不能较为完善地解决节能较差
图像语义分割旨在对图像内所有像素所属类别进行逐一密集预测,推断像素点语义信息和位置信息,完成像素分类任务,是计算机视觉场景理解中不可或缺的关键性技术。随着深度学习的兴起,基于卷积神经网络的图像语义分割成为更行之有效的方式。本文就当前基于深度学习的图像语义分割网络存在的模型分割精度低、图像类内区域误识别、小尺度目标遗失和边界模糊等问题,分别对网络的编码器和解码器部分进行设计,提升网络特征提取、特征融
随着现代化建设进程的推进,大量老旧建筑被拆除,产生数亿吨废弃混凝土,污染环境且占用土地资源,亟需对其再生利用。钢管再生混凝土继承了钢管混凝土的诸多优点,如高承载力、高延性、建造便捷等,成为废弃混凝土再生利用的有效途径。此外,因意外或人为因素引起的爆炸事故危及人民的安全,且严重影响结构的可靠性。结构柱作为关键的承重构件,其在爆炸荷载下的破坏不可避免地增加了结构连续倒塌的可能性。钢管再生混凝土柱在其服
小目标检测与人类生活相关联,其在各个领域都起着重要的作用,比如:在民事方面,无人机对森林火灾中的生物目标检测;在军事方面,基于遥感卫星图像对我国领域内的地面目标检测;在工业方面,仪器工件上的小缺陷检测等等。随着深度学习的不断发展以及计算机视觉系统的成熟与完善,小目标检测已经成为了各研究者探讨钻研的一项重要任务。因此,小目标检测具有重要的研究价值。本文从小目标检测的研究以及应用出发,以提高其检测精度
随着技术的发展,无人机以其方便、快捷、实用等诸多优点,得到了广泛应用。作为大型无人机供能系统的基本构成,锂离子电池荷电状态(State of Charge,SOC)的精确预估对无人机的性能、续航及操作体验具有决定性的作用。本课题以无人机锂离子电池为研究对象,通过对电路模型及估算算法进行改进,最终实现锂离子电池SOC的高精度实时在线估算。(1)基于对无人机锂离子电池的充放电电压差异的分析。提出电压匹
本课题来源于某化工研究所,该所需要对炸药中不溶物成分分析流程(现采用重量分析法流程)实现自动化控制,因此本文根据炸药重量法分析自动化系统的设计方案要求,重点对该自动化流程中适用于机器人操作的环节及其操作技术进行了分析研究。主要研究内容如下:(1)机器人操作技术需求分析。首先概述了炸药重量分析法的人工操作流程及其自动化流程,并分析研究了自动化流程中适用于机器人操作的环节(如滤杯转移、恒温恒湿箱和烘烤
随着核工业的迅猛发展,我国存在着大量的核设施亟需退役。核退役机器人可取代人工,在高辐射环境中完成退役工作。然而,传统的遥操作控制方式存在着操作难度大、工作效率低、人员培训周期长等问题,因此核环境下的自主作业是核机器人的研究重点之一。本文以提升核机器人的自主抓取作业能力为目标,重点研究机器人在自主抓取过程中面临的路径规划问题、轨迹跟踪控制问题和抓取位姿检测问题。具体内容如下:(1)针对核退役场景的特
强化传热技术不仅可以提高设备或体系的传热效率,还可以降低换热装置和能量传输系统的尺寸和初期投资,对于解决能源紧缺、环境污染等问题具有重要意义。纳米流体作为一种新型的高效传热介质而受到广泛关注,其中石墨烯纳米流体更以其优异的热物性引起了研究者的重视。针对该现状,本文对配置了石墨烯纳米流体,并对不同浓度石墨烯纳米溶液的稳定性以及热物性参数进行了表征与测试,自主设计了圆形铜管及矩形槽道,并搭建了持续施加
智能多模通信系统是将移动自组织网络与人工智能相结合的一种新型通信系统。该系统除具有传统移动自组织网络无中心、多跳的特点外,还具有多调制模式、差异化的网络拓扑稳定性、综合业务支持的特点,造成网络拓扑稳定性变动较大,要求提供分组Qo S(Quality of Service)保障。信道接入技术作为智能多模系统关键技术,如何提高网络分组投递成功率、降低分组时延、保证各类业务Qo S是该技术面临的关键问题