基于FPGA的行人检测YOLO算法轻量化研究与实现

来源 :华南理工大学 | 被引量 : 0次 | 上传用户:mohuan88
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
行人检测作为计算机视觉中的热点问题之一,在许多实际场景,如无人驾驶系统、辅助驾驶系统、智能视频监控和机器人等多个领域中都具有十分广泛的应用。目前,基于卷积神经网络(CNN)的行人检测算法以较大的优势超过了传统的行人检测算法,但由于CNN结构复杂、计算量大,导致其很难在资源不足的嵌入式平台上实现实时应用。你只需看一次(YOLO)算法作为目前速度、性能最佳的行人检测算法之一,仍然存在着内存需求大、计算复杂度高等问题。针对上述问题,本文通过对轻量化思想的分析,对YOLOV4-tiny行人检测算法进行轻量化研究与设计,提出了YOLOV4-light轻量化算法,并在Caltech-USA数据集上验证了算法轻量化的有效性;为了使改进后的算法便于硬件应用,在现场可编程逻辑门阵列(FPGA)上进行了硬件加速设计与测试验证。主要工作包括:(1)为了降低网络模型的内存需求和计算复杂度,提出了基于扩展卷积加深度可分离卷积的运算模块,改进了卷积的运算过程;并根据内存访问成本(MAC),进一步优化了网络中级联的扩展卷积和点卷积,减少了不必要的MAC、降低了网络层数。为了进一步取得更好的轻量化效果,在整个网络模型架构上,采用了宽度乘法器的设计;在进行宽度乘法器实验的过程中,针对特征金字塔网络(FPN)做了进一步的实验研究,改进了原有的特征通路。(2)为了降低硬件应用的复杂度,提出利用深度卷积来取代最大池化,减少了算法硬件实现所需要的运算模块;为了减少算法在硬件实现时所需要的逻辑资源,改进了网络的激活函数。为了加速硬件上的推理验证,设计了16位的全定点化推理方案来降低计算资源和存储资源的要求;并根据网络的推理过程,设计了网络的软硬件划分方案,在上述工作的基础上通过软硬件协同设计,实现了YOLOV4-light算法的硬件验证。本文提出的YOLOv4-light算法,在Caltech-USA数据集上进行了测试,实验结果表明:YOLOv4-light算法的内存需求比例降低了89.3%,计算复杂度降低了87.9%,而精度仅仅下降约0.48%。所提算法的定点化结果显示,全定点化方案结果与软件算法的结果相比基本一致,证明了定点化方案的有效性。所提的算法硬件验证结果显示,FPGA输出的定点化结果与软件算法的输出结果基本一致,证明了硬件实现功能的正确性。
其他文献
基于性能的抗震设计方法,依赖于可靠的结构弹塑性分析结果。结构弹塑性分析方法包括静力弹塑性分析和动力弹塑性分析。动力弹塑性分析理论上能准确地预测强震引起的结构内力和变形,但地震波的随机性导致了计算结果的离散性,且计算资源消耗较大。静力弹塑性方法简单、直观、计算速度快,但它本身存在着一定的理论假设和缺陷,计算结果存在一定的误差。如何合理地选用弹塑性分析方法,兼顾计算结果准确性和计算效率,成为了工程实际
针对当前铁路货车修程修制改革、精益化管理的发展要求,解决货车配件管理粗放、履历信息不完整、缺乏配件造修质量评价手段等问题,设计了采用物联网、故障预测与健康管理、大数据分析等技术的铁路货车配件信息管理系统。该系统建立货车关键配件唯一标识码,重构货车制造、运用、检修及配件报废数据,并应用于关键配件全生命周期履历库、配件报废管理、造修质量分析、故障分析规律。实践证明,该系统能够为货车配件的精益化管理、辅
学位
结直肠癌(Colorectal Cancer,CRC)是全球发病率和死亡率排名前五的常见消化道恶性肿瘤之一。尽管在外科手术和多模式的治疗中取得了显著的进展,但是进展期的存活率依旧很低。越来越多的证据表明,肿瘤的癌旁组织,作为一种中间状态,其免疫微环境中的成熟B细胞可进行抗原递呈和进一步分化成浆细胞,在对肿瘤的免疫应答起着正向作用,在结直肠癌的进展期中发挥着关键作用。如果能够对癌旁组织中的成熟B细胞
为了解决目前桥面铺装材料过早破坏的问题,环氧树脂基混凝土由于其优异的力学性能和快速成型的特点,在桥面铺装和建筑预制件中的应用与日俱增。在自然环境中,环氧树脂基混凝土的力学性能不可避免地会受到温度剧烈变化、雨水侵蚀、紫外线辐射和其他天气条件的影响而发生劣化,而环氧树脂-砂浆作为骨料的粘结剂,具有强度高、抗变形能力强的特点,在环氧树脂基混凝土中起到荷载传递及协调变形的作用,因此环氧树脂-砂浆在自然环境
当前5G基站功耗达到4G基站的3倍以上,单个AAU(有源天线单元)的最高功耗能达到1500W,吹胀型铝质均热板因其导热系数高、面积尺寸限制小、重量轻等优点被用于代替纯铝翅片进行散热。吹胀型铝质均热板由于利用工质相变传热,腔体需要保持真空、密封,因此其封口工艺直接影响到生产良率和使用寿命。本文针对吹胀型铝质均热板封口工艺进行研究,主要研究内容如下:首先,针对吹胀型铝质均热板流道覆盖石墨层,冷焊良率低
遗址博物馆承载着我国丰富的历史文化,其与文化旅游日益结合紧密而快速发展。在建筑节能的背景之下,自然采光设计成为遗址博物馆设计中的一大重点。本文所讨论的是自然采光方式中的天窗设计。遗址博物馆具有建筑规模以中小型馆为主、选址多位于偏远的郊区、具有独特的藏品类型——遗址、倾向采用自然采光以及采用大跨度空间的特点,其以遗址的及藏品文物的保护性展览为主,在大跨度遗址展示空间中,需要较大范围有效的照明便于观看
为了提高企业干部信息管理效率,提出基于B/S架构的企业干部信息管理系统。在B/S架构模式的基础上,通过系统部署架构设计和管理模块设计,实现信息大数据的统计分析和智能辅助决策。通过提取干部信息特征,设计信息管理流程。实现干部信息管理。实验结果表明,本系统不仅可以增加信息管理输出的吞吐量,还可以缩短系统测试过程中的响应时间,从而大大提升系统的整体性能。
在《语丝》初刊的《秋夜》版本中,当下通行的简体“枣”字原为“棗”,其“一株是枣树,还有一株也是枣树”的句法乃“拆字造句”的游戏笔墨。在《秋夜》第四段,鲁迅对“棗树”进行了密集而复沓的书写,并在“语言反刍”中将其锤炼成具有实感的诗学物象。但生成的“棗树”并未融汇于“秋夜”整体的意境,反而对“秋”及其背后的诗学予以彻底颠覆。“棗树”最终定格为与“荆棘”呼应的“刺”的形象,由它所表征的“自我”既呼应着“
随着工业4.0的到来,工业物联网技术高速发展,制造业逐渐趋于智能化、自动化。物联网、大数据技术的不断发展与创新,开拓了更多的应用领域。在此基础上,人们的生活水平不断提高,对产品质量的要求也逐步提升,产品质量控制的重要性日益凸显。为保证产品的质量同时减少生产损失,产品生产过程需要进行过程监控。统计过程控制(Statistical Process Control,SPC)是进行过程监控最常用的工具。传