面向边缘计算的导盲场景理解智能算法研究

被引量 : 0次 | 上传用户:hzh19780101
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
我国视力障碍的人群基数巨大,而这些人受限于视力问题,在日常出行及生活中受到影响。目前绝大多数的盲人选择不出门或使用盲杖等传统导盲设备出行,这些设备往往较为简陋,且盲人出行依靠的盲道因为各种原因不但无法帮助盲人正常出行,还可能会导致盲人受伤。如何让盲人安全放心地在人行道或盲道上行走,并导航到自己想去的地点,逐渐成为一个热点。围绕面向边缘计算的视觉导航及场景理解技术研究,本文采用基于深度学习的目标检测算法来实现对人行道上常见障碍物的检测,并基于文字检测及识别算法实现对自然场景下道路两侧场景语义信息的检测与识别,让盲人能够及时获取自身周边的环境信息,让盲人出行更加安全、便利。完成的主要研究工作为:1.提出一种改进型的YOLOv3算法进行障碍物检测。首先采用Mobile Net V3网络替代YOLOv3的Darknet-53网络,并在网络后加入空间金字塔池化结构,减少了训练参数,提高了模型的准确率及检测速度;然后在计算边框回归损失函数时采用CIOU替代原网络的IOU,进一步提升模型的准确率;此外,增加模型的检测尺度,使其在进行障碍物目标检测时更加精细化,提升了对于小目标或有遮挡障碍物的检测精度。最后通过对比实验验证了改进型的YOLOv3算法相对于原YOLOv3网络的参数量及计算的复杂度大幅降低,同时也提高了模型对障碍物检测性能,并加强了对小目标障碍物体的检测能力,使模型能更好地移植到边缘计算设备上用于导盲系统中。2.为解决在自然场景下获取周围环境语义信息的问题,提出一套针对道路两侧自然场景的文字检测与识别的方案。本方案中共包含三个模块:文本检测、文本筛选和文本识别。在文本检测中,通过实验对比分析了Pixel Link算法的优越性,验证了Pixel Link算法能同时兼顾文本预测的检测速度和精确度,因而能够较为理想的移植到边缘计算设备上。在文本筛选流程中,采用预设的方案将已检测出的文本框进行排序筛选,并将筛选后的文本框送入到文字识别模型中。而在文字识别模块采用CRNN算法,该算法能够有效的检测并识别出文本框中对应的文字,可以较好的完成文字识别的任务。3.搭建了嵌入式硬件导盲系统,将优化后的导盲场景理解模型迁移到Jetson Xavier NX硬件平台,在真实环境下测试模型的鲁棒性。为避免模型检测速度不同造成的延迟卡顿,采用提取视频流关键图像帧的方式对视频进行提取,并对提取后的图像进行去雾处理,以提高模型在雨雾天气下的检测性能,测试结果表明模型能够在边缘计算设备上较好运行,满足盲人对于周边环境信息的及时获取,成功实现了智能导盲算法及硬件系统的整体功能。
其他文献
为了获得一株可高效降解呕吐毒素(DON)的德沃斯氏菌(Devosia sp.)D-8的最佳发酵培养基。采用单因素试验和部分因子试验确定了发酵培养基的主要组分及浓度范围,并根据其进行正交试验设计,以正交试验及结果作为数据样本建立BP神经网络模型,并通过遗传算法(Genetic algorithm,GA)对该模型进行优化并全局寻优。结果表明:确定了最佳培养基配比:糖蜜30 g/L,酵母浸粉20 g/L
期刊
由蛋白芯片技术发展而来的多肽芯片,正成为生物学和化学中高通量方法的有力工具。多肽芯片上高度集成上千成万的肽片段,具有高度的特异性,只需微量的样本即可快速获得各项生理学信息。多肽芯片已广泛应用于抗体表位筛选、蛋白质结构与功能研究、酶与底物相互作用等。同时,多肽芯片在新药开发、药物筛选、药物分析等方面具有重大的应用前景。
期刊
天然橡胶是工业、国防、医疗卫生等领域重要的生产材料。橡胶树(Hevea brasiliensis)原产于巴西,具有喜温怕寒等生态习性,是天然橡胶生产的唯一来源。尽管经过橡胶树的北移种植,但我国植胶区纬度偏高,种植环境和原生地的差异较大,寒害便成为天然橡胶生产的主要灾害之一,也是限制中国橡胶发展的主要因素。针对我国橡胶林寒害遥感监测存在的不足和天然橡胶生产中寒害监测的迫切需求,本文以中国的天然橡胶种
学位
在经历与主流文化的短暂蜜月后,"饭圈文化"的价值失衡问题因为一系列由明星失德事件所引发的"互撕"行为而再度被推上风口浪尖。群际威胁下的"饭圈"组织在价值观同化与过度组织化的过程中失去其作为趣缘群体的特质,而成为群体利益的"修罗场",这亦是其自身形象崩塌和为社会主流价值所诟病的内在原因。净化网络大环境、推动实现"饭圈"的娱乐教育功能以及加入多学科研究视角和价值引领等,是引导"饭圈文化"良性发展的重要
期刊
采用部分水解聚丙烯酰胺进行聚合物驱是应用最广泛的化学驱技术。为解决部分水解聚丙烯酰胺在高矿化度、高温水体内增黏效果差和难以注入低渗透率油藏的问题,聚合物驱中引入了带有亲油侧链且具有油水界面活性的改性聚丙烯酰胺代替普通部分水解聚丙烯酰胺,在改善高矿化度、高温和低渗透率油藏聚驱开发效果的同时,也减少了聚合物的用量及费用。注入油水界面活性聚合物的部分区块的采出液中O/W型原油乳状液稳定性高,造成采出水处
期刊
微塑料污染是一个日益严重的生态问题,不可避免地通过饮食摄入、空气吸入和皮肤接触的方式暴露于人体。本文概述了微塑料的特性、微塑料在人体中的暴露途径和微塑料对各系统产生的潜在影响,以期为后续微塑料在人体健康方面的研究提供参考。
期刊
报纸
[目的]探讨中药牡丹皮中丹皮酚的最佳提取工艺.[方法]采用乙醇回流法提取牡丹皮中丹皮酚并进行含量测定.[结果]乙醇回流法提取丹皮酚的最优提取条件为乙醇体积分数75%,提取温度80℃,提取时间2.0 h.[结论]在上述工艺下提取的丹皮酚含量最高,且操作简单,成本较低,适用于大规模提取.
期刊
目的 探析血清白细胞介素-10(IL-10)、甲胎蛋白(AFP)水平与肝癌患者临床病理特征的相关性。方法 选取2019年1月至2022年1月中国人民解放军联勤保障部队第九八八医院收治的80例肝癌患者作为研究对象,所有患者均接受肝癌根治术治疗,术后行组织病理学检查,记录患者临床病理特征;检查患者入院时血清IL-10、AFP水平,探析血清IL-10、AFP水平与肝癌患者临床病理特征的相关性。结果 80
期刊
为了从窄带干扰背景中有效提取局部放电信号,提出一种抑制周期性窄带干扰的共振稀疏分解方法。利用窄带干扰信号与局部放电信号品质因子的不同,在基于信号共振稀疏分解理论的基础上,实现窄带干扰和放电脉冲的有效分离。该方法能在有效抑制窄带干扰的同时,削弱随机干扰。仿真和实测信号的处理结果验证了该方法的可行性和有效性。
期刊