面向智能挖掘机的视觉感知算法设计与实现

来源 :哈尔滨工业大学 | 被引量 : 0次 | 上传用户:k3392301
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
作为一种应用广泛的工程机械,挖掘机在资源开采、建设施工、抢险救灾等领域发挥着极其重要的作用。由于施工环境恶劣、劳动力逐渐短缺等问题,挖掘机智能化和无人化成为其未来发展的主要趋势。环境感知是挖掘机智能化的重要一环,对自身和周围环境正确建模后,挖掘机才可能完成如导航、作业等任务。由于视觉感知方案具有信息丰富、算法成熟且成本较低等特点,本文以视觉为载体对定位与场景建图两大主要环境感知任务展开研究,旨在解决挖掘机在复杂作业场景下的定位与建图问题。主要研究内容包括以下几个方面:首先,针对传统视觉SLAM(同步定位与建图)算法在挖掘机施工作业等具有动态目标的场景下无法有效定位的问题,结合挖掘机运动特点选择YOLOV5作为目标检测网络模型用以识别场景中的潜在动态目标,同时加入基于坐标关联的多目标跟踪算法在连续时间上锁定目标,有助于后续目标动静态的鲁棒判断。其次,以场景目标检测结果为切入点,利用背景信息计算帧间的初始位姿,并结合深度约束和Mask R-CNN网络模型获取的语义约束,完成各个目标的动静态判断以及目标框内动静特征点的精细筛选,在ORB-SLAM2定位框架的基础上实现了动态场景下的精确位姿估计。在公共数据集TUM和KITTI上的实验表明,在高动态场景下,提出的算法在绝对轨迹误差(ATE)的相关指标与ORB-SLAM2相比基本减少了90%以上,与现有先进的动态SLAM系统Dyna SLAM、DS-SLAM相比同样占优,证明本文算法的有效性。然后,针对挖掘机在场景中自主导航的需求,设计了一种去除动态物体干扰的稠密地图构建算法。场景稠密信息基于双目图像采用神经网络模型PSM-Net生成,运动目标则通过定位算法的动静态判断结果以及语义掩膜实现去除。结合相机估算位姿以及视场重合度选择建图关键帧,实现点云地图的拼接。通过将点云地图转化为八叉树地图,完成适用于导航地图的构建。最后,通过仿真平台模拟实际挖掘作业场景对算法进行验证。根据挖掘机作业特点和算法需求搭建仿真场景并采集数据,基于仿真数据,验证了挖掘机语义分割、动态场景定位精度以及场景地图构建的效果;为算法的实际应用奠定了基础。
其他文献
随着汽车的普及,交通安全问题逐年凸显,人们对汽车主动安全技术也越发重视。在汽车智能化背景下,紧急避障系统便应运而生。目前,紧急避障策略以制动避障和转向避障为主。制动避障策略以充分利用路面附着为目标,控制轮胎达到最佳滑移率以提高避障性能。转向避障策略则通过控制轮胎转角控制汽车的侧向运动,它能够应对更小碰撞时间的避障场景。然而两种避障策略均存在一定的局限性:制动避障受限于最小制动距离,转向避障对车速削
学位
激光雷达的点云数据与相机的图像数据是自动驾驶场景中的主要数据,是自动驾驶感知任务的重要组成部分,将这些数据进行有效的处理与利用对感知算法的准确性与安全性有重要意义。在三维目标检测任务中,以纯激光点云作为输入数据的算法得到了较好的发展。为了弥补点云稀疏性的短板,二维图像数据被引入三维目标检测任务中与激光点云融合。融合方法受到了越来越多的关注,其研究重点在于如何将点云数据与图像数据进行有效的融合。本文
学位
我国所产原油多为三高原油,输送过程中常采用提温方式改善原油流动性,故热水伴热集输方式在油田中广泛运用。随着老区油田开采进入中后期,其伴热系统常发生管道泄漏、腐蚀破损等现象,从而导致伴热系统停输与维修。而停输后由于管道内外温差较大等原因导致主管道内原油快速降温,当原油温度低于析蜡点温度时,析出的石蜡晶体沉积在管道内壁,导致再启动失效,因此精确地掌握停输伴热系统的热力变化、合理控制伴热介质温度以及制定
学位
目的 探讨miR-579-3p靶向角鲨烯单加氧酶(SQLE)对宫颈癌HeLa细胞铁死亡的影响,及其对宫颈癌HeLa细胞增殖、侵袭的作用机制。方法 将细胞分为H8组(正常培养H8细胞)、HeLa组(正常培养HeLa细胞)、HeLa+SQLE组(HeLa细胞过表达SQLE)和HeLa-SQLE+mimic-miR-579-3p组(过表达SQLE HeLa细胞转染mimic-miR-579-3p)。用细
期刊
催收非法债务罪的法益难以单纯用一个要素,如财产权、人身权、社会秩序等充分概括,因而是多元的。通过对本罪犯罪对象、行为方式的考察,以及对本罪的刑法体系定位和立法目的分析,综合法益说应当得到认可。在此基础上,催收非法债务罪法益总体可被分为权利法益和秩序法益两部分。本罪权利法益侧重于对人身权的维护,而非债务人财产权。权利法益除了自身价值,还具有表征秩序法益的功能。本罪秩序法益包括了特定范围的社会公共秩序
期刊
<正>产品召回是指生产商、出口商、经销商将已经送到批发商、零售商或最终用户手上的产品无偿收回。被召回的产品往往存在质量缺陷。产品召回制度和一般的三包产品退换货是两个概念。三包产品退货换货主要是针对个体消费者,以解决产品本身存在的随机质量问题;而产品召回制度则是针对由于厂家原因造成的批量性问题而采取的处理办法。其中,对于质量缺陷的认定和厂家责任的认定是最关键的核心。
期刊
考虑到微创手术中创口较小带来的视野狭窄,传统对外科医生手术培训的方法过于局限等缺点,医生在手术中会降低对手术部位的判断能力,尤其对于精细的肝脏外科微创手术,严重时可能会带来安全隐患。相对于传统的微创手术,结合AR技术开发的微创手术导航系统能有效地解决其视野狭窄的问题,给医生在手术时提供充分的视觉信息。与其他微创手术导航系统所不同,肝脏等组织会随着手术的过程发生形变,仅使用术前创建的虚拟模型并不能达
学位
合理开发与利用地热能,能够有效推动绿色低碳的开展,改善环境的质量,实现多种能源的互补及提高资源的利用效率等。一般地热能从地下到地上的采集和输送由地埋管来实现,管外的回填结构和土壤都存在着散热损失,对地热能的有效利用影响较大,目前对此的研究还存在不足,需要建立更加精准的描述分析模型。本文针对地埋管外部多孔结构,给出了一种多孔介质表征单元体(Representαtive Elementαry Volu
学位
冷凝现象不仅存在于自然界中,还广泛地存在于海水淡化,热力电厂、汽车换热,石油化工等领域,因此提高液滴的冷凝传热效率一直是工程研究的重要课题之一。滴状冷凝相对于膜状冷凝除了具有更高的传热效率外,还容易在固体冷凝表面上形成易于观察的小液滴,方便进行研究液滴的形核,生长及合并弹跳的整个过程。已有的研究结果表明固体表面上的微结构可以有效地提高液滴的滴状冷凝传热效率,但对不同的表面微形貌和润湿性对液滴冷凝过
学位
报纸