基于数据融合的果园三维点云语义地图构建

来源 :安徽农业大学 | 被引量 : 0次 | 上传用户:xin__yonghu
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
农业机器人是一种新型智能农业机械,其在耕作、植保、收获和除草等作业领域具有广泛的应用前景。我国是水果种植大国,为了满足现代果园的智能化管理需求,果园机器人及其相关关键技术有较强的应用价值。三维点云语义地图是提高果园机器人环境感知与场景理解能力的一种有力措施,本课题以樱桃园为试验对象,提出一种三维点云语义地图的构建方法。该方法采用图像检测结果与点云数据融合的方式,为点云标注语义信息,在获取关键帧信息的基础上拼接已经完成语义标注的点云数据,构建出三维点云语义地图。为验证上述方法,本课题在传感器联合标定、树干检测和点云语义地图构建等方面开展研究。主要内容与结论如下:(1)传感器联合标定。为了获取相机和激光雷达两个传感器之间的空间映射关系,开展了传感器联合标定试验,使用Pn P算法解算出传感器的空间映射关系。传感器空间映射关系是融合图像检测结果和点云数据,完成点云语义标注的前提条件。(2)树干检测。为了检测樱桃树干,采用并对比了几种深度学习目标检测方法,得到了树干检测的最优模型。采集并选取了2000张图片,构建了樱桃园场景图像数据集。选用Yolov3作为目标检测算法检测樱桃树的树干区域,模型训练后,其准确率P、召回率R和平均精确度AP分别为93.44%、94.61%和93.79%。上述三项性能指标均优于Faster R-CNN方法与SSD方法。(3)点云语义地图的构建与评价。点云语义地图的构建需要解决两个关键问题:点云语义信息标注和点云语义地图的拼接。点云语义信息标注是基于相机和激光雷达的空间映射关系,融合图像检测结果和点云数据,对三维点云数据赋予语义信息;点云语义地图的拼接是在获取点云地图关键帧信息(基于Lego-Loam算法的中间结果)的基础上,对赋予语义信息的关键帧点云数据进一步拼接成三维点云语义地图。针对试验场景,本文设计了点云语义地图的精度评价方法与指标,定量评价了点云拼接精度和点云语义标注精度这两项关键性能。其中,点云拼接精度的两个评价指标,距离绝对误差和角度绝对误差平均值分别为0.15 m和2.53°;点云语义标注精度的三个评价指标,平移误差、旋转误差和映射误差平均值分别为0.58 cm、0.89°和0.42 pixel。本课题构建的三维点云语义地图既包含场景的空间位置信息,也包含场景中典型目标的语义信息。有望为果园机器人的自动导航控制、精准对靶施药等典型任务提供关键信息,提高了果园机器人的环境感知与理解能力。
其他文献
风能作为一种可再生的清洁能源之一,已经得到世界上许多国家和地区的广泛应用。风电叶片是把风能转化为电能的主要装置,而风电叶片所处的环境一般都较为恶劣,其表面可能会出现砂眼、划痕、裂纹等缺陷损伤,随着服役时间的增加,这些损伤会严重影响到风电叶片的效率和安全性。目前对风电叶片检测方法大多是通过人工采用望远镜、蜘蛛人目测等方式,这些方式存在检测效率低、安全性差、停机时间长等缺点。因此,本文结合无人机的特点
学位
幼儿园日常教学活动的开展需要精心预设,才能达到灵动生成的效果。因此,在对教学活动预设之前,就要理顺预设与生成的关系,精细化地将生成中可能会出现的问题、情况都预设出来,并制定科学的预案,使得整个幼儿园教学活动的生成更加顺其自然。因此,本文首先对幼儿园教学活动的预设与生成的关系进行了梳理,以“培养幼儿艺术素养,彰显幼儿艺体活力”为主题的幼儿园教学活动为例,采取理论与实践的方式,对该活动的预设与生成进行
期刊
本文为了适应油茶果的大规模采摘,提高油茶果的采摘效率,通过查阅国内外相关文献、对油茶树生物力学特性以及树冠振动采摘机理的研究,设计了一种高效低损的树冠振动式油茶果采摘装置,完成的主要研究工作和成果总结如下:(1)通过树冠形态特性、二级主枝的生长特性以及油茶果实和花苞力学特性研究,得出树高、树冠直径、果实的质量和结合力、花苞的质量和结合力,二级主枝与主干的夹角等;通过对树冠振动采摘机理研究,得出振动
学位
随着油茶产业快速发展,油茶果机械化采摘过程中实现较高采摘率的同时保证树体不受到损害具有重要的意义。本文通过对树枝上能量传递规律和应变响应以及果实脱落情况进行研究和分析,在达到较高采摘率的同时保证树枝在可承受范围内,得到了最佳作业参数,为油茶果冠层振动采收参数提供一定的参考,主要研究成果有如下几点:(1)通过前期调研测量了油茶果实与树体的生物参数与固有特性。对不同品种油茶果的结合力进行测量发现果实的
学位
拖拉机轮胎作为拖拉机直接与土壤接触部件,承担了拖拉机的负载、驱动力及转向力并传递给土壤,拖拉机轮胎与土壤的相互作用直接影响拖拉机的牵引通过性。因此,展开对轮胎与土壤间的相互作用分析对研究拖拉机的牵引性能至关重要。本文以大功率轮式拖拉机11.2-24 8PR轮胎为研究对象,对轮胎与土壤接触时的稳态滚动过程进行仿真,并设计搭建土槽试验台进行轮胎牵引性能试验,以轮胎牵引力及轮胎沉陷量为评价指标,对不同路
学位
机采茶原料中存在老嫩不均的单片鲜叶,这些鲜叶往往不经分级就直接加工成大宗茶,使得嫩度高的鲜叶错失了加工成优质瓜片茶的机会,造成机采茶经济效益未得到充分发挥。针对上述存在的问题,本文采用近红外光谱和机器学习技术对不同嫩度等级的单片鲜叶进行分级,其中包括对茶鲜叶样本的等级标定、光谱数据采集、预处理及特征提取并建立茶鲜叶分级模型等工作,同时设计静态、动态与适用性研究试验对研究的分级方法进行验证。本文的主
学位
主题活动是幼儿园重要课程形式之一。在设计与实施幼儿园主题活动中,内容的预设与生成日益引起关注。文章聚焦儿童视角,以重阳节“我给爷爷奶奶拍张照”主题活动为例,阐释了幼儿园主题活动中预设与生成相互交融的三点思考,即摸清已有经验,探寻预设与生成的出发点;围绕经验提升,关注预设与生成的交汇点;提炼经验发展线,积淀预设与生成的着力点,从而使主题活动的开展过程成为幼儿主动学习、主动发展的过程。
期刊
在《幼儿园教育指导纲要(试行)》中指出,幼儿园要尊重幼儿身心发展的规律和学习特点,提供自由活动的机会,支持幼儿自主地选择、计划活动。这就需要教师重构师幼关系,既要尊重幼儿的想法、个性,帮助幼儿将游戏创意落到实处,也要在自主游戏活动中发挥良好的教师指导作用,进一步提高幼儿的思维能力、动手实践能力、创新能力等,以便切实优化幼儿的素质成长。本文将以幼儿园自主游戏活动为例,阐述在前期准备阶段做出科学预设,
期刊
当前,随着全球汽车保有量的大幅增加导致能源消耗的问题日益加剧,汽车尾气排放所导致空气污染问题也随之严重,因此,纯电动汽车的开发与利用逐渐成为研究热点。为了充分发挥分布式驱动电动汽车四轮动力独立可控且控制精度高的优势,提高车辆的行驶稳定性,本文根据分布式驱动电动汽车独特的机械结构与驱动特点,基于直接横摆力矩控制技术,提出一种分层结构的横摆稳定性控制策略,对电机转矩进行合理分配。主要研究内容如下:首先
学位
拖拉机行驶道路工况复杂,特别是对大功率拖拉机来说,噪声问题相比较其他车辆更加明显。研究拖拉机的声品质和噪声源特性,不仅有助于提高驾驶员的乘坐舒适体验,对提高我国拖拉机的国际竞争力也有十分重要的意义。本文以路通某型大功率拖拉机为研究对象,对拖拉机常用工况的噪声进行了主客观评价试验,以此建立了拖拉机声品质预测模型,通过独立成分分析的方法识别和分离了拖拉机的主要噪声源,以声品质值和噪声源频域特性为基础,
学位