龙门吊的360°环视影像

来源 :科学与财富 | 被引量 : 0次 | 上传用户:xieyl2010
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
  摘 要:随着电子商務及基础建设的日益发展,商品运输、建材搬运的需求在不断增长,对于工程车辆的需求也在逐步增大。龙门吊是码头上常用的一种货物搬运工具,其载货量大,操作灵活,但在复杂的作业环境中,由于车身庞大,仅仅依靠操作人员肉眼观察很难确保车辆及操作人员的安全。360°环视影像技术是车辆辅助驾驶系统中的一部分,其主要采用六个摄像头采集实时景象,接着经过图像匹配技术与图像融合技术,拼接出车身周围的全景俯视图,用以消除驾驶者的视野盲区,保障了驾驶过程的安全性及可靠性。
  关键词:龙门吊;环视影像;辅助驾驶系统;图像匹配;图像融合;
  1引言
  龙门吊是一种码头上常用的工程车辆,主要用于集装箱、货物的搬运。在实际作业中,由于工作环境复杂,车身庞大,驾驶员在行驶或作业过程中只能依靠后视镜等设备肉眼观察,导致视觉盲区的存在,因此机械设备和操作人员的安全难以得到保障。由于龙门吊的自身体积和重量大,一旦发生事故,往往产生严重的后果,对周边车辆或是工作人员都具有一定的威胁,因此很多施工单位有明确的作业时间限制以及安全规范,但是还是有安全事故频频发生。据统计,中国每年发生的和机械设备有关的事故均超过10万起,死亡人数超过两万人,稳居世界第一。因此,为重型工程车辆提供一种可行、可靠的辅助驾驶系统,保障生命财产安全是一项重要的使命。
  本文基于全景视觉辅助影像系统,提出了龙门吊的360°环视影像技术,这项技术是工程车辆的辅助驾驶系统的一部分,其首先针龙门吊的实际参数,配备合适的摄像头,并寻找合理的位置安装摄像头;接着通过摄像头,进行龙门吊四周的实时图像采集,并将采集后的图像实时传送到处理器;然后,将采集的图像进行图像匹配、图像融合、图像拼接等处理;最后将处理后的360°环视影像显示在屏幕上。此项技术在图像的拼接以及实时呈现都取得了良好效果,且算法实时性强、可迁性强,能适用于其他工程车辆,能有效改善工程车量的安全性能,并为建设无人码头和无人驾驶系统做出铺垫。
  2整体方案及流程
  本设计在硬件上通过对龙门吊进行1:30的等比建模,并在龙门吊模型的前后横梁上均匀安防3个摄像头,共计六个摄像头,俯视拍摄出六幅不同区域的龙门吊周围的实景图,并将图像传送至处理机,获取图像处理后的360°环视影像,实时呈现在监控显示器中,供驾驶人员参考。
  在图像处理中,通过检测特征点、描述特征点、匹配特征点、寻找映射矩阵、仿射变换、图像融合步骤,实现针对龙门吊的360°环视影像技术。
  3 360°环视影像的图像匹配算法设计
  图像匹配是全景图像融合算法中较为关键的问题,图像匹配算法的优越性将会直接影响到后续图像融合的效果。图像匹配的定义是将对同一场景,在不同角度或是不同情况下拍摄的图像进行处理,寻找到特征匹配点,并将待拼接的图像变换到同一基准图像坐标下。
  在传统的环视影像系统中,由于所用的图像匹配算法,其复杂度高,时效性不良,所以在嵌入式系统中存在许多问题,难以达到对图像进行实时拼接的效果。传统的环视影像系统中,主要使用的图像处理的方法是标定两个点,通过点来寻找缝合线的,接着将输入的待拼接图像分割为梯形,最后沿着缝合线将图像拼接成一幅完整的融合图像。但这种方法存在着很大的弊端,即拼接缝较大,对拼接后的图像的美观及视觉感官有影像。本文根据实际工程特点,将SIFT算法应用在全景环视影像系统的图像匹配算法中,用以改善上述的时效性差、拼接缝大等问题。
  3.1图像匹配原理
  图像匹配被定义为通过一定的算法,在图像中检测特征点,并对特征点进行匹配与描述,接着在将图像中找到其相对应的特征点进行匹配,从而得到待拼接图像之间的位置关系。
  图像匹配的本质是利用图像的空间与图像的灰度信息,因此图像匹配的实质是两幅待测图像之间的双重映射。
  假设I1 (x,y) I2 (x,y),分别为图像I1,I2的灰度值,则I1 (x,y), I2 (x,y)可表示为以下映射关系:
  I1 (x,y)=g(f(I2 (x,y)) (4-1)
  其中,g表示图像灰度的变换,f表示图像空间坐标的变换。由上式可以得出,图像匹配的本质是找到最优的坐标变换f和灰度变换g,一般情况下,图像匹配的过程只需要考虑坐标的变换,因此公式(4-1)可以减缓为下列形式:
  I1 (x,y)=f(I2 (x,y) (4-2)
  图像的集合坐标变换可以理解为将待匹配的图像变换到参考图像的坐标系中,利用齐次坐标可以建立上述变换的关系表达式
  (4-3)
  3.2.SIFT匹配算法原理
  尺度不变特征转换(SIFT)是一种视觉算法,其算法的主要功能是图像的对局部特征进行描述。具体的描述的方式是通过在尺度空间中寻找极值点,接着提取极值点位置、尺度和旋转不变量。1999年British Columbia大学David G. Lowe教授对当时存在的基于不变量的特征提取方法做出总结,正式提出了此算法,并于2004年加以补充完善。该算法首先在待匹配图像中提取特征点,然后对特征点进行特征描述,最后比较两方特征点,找出匹配对,建立对应关系。
  综合以上,本设计在图像匹配算法中,首先通过SIFT算法,进行特征点的检测,对图相中的每一个特征点赋予位置、方向和尺度等信息,其中特征点就是图像上的拥有很明显特征的像素点,比如明暗交界处,物体的边缘等等。其次,为了将匹配图像之间的特征点联系起来,还要对特征点进行描述,算法中,上一步已经找到了特征点,但还不能确定两幅图像中的特征点是不是相同或者相似的,找到相同的特征点对图像拼接有很大的帮助,这时就需要描述特征点,每个特征点都有自己的特性,如果两幅图中的某两个特征点的描述符非常相似,那么就可以说这两个特征点是匹配的根据上一步提取到的特征点来提取特征向量。最后需要对经过描述后的特征点进行匹配,找到两幅图像之间相互匹配的特征点。
  4 360°环视影像的图像融合算法设计
  图像融合被广泛应用于图像处理,其定义是对多幅含有相同信息或互补信息的图像进行图像处理,使图像更符合人们的视觉习惯。在图像融合的应用方面,这项技术涉及多个方向、维度和级别的处理,可用性十分强,如医学扫描、智能识别、人工智能等。
  对于龙门吊的360°环视影像系统,其通过六个型号相同的设想有进行初步的图像采集,但由于摄像头之间仍存在细小的差异,加上拍摄画面的亮度等外界因素的不同,因此在采集的图像中,仍会存在亮度、色彩等。因此,对于已经完成图像匹配后的系统,仍需要采用一定的融合处理,以达到更精准、稳定的图像视觉效果。
  本设计针对实际问题,采用的是一种加权平均法的改进融合算法,这种融合方法是基于平均法融合算法的一种改。相比较于传统的均值融合算法,加权平均算法采用的是对两幅或多幅图像先赋予权值,再根据权重进行图像的融合及处理。该算法的融合原理可由下式表示:
  (4-1)
  对比与传统均值算法,在改进算法的重叠区域像素灰度值的计算加入了权值w1和w2,此处的w1和w2分别表示图1和图2在重叠区域灰度值的权值,且满足w1+w2=1,0  5仿真与分析
  根据上述理论知识与程序步骤,实际仿真步骤与结果如下所示:
  (1)分别通过六个摄像头对龙门吊模型周围的实时情况进行视频的采集,并将视频传送至处理器。采集结果如图6-1示:
  (2)将融合后的视频实时呈现在显示器中,供操作人员实时查看,融合后的结果如图6-3所示:
其他文献
摘 要:油气集输工作就是指将从油田中开采出来的天然气和石油进行收集、储存、加工以及处理的一系列的工艺的过程。因此油气集输主要有以下三个方面的工作:一是将从油田中开采出来的石油或是天然气等物质通过长输管道输送至油气处理站处,在油气处理站对这些物质进行分离、脱水的过程,经过这些过程处理后的石油才能够符合国家的标准;第二个任务是将已符合标准的原油运送至油田的原油库处,在油田的原油库出对已经分离出来的天然
期刊
乘坐航班时,空调必不可少,然而在空调提供舒适性的同时,可能会带来异常的刺激性气味,这就是液压油雾进入到了机舱内。下面以737NG机型为例,对这一现象进行分析。在737NG飞机机队中多次出现了用空调时液压油进入驾驶舱和客舱的事件,液压油本身有毒有刺激性,其油雾对机上人员的健康造成严重的危害,严重影响了飞行安全和航班运行。  如何通过有效提高我们日常对液压系统的维护工作,从而杜绝客舱和驾驶舱舱出现液压
期刊
摘 要:随着经济的迅速发展,各行各业都在寻求符合自身发展的转型升级,当前所说的经济新常态包含宏观、微观以及两者之间的关系等三个方面的意义,了解、掌握经济新常态是目前中国企业转型升级和战略调整的新要求,对企业转型升级的结构调整也有着重要的意义。本文分析了当前我国经济新常态下企业发展形势,探索了企业战略发展的取向以及企业应对经济新常态下的措施,以促进我国企业转型升级的步伐。  关键词:经济新常态;转型
期刊
摘 要:目前油田开发已进入后期,油层水淹状况复杂、井况恶化、注采问题日益突出,开采难度加大。通过强化注水管理,完善,实现减缓老油田产量递减,控制含水上升的目的。  关键词:注水管理;工艺技术;细分注水;增产增注  一、前言  注水是保持油层压力,实现油田高产稳产和改善油田开发效果的有效方法之一,用注水(或注气)的方法弥补采油的亏空体积,补充地层能量进行采油,采收率一般在30%-50%。油田要及时注
期刊
摘 要:当前,在欧元区和日本经济持续好转的情况,全球经济周期同步增强,逐步引起货币政策趋同。在这样的背景下,当前各大经济体纷纷开始采取货币政策正常化措施,全球范围内的流动性将面临拐点。而对于新兴经济体来说,由于其经济结构已经进行了优化调整,因此这种全球范围内的流行性收缩对其影响不大。  关键词:全球经济;货币政策;收紧  一、全球经济同步性增强  据国际国币基金组织(International M
期刊
摘 要:针对现有单一摄像头的行车记录仪水平视角普遍小于80°状况,本文介绍了一种视频拼接的视频辅助驾驶系统,该系统利用三个摄像头分别实时采集车辆周边信息,然后在计算机平台上,利用SURF算法,将同一时刻三个摄像头采集的不同角度的视频帧图像中,具有相同特征值信息的区域,拼接成一幅具有180°视角的视频图像,然后按照视频信号的处理方式,整合成视频流,显示在指定的显示屏上。以此帮助汽车驾驶员更好的了解汽
期刊
摘 要:电力工程是一项规模大、费用高的工程项目,由于电力工程涉及内容广泛,因此,影响工程造价的因素也比较多,对于电力工程的造价控制,必须实现工程建设的全过程控制,从工程的设计阶段到施工阶段,都进行造价管理,逐步形成全方位的造价控制,从而优化电力工程的资源配置,降低工程的造价,提升电力企业的竞争力。  关键词:电力施工企业;工程造价管理;问题;对策  1 加强电力工程造价管理的必要性  电力工程由于
期刊
摘 要:本文通过对隐身战斗机的隐身机理(包括雷达隐身和红外隐身)进行分析,并在此基础上对隐身目标进行三维建模以及电磁散射特性仿真分析,获取典型隐身目标的全向RCS特性,为武器系统的设计提供支撑。  关键词:典型目标 隐身特性 仿真评估  1引言  F-22和F-35是目前全球进入服役的第四代、多功能超声速隐身战斗机,代表了当今世界战斗机的最高水平,具备隐身、超声速巡航、非常规机动等诸多全新技术性能
期刊
摘 要:现如今中国的经济在不断的发展,社会也趨于稳定,国民经济是支撑着这一现象的主要力量,所以占据着主要力量的中小企业,有着举足轻重的作用。同时,会计制度作为企业对外提供会计报表的规则,也在会计准则国际趋同趋势的影响下得到了进一步飞速的发展和改进。我国在全世界的地位颇为重要,是全球最大的发展中国家,所以我国中小企业能否健康成长,直接关系到我国国民经济发展的前景。同时也是重要的推动力。本文将就我国中
期刊
摘 要:本文基于医用半导体激光设备与多模光纤耦合系统,分析了造成了多模光纤出射光斑的不均匀原因。通过软件仿真和实际实验,研究解决了多模光纤出射光斑的不均匀性问题。这主要包括在多模光纤上添加使光纤传播路径发生改变的结构件及对光纤末端进行处理。与未添加匀化结构件和未进行端面处理的多模光纤光斑进行对比,充分证明加入结构件和对光纤端面的处理并不会造成多模光纤激光功率传输的太大改变。  关键词:半导体激光;
期刊