基于胶囊网络的物体部件分割与姿态估计

来源 :西安工业大学 | 被引量 : 0次 | 上传用户:yuanpeihai
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
人类的视觉能够捕捉到视角内的所有部件,并且可以通过对部件的排列组合来感知物体,这种能力被称为物体感知能力。物体感知能力是人类与世界交互的一项基本能力,而让计算机能够像人脑一样地感知物体是计算机领域的一项难点。虽然传统的神经网络在计算机各个图像处理领域都有着不错的表现,但传统的神经网络对物体进行感知时,只考虑了物体是否存在,而忽略了对物体组成及其结构的理解。胶囊网络的提出被认为是可以和人脑一样地感知物体,通过部分-整体的层次关系来理解图像,将图像解析为对象、部分和关系的层次结构。在具体的计算机视觉任务,如目标检测、目标定位中,对象是场景的部分,为了让计算机更好地理解场景、表达对象,需要明确地使用部件来推理对象,将部件与对象的层次关系结构表述出来。但目前胶囊网络的应用是将不明确的部分多次迭代路由来表达对象,也没有表示出部分与整体之间的层级关系;基于此,本文对胶囊网络的部分-整体的层次结构进行深入研究,提出以下两种基于胶囊网络的模型:1.提出一种基于胶囊网络的物体部件分割模型OPCapsNet,将对象分解为部件,为计算机视觉任务提供更好的中间表示。首次提出将胶囊网络应用于物体部件分割,OPCapsNet包含两个模块,部件胶囊自编码器与对象胶囊自编码器,网络既学习了物体各个部件在不同空间域的特征,又学习了部件与物体之间的空间位置关系,基于学习到的特征对不同视角的物体部件进行分割。实验验证了OPCapsNet可以明确实现从部件推理到对象,OPCapsNet不论是对刚性物体(汽车和飞机)还是非刚性物体(人体),分割精度都超越了传统的部件分割方法,对特征不明显的部件分割精度比DeepLabv3提高了6.43%,对小部件的分割精度比DeepLabv3提高了5.83%。证明了OPCapsNet在分割特征不明显的部件和小部件时的有效性。2.提出一种基于胶囊网络的人体姿态估计模型OP-CPN,可以在复杂场景,尤其是人体部位被遮挡的环境中更准确地进行人体姿态估计。将OPCapsNet的思想融入人体姿态估计网络CPN中,使用OP胶囊编码器提取人体部件之间的空间关系信息指导人体各关键点的预测。为了提取到更丰富的特征,在特征提取网络FPN中增加注意力残差模块。在实验中,印证了改进的FPN模块和胶囊模块的效果,OP-CPN在人体姿态估计中对关键点的位置估计中比原始CPN提高了16.7%,比HRNet提高了3.2%,并且在遮挡的人体姿态估计实验中OP-CPN的有效性与人体的遮挡程度成正比,在遮挡程度为70%时的姿态估计精度比原始CPN提高了9.5%,比HRNet提高了6.1%。
其他文献
作为光伏发电系统的核心单元,光伏组件的安装质量能从根本上决定光伏电站是否能够长期工作,在组件生产过程中的质量把控,对光伏行业的整体发展也有着深远影响。一旦在施工过程中没有控制好组件的安装质量,就会影响整个工程的施工效果,不利于光伏电站的稳定运行。因此,文章着重研究光伏组件安装施工质量控制的重要性,总结光伏组件安装施工质量控制的具体措施。
期刊
近年来,我国光伏电站建设的规模日益扩大,但电站施工阶段的质量问题屡屡爆发,给国家带来了巨大的经济损失。因此,分析光伏电站施工阶段质量问题及对策具有十分重要的现实意义。文章分析了光伏电站施工阶段的质量问题,从人、机械、物料、方法和环境五个方面对质量问题进行分类,采用层次分析法对质量问题进行了定量分析,对问题有针对性地提出对策,给出了光伏电站施工阶段质量管控措施。
期刊
针对复杂多变的光伏发电项目施工风险评估问题,利用Leaky Noisy-or Gate模型整合历史经验和专家知识来确定贝叶斯网络参数并建立光伏施工风险的贝叶斯网络模型,同时采用Netica仿真分析,对施工风险进行有效预测并诊断识别出关键性风险和敏感性风险,以便管理者精准施策、管控风险。为验证该方法的有效性,以Z项目为例进行建模仿真。结果表明,其施工风险等级为中等,与实际相符。
期刊
人的眼睛的注视方向便是视线,视线能够体现人的注意力。当前在计算机视觉研究中,视线估计扮演着十分重要的角色,在许多领域比如人机交互领域、心理学领域等得到了充分运用。如何适应不同的头部姿态,如何提高视线的精确度,是目前视线估计的难点。本文在分析国内外研究现状及其相关算法的基础上,提出一种基于三目八光源系统,利用深度卷积神经网络将头眼运动数据融合起来的新方法。主要做了以下几方面的工作:1)视线参数特征提
学位
豆科植物在固氮和生长发育过程中都需要磷的参与,因此豆科植物对磷的需求较高。可耕种土壤中有效磷的缺乏,限制了大豆的共生固氮。本研究分离了大豆根际及根瘤表面的解磷菌,将其与根瘤菌分别单、双接种于紫云英和大豆,并进行了盆栽及大田试验。此外,对大豆中黄13接种快慢生型大豆根瘤菌的根际微生物组进行了高通量测序,获得以下结果:1从大豆根际获得了几株具有解磷能力的细菌PSB-1、PSB-2、JING-9、HLJ
学位
现代工业场景中的数字化与智能化发展十分迅猛,由于各类基于人工智能的服务应用在工业场景中落地,对工业系统计算能力提出了挑战。为了应对逐年剧增的算力需求以及缓解云端的负载压力,移动边缘计算技术被广泛运用到工业计算场景中,为工业设备提供高效率,高性能计算迁移服务。本文以工业智能巡检为背景,结合工业智能巡检的特点,设计了巡检机器人的计算迁移算法。在考虑了巡检机器人的移动性的情况下,为其找出最优的计算迁移策
学位
水稻作为全球过半人口的主粮,稻米的营养品质尤为重要。在稻米精加工过程中,通常会丢失富含营养物质的米糠层(包括果皮、种皮和糊粉层),研究表明糙米中米糠层所含营养物质高于精米。黑米作为一种特殊的水稻品种,由于在米糠层特异性积累花青素,其丰富的营养价值受到广大消费者的青睐。黑米种皮中富含的花青素属于类黄酮类化合物,是植物次生代谢产物的一种,对人体具有保健功效。因此充分剖析黑米中花青素的合成与调控机制具有
学位
在农业生产和科学研究中,不同大豆品种和不同的大豆根瘤菌匹配,其共生结瘤和固氮的效率和表型是不一样的,甚至差别很大。这些共生表型受到宿主植物和根瘤菌双方一系列基因的调控。从宿主植物和微生物两方面研究共生固氮相关基因,充分发掘共生固氮潜力,既有明显经济意义,又有重要科学价值。本文从上述两个方面开展研究:1)基于分别接种大豆快生型和慢生型根瘤菌,测定获得了用于全基因关联分析(Genome Wide As
学位
现阶段,在社会发展与经济发展的背景下,我国在产业发展方面进行了巨大的调整,更加提倡新能源的运用,这也促进了我国风力发电、光伏发电工程的进一步发展。发电工程的施工建设需要及时的辨识危险源并针对性的进行分析,从而制定安全管理方案,为工程建设规避安全隐患和风险。鉴于此情况,本文将围绕光伏电站工程施工危险源辨识及施工安全管理要点进行研究,以此为关注这一方面的人员提供借鉴。
期刊
生物特征识别技术拥有方法新颖、移植性强、辨识度高、容错率低、使用便捷等众多优点,因此被广泛研究。但是,随着科技快速发展以及社会环境的复杂化。单模态生物特征识别容易伪造、识别精度局限性、约束条件广泛等众多不利因素,导致识别系统安全性能低下,难以满足高性能需求,时刻威胁着国家和人民财产安全。研究发现,通过将多种模态生物特征结合起来进行识别,可以获得比单模态识别更好的效果。因此基于多模态生物特征识别技术
学位