【摘 要】
:
随着中国室内装修装饰行业市场规模呈现日益增长的趋势与计算机视觉技术的发展,越来越多的室内装饰企业结合深度学习技术进行室内环境辅助设计。基于深度学习技术的室内装修设计方案自动生成、软硬装自动搭配与三维室内场景重建等任务的关键在于获取精准的语义标签作为基础数据支持。然而,室内场景存在大量家具产生空间遮挡,室内场景照明不均衡,不同语义区域间纹理相似、边缘难以识别等问题,难以精准预测语义标签。为此,我们通
论文部分内容阅读
随着中国室内装修装饰行业市场规模呈现日益增长的趋势与计算机视觉技术的发展,越来越多的室内装饰企业结合深度学习技术进行室内环境辅助设计。基于深度学习技术的室内装修设计方案自动生成、软硬装自动搭配与三维室内场景重建等任务的关键在于获取精准的语义标签作为基础数据支持。然而,室内场景存在大量家具产生空间遮挡,室内场景照明不均衡,不同语义区域间纹理相似、边缘难以识别等问题,难以精准预测语义标签。为此,我们通过融合RGB图像中的语义信息与深度图像中的空间信息,减少由照明与阴影分布不均和遮挡所产生的干扰,进而提升预测室内场景语义标签的准确率。本文重点研究室内复杂场景的RGB-D语义分割技术与应用实践,主要研究成果与创新如下:(1)提出了一种融合深度信息的交叉注意力语义分割模型。针对室内场景存在大量家具产生空间遮挡以及室内场景照明不均衡问题,通过特征融合将Depth分支所提取的深度特征融合到RGB分支中,并将融合后的特征输入重复交叉注意力模块,进一步结合深度空间特征以提升像素级语义分割预测精度。同时,基于语义分割模型开发了三维室内复杂场景涂装系统。实验结果显示,相比于基线模型,本文所提出的融合深度的交叉注意力语义分割算法,在本章实验设置和实验数据集的训练与测试结果中,在基于NYU-Dv2的实验数据集上语义分割结果mIoU指标提升4.59%,在基于SUN-RGBD的实验数据集上mIoU指标提升2.53%。(2)提出了一种融合深度信息的轻量化实时语义分割模型。针对模型参数数据量大难以在移动端部署,计算复杂度高、实时性低的问题,通过轻量化语义分割模型提取Depth分支的深度特征并融合到RGB分支中,进一步结合深度空间特征以提升实时语义分割预测精度。同时,基于实时语义分割模型开发了室内复杂场景实时涂装系统。实验结果显示,本文所提出的融合深度的轻量化实时语义分割算法,在提升语义分割精度的同时保持了实时性要求。(3)提出了两种引入互补注意力机制的轻量化语义分割模型。针对室内复杂场景中RGB和深度图像特征分布存在显著差异性,并且难以有效进行特征结合的问题,通过互补注意力机制赋予RGB-D输入图像中不同通道的特征以不同的权重,有选择性地从网络模型中的RGB与深度分支中提取特征,使网络模型对信息含量更高的特征更加敏感。实验结果显示,相比于基线模型,本文所提出的引入互补注意力机制的轻量分割模型最好的分割结果,在基于NYU-Dv2的实验数据集上mIoU指标提升了0.9%,在基于SUN-RGBD的实验数据集上mIoU指标提升0.78%。证明了互补注意力机制的有效性。
其他文献
几个世纪以来,交通运输是国民经济的晴雨表。在大型国际贸易和经济项目的框架内,运输综合体在世纪之交继续显示其基本作用和高度重要性。在社会改革和经济转型过程中,运输的重要性尤其得到强调。“一带一路”(One Belt One Road,OBOR)是一条陆路基础设施走廊,位于连接中国、中亚、西亚、中东和欧洲的古老商队路线上,其最终目标是通过基础设施建设,扩大贸易和文化交流,将参与该项目的所有国家和地区整
可持续发展已成为人类社会发展的重要议程,但碳排放导致的全球变暖正阻碍着社会的可持续发展进程,中国作为最大的发展中国家积极履行节能减排责任,并在十四五规划中也提出了2030年实现碳达峰,2060年实现碳中和的愿景,节能减排的压力日益剧增。随着城镇化进程的不断发展,一方面民用建筑运行能耗已占全社会能耗的20%,能耗量巨大,另一方面建筑领域的减排成本较低,减排潜力较大,已成为节能减排的重要领域,因此如何
目前,在工程结构抗风设计中,仅考虑了风荷载作用下结构的弹性响应。在遭遇罕遇强风时,结构通常会进入弹塑性阶段甚至倒塌。但是目前结构的抗风设计未考虑罕遇强风下弹塑性变形对结构安全的影响。由于风荷载为随机荷载,需从概率的角度评估结构风致弹塑性变形,若直接对结构进行多样本风荷载下的非线性动力弹塑性分析,则耗时严重,因此提出风致弹塑性响应的概率分布简化计算方法具有重要意义,然而目前相关研究工作较为匮乏。历史
电动汽车因其环保、稳定、智能化在近年来呈崛起之势,但其能量补充方式和效率略显差强人意。插线充电存在着低效、触电风险等不利因素,因此将无线充电技术应用于电动汽车上成为了补齐短板的一种可能。本文以电动汽车场景下的中大功率无线充电系统为研究对象,建立多物理场耦合仿真模型,对其工作状态下的电磁分布特点与电磁屏蔽技术进行了研究,并且利用正交优化的方法实现了对此系统兼顾传输效率与屏蔽效果的优化设计。本文首先综
“对抗样本”是近几年出现在深度学习领域的新兴词汇,它指的是在数据集中通过故意添加细微的干扰所形成的输入样本,导致目标模型以高置信度给出一个错误的输出。研究对抗样本攻击方法对于认知深度神经网络缺陷具有重要理论和应用价值,并吸引了学术界的广泛关注。由于现有的大多数对抗攻击方法都是通过修改二维图像空间的部分像素实现攻击,其不能有效抵抗现实世界物体的3D物理特性(如旋转、平移和光照变化等),从而造成攻击失
由于高温超导带材的各向异性,其易受到垂直于带材表面磁场的影响。由于超导绕组端部磁场最大,因此对超导变压器进行端部磁场优化,降低带材表面垂直场,有利于提升超导绕组的电磁性能。国内对于采用二代超导带材超导变压器端部磁场的优化研究较少,本文对超导变压器的优化设计具有一定的借鉴意义。依托于实验室6.6 MVA高速列车用超导牵引变压器项目,等比例缩小研制了一台容量为5 kVA的超导变压器,为项目提供支撑。本
近几年,随着卫星通信技术的高速发展,卫星通信在抢险救灾、国防安全、军事战役等领域发挥了不可替代的作用。作为夺取未来空间信息的关键要素,卫星通信技术成为世界各国着力研究的热门领域。卫星根据轨道高度不同分为地球同步轨道卫星和非地球同步轨道卫星两类。地球同步轨道卫星具有轨位资源匮乏、端到端传输时延大的缺陷,而非地球同步轨道卫星中的低轨卫星与其相比,具备传输时延短、路径损耗小、覆盖范围广的优势,成为近几年
伴随着现代生活和社会生产的不断发展,人们对于电能质量的要求也不断提高。电力电子变换器正是顺应时代需求而生的,既能够实现电力系统的环境维护,也能够高效合理的利用电力能源。其中PWM整流器因为具有可以在单位功率因数下运行、支持能量双向流动等优点,广泛应用在电动汽车充电、可再生能源并网发电等领域。本文选择的研究对象是具有谐波补偿功能的单相PWM整流器,对单相PWM整流器的控制方式、直流侧二倍频波动抑制、
伴随着信息革命所带来的技术变革,人类社会所产生的信息规模正经历着爆炸式的增长和传播。然而,面对海量信息的涌入,互联网中的高质量信息被淹没在了信息洪流当中,人们越来越难以与外部世界进行有效的信息交换。因此,如何从海量的互联网资源对目标信息进行高效的挖掘与检索成为了当前亟待解决的关键问题。而作为信息检索过程中的关键环节,信息抽取技术扮演着重要的角色,引起了当前学术界和工业界的广泛关注。关系抽取作为信息
任意波形产生(Arbitrary Waveform Generation,AWG)技术在超宽带通信等领域应用广泛。与其它AWG技术相比,光生AWG方案具有体积小、重量轻、抗电磁干扰能力强、可产生超高速率、超大带宽信号等优势。其中,基于空间光谱整型器和频率-时间映射的AWG方案的可重构特性好,是光生AWG技术的研究热点之一。近年来,基于啁啾光纤光栅同时实现光谱整形和频率-时间映射的AWG方案,因可打