基于高斯混合模型与多通道双边滤波的RGBD场景流计算技术研究

来源 :南昌航空大学 | 被引量 : 0次 | 上传用户:cutexsh
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
3D场景流是真实世界中场景表面可见像素点的瞬时三维运动矢量,与光流相比,3D场景流不仅包含场景和物体的三维运动参数,还提供了丰富的三维结构信息。研究3D场景流计算技术的目的是从图像序列恢复场景与物体的三维运动与结构,进而为高级视觉任务提供准确的先验信息。近年来,随着计算机技术的快速发展,3D场景流计算技术已成为图像处理、计算机视觉与人工智能等领域的研究热点,研究成果被广泛应用于虚拟现实、自动驾驶、医学影像、无人机视觉、智能机器人等领域。近年来,随着消费级深度传感器(如微软的Kinect)的广泛应用,基于RGBD图像序列的场景流计算技术逐渐成为场景流计算的热点方向。由于深度传感器在成像质量和有效距离等方面仍有待进一步提高,因此,现有的RGBD场景流计算方法在大位移、运动遮挡等复杂场景下的准确性与可靠性较低。针对上述问题,本文主要研究基于高斯混合模型与多通道双边滤波的RGBD场景流计算技术,旨在提高场景流估计精度的同时解决复杂场景的边缘模糊问题,本文的研究工作和创新点主要包括以下:1.介绍了场景流计算技术的研究背景及意义,论述了场景流计算方法研究现状,提出了当前场景流技术领域存在的关键问题,概述了场景流计算模型的基础理论,并对相机模型中四个坐标系之间的转换关系、光流与场景流之间的对应关系进行了详细的说明。2.针对含有大位移、运动遮挡等复杂场景下的场景流计算准确性与可靠性较低问题,提出一种基于高斯混合模型的深度图像优化方法。首先,输入前后两帧RGB图和对应深度图,用K均值算法对深度图进行初始分层;然后,计算前后两帧RGB图像序列光流,用高斯混合模型对光流进行聚类分割,获得光流分割结果,并根据光流分割结果逐层优化深度分层,获得更准确的深度分层信息。该方法提高了深度图像序列在运动边界区域的分割的准确性,进而提高大位移、运动遮挡等复杂场景下场景流估计的精度与可靠性。3.针对复杂场景下场景流计算结果的边缘模糊问题,提出基于高斯混合模型与多通道双边滤波的RGBD场景流计算方法。首先,利用优化后的深度分层信息结合光流信息计算得到初始场景流;然后,利用双边滤波方法对初始场景流进行多通道优化,并获得更准确的运动边缘信息。该方法提高了大位移、遮挡等复杂场景下场景流估计的准确性和可靠性,同时有效的保护了运动边缘。4.在Middlebury 2003、Middlebury 2005和MPI-Sintel等数据集上分别进行消融实验和对比实验。通过消融实验证明了采用高斯混合模型的深度图像优化方法,可提供更准确的深度分层信息,进而提高了大位移、运动遮挡等复杂场景下场景流估计的准确性。利用多通道双边滤波优化算法有效避免了场景流计算的边缘模糊问题。通过对比实验分析了本文算法与传统方法、深度学习方法在处理大位移和运动遮档等复杂场景的场景流估计性能。实验结果表明,本文算法在针对包含大位移、运动遮挡等复杂场景中场景流估计具有较高的准确性和鲁棒性,有效改善了边缘模糊问题。
其他文献
期刊
信息技术的发展使媒体形式日益丰富,无论是广电、报刊还是手机平台、APP软件都能够传播资讯。新技术的不断发展使媒介融合成为新的发展趋势。近年来,全媒体平台广泛出现,让信息传播更加便捷,尤其是短视频传播,可以让信息更加直观清晰。基于这一背景对全媒体传播体系进行研究,对媒体发展具有借鉴意义。
期刊
党的二十大报告对加强国际传播能力建设,提升国际传播效能提出了明确要求。在受众面对海量信息的全媒体时代,如何才能聚集国外受众的注意力,提高国际传播的效果,是主流媒体迫切需要解决的问题。文章分析南宁广播电视台多年来在国际传播工作中的实践与探索,提出从内容升级、平台升级、传播升级三个方面不断迭代升级,适应全媒体时代的传播规律和受众习惯,持续提升国际传播影响力。
期刊
互联网新技术的迅猛发展在媒体领域催生一场前所未有的变革,使舆论生态进入全媒体时代,并促使媒体形态、媒体传播渠道以及媒介终端等发生深刻变化。治边稳疆背景下,民族地区应适应新变化,顺应新发展,深刻明晰全媒体传播体系建设的重要性迫切性,同时,应针对全媒体传播体系建设过程中认知、体制、人才、内容等方面存在的问题,结合地区经济社会发展实际情况,加强全媒体传播体系顶层设计,提升行业人员认知水平,完善全媒体国际
期刊
党的二十大报告指出,加强全媒体传播体系建设,塑造主流舆论新格局,为我们在新形势下推动媒体融合向纵深发展提供了工作遵循。本文试图以贵州日报报刊社、贵州日报当代融媒体集团的探索和实践为例,探讨主流媒体在全媒体传播体系建设中的可作为空间,进而总结媒体融合发展的阶段性成就,明晰未来的前进方向。
期刊
<正>河北经济生活频道在内容生产和产业经营方面持续保持双轮驱动,继续拓展“新闻+政务+服务”的平台范围,巩固完善全产业链条、全方位服务机制,实现更新、更大的产业合作空间。2022年是媒体呈现多元化发展新格局、行业重塑再生的一年。新时代,新任务,加快构建全媒体传播生态网络已成为河北广播电视台经济生活频道(以下简称河北经济生活频道)提质增效、创新表达、融合发展的关键之策,同样也为受众及业界带来更多可感
期刊
<正>“五年之后的传统电视应该要建成跨屏生态,那时候中国的广电行业不再是传统广播电视,而应该是建成了全媒体传播体系的新型视听业。”2022年11月21日,胡正荣在2022中国电视大会上作了《全媒体传播体系中的电视未来:无屏生态》主题发言,提出视听平台的演变进程是“单屏—多屏—跨屏—无屏”。他表示,传统视听和智能视听的最本质分野就是技术带来的可能性一下子多元化了,
期刊
<正>“中心确定了‘突出重点,统分结合,融合发展,人尽其才’16字工作方针,立足打赢新闻宣传‘总体战’、经营创收‘翻身仗’、融合发展‘攻坚战’,形成融为一体、合而为一的全媒体传播格局。”2023年春节后上班的第一天,福建省广播影视集团广播全媒体中心就拿到了集团颁发的两块含金量很大的奖牌:“突出进步奖”和“平安建设示范单位”。
期刊
随着社会的发展和健康知识的普及,健康议题越来越受到社会各界的高度重视。同时,随着我国人口老龄化程度逐年加深,“促进健康老龄化”被列入《“健康中国2030”规划纲要》。另一方面,互联网信息技术的革新使我国信息传播进入全媒体时代。由此,文章着眼于全媒体时代背景,通过分析传播形态变迁下健康传播的范式转化与老年群体的角色演变,指出在媒介革命的驱动下,健康传播范式从“宣传教育”转向“互动对话”。在全媒体时代
期刊
本研究立足于各类人工智能算法在中医诊断中的应用现状及问题。主要介绍传统机器学习算法以及近年来新兴的深度学习算法与中医四诊相契合的场景;探索将人工智能技术引入中医诊断过程,以进一步推动中医的客观化、定量化发展的智能诊疗机器人设计。针对我国目前中医诊疗仪器在临床领域研发应用现状,引入机器人技术,以促进中医诊疗仪器创新发展,推动中医理论研究与诊疗技术的协同发展,使中医诊疗技术在提高人民健康和生活水平方面
期刊