【摘 要】
:
从Egocentric视频摘要中检测和识别不同的对象是计算机视觉的一项重要技能,它利用在图像和数字视频中对特定语义类的检测实例来进行动物识别,并生成一段简短而有意义的视频,
论文部分内容阅读
从Egocentric视频摘要中检测和识别不同的对象是计算机视觉的一项重要技能,它利用在图像和数字视频中对特定语义类的检测实例来进行动物识别,并生成一段简短而有意义的视频,这对视频数据内容管理和易于检索是非常重要的。在卢旺达Akagera国家公园,从可穿戴摄像机制作的大容量视频中同时对多个不知类别的动物进行的检测和分类,仍然是最大的挑战。现有的人工方法无法识别公园图像中的动物。本文的目的是为了找到一个更好的解决方案来应对这些挑战。主要研究工作包括:1)构建一个动物检测的系统结构,并创建一个对Egocentric视频中有意义信息总结的事件。2)按照动物的类别进行分类,将识别的Akagera国家公园的动物分类为有限的类别之一。3)检测在Akagera国家公园可获得的某一类动物。4)创建在小存储空间内呈现动物检测事件的短视频摘要。5)检测动物和视频摘要的数字演示结果表明,我们的方法是非常有效的。本研究采用基于卷积神经网络(CNN)的现代目标检测方法,如SSD。它是一种非常强大的目标检测工具,可以利用单一的深层神经网络来检测图像中的物体,并且这个SSD使用了在网络顶部的多个特征图上附加的多尺度的卷积边界框,并且在速度和精度之间取得了良好的权衡。我们的方法是用Python开发的,便于编写,并提供了在图形处理单元(GPU)上进行训练的选项。我们将Caffe框架集成到深层特征提取和训练SSD模型中。本文方法构建了数据集,将动物的帧序列分类为两类(训练集和测试集),检测动物并对最后的测试结果进行类的特征总结。从检测动物数据集的实验结果表明,该方法在动物检测实验中是非常有效的。我们的方法在“检测动物数据集”测试中分别达到了 82.5%和70.4%的精度和召回率。实验结果表明,该方法对10个类动物进行了 138帧的测试。评估过程主要集中在我们提出的10个样本类的检测动物上。由上我们得出结论,已经实施了一种新的系统结构,它有效地利用了先进的物体检测和一种有助于区分和识别动物种类的方法,并潜在的提供更优的性能和处理大量视频数据的能力,同时给出了小存储空间易于检索的动物检测事件,我们还指出了未来的研究方向。
其他文献
近几年,中国的区域经济发展不断加快,经济区(经济圈)建设在全国各地方兴未艾,并成为提升区域经济竞争力的强劲动力。在这一背景下,国家规划了18个国家主体功能区,其中就有黔中经济区
互联网的繁荣发展给现代社会带来了深远影响。尤其是在web2.0时代,人们可以在互联网上开展一系列诸如网上购物、网上办公、网上学习等活动。文档、图片、音频、视频等多元的
由于微机电加工技术(MicroElectrical-Mechanical System,MEMS)的飞快发展,微流控技术的研究也开始得到大家广泛的关注。在这最近的三十年里,基于微加工的微流控芯片已经在物
由于气候变化和人类活动的双重影响,淮河流域洪水的形成机制发生了变化,洪水资料产生了不一致性,引发基于统计原理计算的设计洪水可靠性下降。本文以淮河上游为研究对象,开展了变化环境下流域设计洪水修订的研究,提出基于SWAT分布式水文模型构建一致性洪水序列的方法,并根据修订后的洪水序列得到重新计算设计洪水。主要研究内容及成果如下:(1)水文要素变化特征分析。基于长期水文观测资料,研究了淮河上游水文要素的演
随着互联网时代的发展,数字图像在人们日常信息传递中发挥的作用越来越大,高分辨率图像凭借其良好的视觉体验,广泛应用于社会生活的各个领域,但是由于受硬件系统或拍摄环境的
本课题是对基于视觉的多运动物体跟踪关键技术的研究,是在多运动目标检测的基础上,根据目标的不同有效特点及运动趋势,预测未来短时间内目标的运动方向或运动状态,为下一步目
与传统的速调管、行波管、磁控管等器件相比,扩展互作用振荡器在毫米波乃至太赫兹波段可以实现更大的输出功率。由于其具有体积小、结构紧凑等特点,被广泛应用于雷达、电子对
近年来,基于光学相干断层扫描(Optical Coherence Tomography,OCT)图像的疾病探测技术业已成为医学图像处理领域中的研究热点,它是利用计算机技术将OCT图像中的病变区域识别
跨模态多媒体检索是信息检索的一个重要研究领域。随着大数据时代的到来,不同模态数据呈爆炸性增长,基于单模态数据的检索已经不能满足人们的需要,跨模态多媒体检索技术应运
为创制马铃薯野生种与栽培种远缘杂交后代,本研究采取“嫁接当代、母本无性系、累积嫁接Ⅰ、累积嫁接Ⅱ、父母本无性系”5种嫁接方式,通过统计嫁接株和对照组座果率及结实率,开展嫁接对马铃薯冀张薯8号、冀张薯12号与二倍体野生材料种间杂交亲和性影响的研究,以期筛选出最佳的嫁接方式及亲和性强的杂交组合,获得远缘杂交种子,为马铃薯育种提供新的中间材料。试验进一步运用石蜡切片技术观察冀张薯8号、冀张薯12号与二倍