【摘 要】
:
近年来,卷积神经网络(Convolutional Neural Network,CNN)已然成为了计算机视觉领域的主要方法,相比传统算法取得了突破性的进展。然而,卷积神经网络往往拥有巨大的参数量和计算量,限制了其在嵌入式等“边缘”设备上应用的问题。本论文中,针对卷积神经网络计算量大和参数冗余的问题,以目标检测算法(Faster RCNN)为研究模型进行压缩,提出基于统计量聚类的剪枝方法,同时结合张
论文部分内容阅读
近年来,卷积神经网络(Convolutional Neural Network,CNN)已然成为了计算机视觉领域的主要方法,相比传统算法取得了突破性的进展。然而,卷积神经网络往往拥有巨大的参数量和计算量,限制了其在嵌入式等“边缘”设备上应用的问题。本论文中,针对卷积神经网络计算量大和参数冗余的问题,以目标检测算法(Faster RCNN)为研究模型进行压缩,提出基于统计量聚类的剪枝方法,同时结合张量分解的方法对模型进行压缩,分析了秩的选取对混合压缩效果的影响,本文研究内容主要包括:(1)针对Faster RCNN算法在PASCAL VOC数据集检测精度改进,以提高在目标大小差异较大的类别物体召回率,本文提出了多尺度区域生成网络,增强了每个锚框中的前景特征信息,提高了算法的候选框生成质量和检测精度。(2)针对卷积神经网络计算量大和参数冗余的问题,本文研究了基于统计量聚类的结构化剪枝方法,对剪枝而言,一个关键性但目前仍没有解决的问题是参数的“相对重要性”评价,它对剪枝后的模型性能有着决定性影响,首先,分析了Faster RCNN模型每层卷积核在均值、方差上的分布,通过聚类的方式把每个卷积核的“贡献度”分为两类,其次,比较每类卷积核的统计和大小,剪枝过程中剪除贡献度较小的一类卷积核。(3)网络剪枝方法中存在剪除了一些重要的卷积核现象,提出一种剪枝方法结合张量分解的混合压缩方法,在低维卷积层采取剪枝方法,高维卷积层分解为三个级联卷积层低秩近似表示。实验结果分析表明,结合张量分解的剪枝方法,有效地减少了Faster RCNN卷积层的参数量与计算量,提升了单独采用剪枝后的模型准确度,卷积层参数量压缩率为54%且在PASCAL VOC测试集的精度几乎保持不变,同时在树莓派4B系统上达到1.4倍的前向计算加速。
其他文献
家蚕是我国重要的经济昆虫,雌雄性别是影响产茧效率的重要因素之一,研究家蚕的性别差异表达基因及性别决定,对于蚕丝业的发展乃至了解生物性别决定机制等基础知识都有重要的
目的:讨论急诊外科医师主导的床旁超声在重症急性肝脓肿实时介入诊疗中的应用价值。方法:收集2017-2019年河北医科大学第二医院急诊外科收治70例重症急性肝脓肿患者,分析急诊
我国于20世纪初正式步入老龄化社会,即将成为老年人数量最多的国家。在这种大趋势下,中国现有的养老政策和养老环境还不够成熟。在现代社会,老年人独居现象普遍,在城市中一些
在教学过程中,要求教室有较高的语言清晰度,以保证师生语言交流效果。混响时间、信噪比、声压级、频率传输特性、声能比等各种因素对语言清晰度都有影响,这些方面已有较多的
我国社会经济不断创新发展,人们的物质文化精神活动也因此不断攀升,精神物质的需求越来越高。因此在近几年里,文创产品的发展步伐越来越快,甚至购买文创产品已逐渐成为人们日
急性肺损伤(acute lung injury,ALI)主要以弥漫性肺细胞损伤为基础,肺血管损伤导致的肺组织炎性细胞浸润和肺水肿为病理特征,急性肺损伤的发病机理与补体过度激活、氧化应激
在全球气候变化和人类活动双重背景下,森林生态系统在垂直海拔高度上有着显著的响应和变化。喜马拉雅地区因其垂直高差巨大,而且还跨五个主权国家的辖区,人类活动、管理措施
本研究为了了解配比施肥对青钱柳生长及生理的影响,筛选出最合适的施肥配比,为青钱柳的人工栽培提供理论指导。采用L9(34)正交试验,研究了氮磷钾配比施肥对青钱柳的生长指标
随着城市化进程的加快,住房用地面积日趋紧张,为缓解此矛盾,“微型公寓”应运而生。微型公寓的设计与销售主要针对都市年轻群体,该群体往往倾向于追求个性化的生活体验,对居
可靠性理论产生于第二次世界大战.近年来广泛应用于各个领域.可靠性理论它以概率论和数理统计为主要研究工具.是对系统运行可靠性进行分析、建模、评价的理论和方法.有关可靠性的数学模型比较多,其中截断δ冲击模型是可靠性模型的一种.本文讨论了截断δ冲击模型中单调关联系统可靠性问题,主要研究内容分为两个阶段:在第一阶段中,针对独立冲击源的情形,借助不同系统中元件数量和系统的不同关系,讨论了冲击时间间隔服从泊松