【摘 要】
:
基于深度学习的卷积神经网络模型在图像分类、图像检索、人脸识别等多个计算机视觉领域中得到了广泛地应用。卷积神经网络由许多重要的模块组成,而非线性激活函数在卷积神经
论文部分内容阅读
基于深度学习的卷积神经网络模型在图像分类、图像检索、人脸识别等多个计算机视觉领域中得到了广泛地应用。卷积神经网络由许多重要的模块组成,而非线性激活函数在卷积神经网络中起到关键作用,卷积神经网络可以取得成功的一个重要因素是非线性激活函数的发展。目前,基于改进激活函数的网络架构都是在高质量图像中进行测试和评估的,而实际问题中的图像都属于降质图像,关于降质图像分类这一重要应用的研究还处于初步阶段。首先,本文研究了现有的激活函数,在此基础上提出了一种新颖的参数化激活函数。在所有激活函数中,修正线性单元(ReLU)最为广泛使用,因为它具有高效和收敛速度快的属性。然而,ReLU完全丢弃包含有用信息的负激活值,尤其是卷积神经网络浅层的负激活值。受到参数化修正线性单元(PReLU)和指数线性单元(ELU)的启发,本文提出了幂线性单元(PoLU)。PoLU对输入的负激活部分实施有符号的能量归一化,这种能量归一化的参数是可以学习的。PoLU有通道共享和通道独享两种策略,通道共享策略引入的参数更少,但是通道独享策略具有更好的性能。同时,PoLU像ReLU那样保持正激活部分不变。PoLU可以高效地实现并且灵活地运用到不同的卷积神经网络架构中。其次,基于PoLU的网络架构的重要应用不仅体现在高质量图像分类问题的研究中,同时还体现在降质图像分类的研究中。降质图像分类具有重要的现实意义,PoLU在高质量图像分类中有成功的应用,其对于数据中的噪声具有鲁棒性,这对于降质图像分类是有利的。降质图像中存在大量的噪声和严重的信息损失,直接使用预训练的网络对降质图像进行分类的性能并不是很好。本文将PoLU应用在将质图像分类研究中,将原始网络中的ReLU替换成PoLU,并对改进后的网络结构在降质图像数据库上进行参数微调。本文在高质量图像分类数据库CIFAR10和CIFAR100上对基于PoLU改进的Network in Network(NIN)网络架构进行了评估,大实验结果表明PoLU要比ReLU和其他相应的激活函数性能更好。同时,将PoLU应用于降质图像分类这一重要任务中。实验部分在基于PoLU改进的VGG-M网络上进行,结果表明改进的网络架构在降质图像上的分类性能在一定程度上优于ReLU。
其他文献
债务融资与企业价值的关系问题一直是学术研究的热点,尽管国内外学者从多样化的角度对其进行了深入地探讨,但至今仍未形成统一意见。根据系统理论,企业的生存和发展依托于一定的宏观经济环境,宏观经济波动对于社会总需求以及市场风险等的影响势必传导到公司的经济行为。那么,经济周期作为外部宏观经济波动的综合反映,会对微观企业债务融资决策、价值创造与实现产生何种影响?在经济周期不同阶段下,债务融资和企业价值间的关系
制药企业已经成为“中国制造2025”和新兴产业重点领域,它的发展是促进健康中国建设的保障。当前,我国已经成为第二大医药消费国,存在人口老龄化严重的问题,同时医药行业继续全面推进深化改革,医保控费、招标降价、带量采购等政策的出台使得制药企业竞争格局发生了巨大变化,这些既给制药企业带来了机遇也使其面临着挑战,一方面制药企业拥有广阔的市场,另一方面竞争加大,面临药品降价的风险,因此,对成本进行合理有效的
进入新世纪以来,我国汽车产业快速发展,形成了种类齐全、配套完整的产业体系。整车研发能力明显增强,节能减排成效显著,质量水平稳步提高,中国品牌迅速成长,国际化发展能力逐步提升。随着汽车制造技术不断进步,各汽车厂对汽车及零部件的性能要求越来越高。其中之一就是汽车闭合件耐久性能(即汽车门锁、门铰链耐久性能)。企业现有气动试验台虽然能满足GB15086标准的要求,但它存在着控制精度差、调整范围小、受气压稳
二氧化钛是一种性能优良的光催化剂,但是在实际应用中存在易团聚、难回收、不响应可见光等问题,通过负载、掺杂的方法可以有效解决这些问题。本论文以硫酸氧钛为钛源,硅藻土
品牌是人类商业文明积淀的瑰宝。新中国成立70年来,在实现高质量发展的征程中,越来越多的企业开始意识到品牌在公司发展中发挥着巨大的作用,品牌逐渐成为现代企业生存和发展的核心要素之一,并且是企业市场创新的动力源泉。品牌建设对企业发展的重要程度不言而喻,强势的品牌对企业而言更意味着市场地位和利润。因此,企业要想获得长远的发展,就必须找准重点,利用自身的优势条件,建设自己的品牌,并树立自己的品牌影响力。同
众所周知,芳香有机化合物在被溴取代之后生成的产物是合成化工原料的重要中间体,大多具有抗癌和抗菌的作用。直接利用溴亲电取代芳香环是传统的合成溴代有机化合物的方法之一
21世纪的国际经济舞台波诡云谲,我国为了适应这种“新常态”,“啃”好经济发展这块硬骨头,以习近平同志为核心的第四代领导集体提出了以全新的眼光看待我国经济发展,抛开“GD
Micro RNAs(miRNAs)是一类大小约20~25个核苷酸的保守的非编码RNA。成熟的miRNA与Ago蛋白形成miRNA-蛋白复合体(miRISCs),通过结合靶基因的3’UTR区域促进m RNA的降解或抑制蛋白翻译过程进而调控靶基因的表达水平。大量的研究表明,miRNA异常表达在癌症的发生发展中发挥重要的作用。肺癌是全球癌症发病和死亡的首要原因,2018年预估新发病例210万(占总癌症
当前国家已经推出《国家处置电网突发区域性停电应急预案》,但尚未创建高效的电网应急能力评估系统,需要不断完善相关研究领域的理论体系与评估方式,以此设计高效的电力应急程序,明确所有关联方的职责权限,持续提升预警与应急机制的运作效能以及电力企业应急处理水平。本文以湛江电网事故为分析对象,了解其现有的应急管控情况,分析在解决相关事故时应急管理系统出现的负面现象以及相关的原因,综合考虑现有国内电网运行的实际
研究目的:本研究根据GLTC等中外医患沟通模式,研制医学与人文融合的住院患者医患沟通方案,医生应用于住院患者的临床医疗过程,并对医生个体方案应用前后的患者设置对照组和实验组,进行住院患者医患沟通满意度调查,收集住院患者对医患沟通的详细信息,将两次调查进行比较,揭示当前住院患者医患沟通中需要改进的环节,并提出针对性的改进策略,为完善医患沟通制度,健全医患沟通方案,提高医务人员医患沟通技巧,改善医患关