面向神经网络的故障注入与容错研究

来源 :湖州师范学院 | 被引量 : 0次 | 上传用户:q000q
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着深度学习快速发展,神经网络的应用越来越广泛。随着部分关键领域对神经网络的安全需求不断提高,神经网络安全问题的研究就显得尤为重要。近年来,学者的研究表明通过在神经网络输入端加入扰动可以干扰整个神经网络的运行,然而这种输入端的干扰往往容易被察觉。本文着重关注神经网络模型的内部错误,也就是比特翻转错误。这种错误通常是由于外部环境变化,使原本在硬件平台上运行的神经网络模型权重出现比特翻转错误,从而影响整个模型的精度,甚至使整个模型出现故障。本文使用常见的神经网络模型,探讨了比特翻转的攻击方法以及应对比特翻转的容错方法。本文主要研究内容如下:(1)文章设计了一种神经网络的故障注入模型,该模型分别用全网络注入、定点注入和分层注入三种故障注入方式测试神经网络。实验选用Alex Net、VGG16、Googlenet神经网络模型,分析攻击对神经网络权重数量、比特翻转方向、故障注入位置、模型不同层位置的影响。实验结果表明权重数量越多模型受攻击影响越小;在翻转方向上,实验表明0→1翻转对模型的攻击效果最好;在故障注入位置上,实验表明只有在指数有效位上故障注入影响最大;在分层实验中,结果表明故障注入在靠后的层对实验结果影响较大。(2)针对比特翻转攻击对量化后的神经网络攻击效果不明显的问题,文章提出了一种双层搜索的攻击方法,算法结合双层搜索和梯度排序,通过遍历神经网络中每两层,根据梯度排序找出两层中的薄弱位进行比特翻转攻击,提高神经网络的攻击效率。实验结果表明通过双层搜索位算法可以大大提高神经网络的攻击效率,对比单层搜索位算法,攻击速度和攻击效果均大大增加,解决了位翻转攻击在量化后的神经网络攻击难度较大的问题。(3)针对普通剪枝防御无法有效对抗比特翻转攻击的问题,文章提出了一种基于权重分摊的防御模型。该模型在不改变原本神经网络结构的情况下,利用权重分摊方法提高神经网络的鲁棒性。本文先寻找关键神经元,将关键神经元进行拆分,分摊模型中关键神经元的权重,削弱关键神经元权重破坏对整个模型的影响。实验结果表明在相同的神经网络复杂度下,权重分摊后的神经网络模型受位翻转攻击影响较小。在不同的数据集实验中,权重分摊后的模型均有较好的鲁棒性。
其他文献
决定我国科技创新水平高低的关键在于企业的研究与开发能力,然而开展研发活动离不开资金的投入。也就是说,企业技术创新活动是一项投资活动,在一定程度上需要依赖融资。作为国家开展创新活动的主力军,企业拥有技术创新所需资金是技术创新活动顺利进行的重要基石。然而现实中很多企业因内部资金供给不足、举债能力不足而导致缺乏创新资金,进而导致错失良好的创新投资机会。可见,融资问题可能会对企业创新产生重要影响。基于此,
学位
关于如何进一步更好的实施租赁准则要慎重决定,在几轮征求意见后,国际会计准则委员会和美国财务会计准则委员会最终达成共识,并于2016年发布了《国际财务报告准则第16号——租赁》。之后,财政部于2018年12月公布《关于修订印发<企业会计准则第21号——租赁>的通知》,该准则自2019年1月1日起分阶段施行。针对租赁准则内容的讨论分析,国际间众多学者对于其中一些重要内容持相同观点,例如原租赁准则中的一
学位
股权结构是公司治理的逻辑起点,在公司运营过程中发挥着重要的作用。之前我国证券市场一直都实行同股同权制度,采用这种股权结构上市的公司在融资过程中会让创始人逐渐丧失公司的控制权,发生控制权争夺的惨案,影响了公司的正常发展。很多互联网公司为此采用双重股权架构在美国上市,对我国资本市场来说是一个巨大的损失。为了应对互联网公司持续外流的情况,2018年4月,港交所重启双重股权架构制度,吸引了小米集团、京东集
学位
我国于2016年正式出台《上市公司股权激励管理办法》,进行激励的公司数量呈井喷状态,公司的治理能力和创新能力均有不同程度的提高。软件业作为重要的、基础性的行业,对员工进行股权激励逐渐呈现常态化的特点。连续多期的股权激励能否有效调动员工的积极性,提升企业的绩效,从而对公司治理产生积极的影响?因此,本文选择了软件业中,股权激励具有一定代表性和典型性的上海汉得信息技术股份有限公司,研究其股权激励的实施动
学位
知识经济时代的产业形态从资本密集型转变为知识密集型,物质资本逐渐被智力资本取而代之。智力资本的稀缺性、难摹仿性等特性决定了它的高价值贡献率,也成为企业发展必不可少的关键元素和企业塑造核心竞争力的动力源。农工一体化企业契合中央促进农业一二三产业融合发展、延长农业产业链、提高农产品附加值的产业发展政策,工业的加入使得农业产业的科技含量大大提高。农工一体化企业全产业链的独特生产模式决定了需要更多的生产技
学位
留守儿童问题是我国突出的社会问题之一,目前我国仍存在6000万左右的留守儿童群体,他们当中的大多数为父母双方或一方外出务工而留守在家的14岁以下儿童。这个年纪正是接受学校教育的年纪。因此,在当前形势下,提升对留守儿童心理以及文化知识的教育是非常重要的。本次毕业设计的微纪录片作品《星星“不回家”》就是围绕高邮市龙虬镇龙虬小学展开拍摄,通过采访该校校长、老师以及几位留守儿童来表达家庭教育以及父母陪伴对
学位
《繡屏緣》是明末蘇庵主人的一部才子佳人世俗小說,全書共二十回,留存了大量當時流傳於民間的俗字字形。經整理,全書共有俗字797個,本文以此為研究對象,主要內容如下:緒論部分主要介紹了本文的研究對象、交代相關研究綜述、闡明研究方法及意義。第一章內容是對《繡屏緣》中俗字的介紹。本文借鑒諸位學者的觀點,提出俗字是一種民間群眾將正字按照約定俗成的自覺意識書寫並在社會各個方面廣泛使用的通俗字體,並按照時間順序
学位
当前,我国全民体育事业蓬勃发展,体育基础设施的相继开放和免费使用,使得群众性体育活动日益增多,全民体育已然成为一种趋势,业余足球运动员作为非精英的体育文化群体日益壮大。业余足球运动员身体素质随着运动量的不断增加而日愈增强,但其心理机能水平方面所暴露的问题日愈显著,受到国内外运动心理学领域专家学者的日愈关注和研究。草根足球比赛广泛开展并且日愈受到更多业余足球运动员的欢迎,业余足球运动员积极参加各级各
学位
脱产备考生是指已毕业并取得最高学历证明,选择不就业或离职,全身心投入研究生、公务员、事业单位等升学、就业或从业资格证考试的的社会人群。作为一类特殊考生群体,他们通常承受着超过应届大学生的压力,也有着更多的心理健康问题。近年来,受新冠肺炎疫情的影响,许多行业深受打击,新闻媒体报道“考研究生、考公务员热”频率不断增加,反映出除应届大学生外,有越来越多的人参加升学、就业考,在此社会现象引起关注和热议的同
学位
滚动轴承作为现代工业系统中最为常用的零部件之一,其微小的故障有可能造成极大的经济损失和人身伤害。因此,对滚动轴承进行准确的故障诊断能够保障设备正常运行,具有重要的实际意义。由于故障数据获取的成本很高,滚动轴承的数据通常包含大量的正常数据,只有少量的故障数据,属于一类分类问题。为此,从支持向量数据描述(SVDD)方法出发,对SVDD算法进行深入研究。针对其在建模过程只考虑了数据自身相关性,而忽略了数
学位