基于Spark的图像隐写分析系统的研究与实现

来源 :北京邮电大学 | 被引量 : 0次 | 上传用户:wangxiaoxiao880523
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着大数据时代的到来,互联网环境中的数字图像呈现爆炸式增长。近年来,攻击者将恶意代码或程序隐藏在图像中并进行大规模分发,数以千万的用户遭受来自勒索软件、隐私泄露等网络攻击的伤害。更危险的是,隐写工具层出不穷,利用隐写术发起的网络攻击数量与日俱增。然而,由于网络环境中图像数量规模庞大,图像来源千差万别,隐写分析技术作为与隐写术抗衡的有效手段,在传统的单机模式下计算性能受限,这为隐写分析技术向真实场景转化带来了不小的困难。针对以上问题,本文提出基于Spark的图像隐写分析系统,旨在解决网络环境中大规模图像的隐写分析问题,并向用户提供实用且易用的功能服务。本文主要工作如下:(1)针对传统的单机版隐写分析算法在面对大规模图像时性能受限,现有的基于MapReduce框架的并行算法存在不足的问题,本文深入研究隐写分析算法,分析可并行化部分,结合Spark分布式计算和数据存储方式,重新设计隐写分析算法,实现高性能分布式计算与通用隐写分析技术的结合。基于Spark实现的隐写分析算法以并行化的方式执行图像隐写分析任务,实验表明,并行化方式相比单机版和基于MapReduce的隐写分析算法,在执行效率方面有显著提高。(2)针对隐写分析算法在面对复杂图像来源时存在的多种隐写算法或隐写率检测准确度的问题,本文研究了图像隐写分析算法中决定其性能的关键参数。通过使用多组特征提取参数和指定集成分类器参数与自动化搜索最佳参数两种方式,执行多组隐写分析任务,评估算法性能,从而在本文搭建的集群规模中确定合适的算法参数。实验结果表明,基于Spark实现的并行化算法能够承载更重的计算任务,在提升计算性能的同时,检测正确率高于现有隐写分析算法。(3)针对现阶段缺乏面向实际应用场景的隐写分析工具的问题,本文研究当前最新的Web应用开发技术,结合基于Spark的图像隐写分析算法,设计并实现具备通用性、高效性和易用性的图像隐写分析系统。系统主要包括用户管理模块、图像库管理模块、基于Spark的并行化隐写分析模块和分析报告管理模块。(4)在当前系统环境下使用测试样本对系统进行界面测试、功能测试和性能测试。其中,性能测试使用隐写分析算法的平均错误率和加速比衡量算法检测准确度和并行化性能。测试结果表明,系统的准确性和效率达到预期,能够满足大规模图像的隐写分析需求。
其他文献
随着数字技术的迅猛成长,高速、高精度模数转换器(ADC)在各个领域中的应用更为广泛。流水线模数转换器(Pipeline ADC)作为高速、高精度ADC架构之一,在速度、精度与功耗三个方面具有相对好的折衷关系,在现代无线通信领域中获得了更为广泛的应用。因此,研究高速、高精度的Pipeline ADC设计对于通信领域发展具有重要意义。Pipeline ADC的核心关键模块为前端的采样保持电路(S/H电
目前我国学者对于教育题材的研究较多,但关于培养女学生学术认同的研究甚少。在此研究背景下,本翻译实践报告主要由任务描述、译前准备、翻译执行情况、案例分析和实践总结五部分组成。翻译原文本为“成就导向:城市学校女学生积极学术认同的培养”,主要介绍了培养加纳城市女学生积极的学术身份及非认知技能。原文本为信息类文本,根据文本特点,详尽分析翻译难点,总结翻译方法。案例分析部分主要从词义感情色彩转换、名词化结构
本试验对玉米秸秆进行同升温速率的多终温热解试验,进行商品催化剂、自制催化剂和改性催化剂的催化热解试验,利用傅里叶变换红外光谱仪、电化学工作站和BET比表面积仪手段进行碳粉表面积测定,最终得出每种催化剂的催化产物适用领域,并且分析其做为载体的适宜性。循环伏安测试图中,商品CaO催化热解的产物活性较差,双电层厚度也较差,自制和改性CaO催化热解的产物的活性则较好,双电层较规则。三种产物在碱性电解液中的
目的研究寨卡病毒(ZIKV)和登革病毒(DENV)感染对胎儿发育的影响,探讨病毒感染鸡胚诱导肝脏炎症反应的可能机制。背景病理报告和队列研究结果表明,孕妇感染DENV会对围产期胎儿产生早产等不良影响,而ZIKV感染胎儿则可以引起诸如大脑神经等多器官和系统的严重损伤,同时也有报告显示ZIKV和DENV都能够导致患者肝损伤。那么关于ZIKV和DENV如何导致肝损伤和其在胎儿发育中的作用仍需要更多的研究。
本文以成都地铁7号线川师车辆段与综合基地的超大规模深基坑为工程背景,通过分析不同围护结构的特点及适用条件,优化确定了不同剖面的支护结构类型,然后通过FLAC3D差分元软件模拟分析了考虑膨胀效应时基坑稳定性和支护结构受力与变形规律,通过现场监测结果进行了验证,并与不考虑膨胀土膨胀效应时的规律进行了对比分析,主要研究成果如下:(1)考虑膨胀效应时基坑和支护结构的变化规律与不考虑膨胀效应时基本相同。(2
随着我国加快建设创新型国家的提出,专利作为技术创新的重要情报源更加受到企业和科技工作者的重视。但由于领域专利数据的不断涌现,技术创新主题的挖掘难度不断增加,如何简化挖掘技术创新主题的过程,全面、快速了解该领域的技术主题及发展趋势,是信息情报人员研究的重点之一。本文提出融合多属性挖掘技术创新主题的方法,借助结构洞理论对领域技术作发展预测,为相关领域企业和科技工作者的研究工作提供思路。具体来说,本文的
目的:对合肥地区经住院治疗的胆石病患者的临床流行病学现状及相关危险因素进行调查,为该地区胆石病患者的治疗提供科学依据。方法:收集武警安徽省总队医院、安徽省中医院、安徽省二院等三所医院近十年收治的胆石病患者病历资料,制定胆石病临床流行病学调查表格,对参与本次调查研究的人员进行专项培训,对调查资料进行统一规范的填写,对于收集的所有临床数据使用计算机建立数据库,且由研究者专门进行核对矫正。结果:本次调查
目的:观察化瘀通阳方对溃疡性结肠炎大鼠白细胞介素-23(IL-23)含量及JAK-STAT信号通路的影响,以探究其作用机制。方法:将32只健康Wistar大鼠按照随机数字表法分为空白对照组8只,模型复制组24只,并采用5%葡聚糖硫酸钠(DSS)溶液灌胃结合自由饮用方式建立溃疡性结肠炎大鼠模型,7天后随机处死空白对照组2只大鼠及模型复制组6只大鼠,立即剖取大鼠结肠组织,通过观察其肠管长度、黏膜溃疡情
烧结机头灰和高炉瓦斯灰是钢铁冶炼过程产出的尘泥,是钢铁冶炼过程中的副产物。由于其中含有较多的铁、碳、硅和镁等成分,传统的处理方法是将尘泥直接返回烧结配料,实现铁碳等资源的循环利用及减少污染物排放。但是这些含有铅、锌等重金属的尘泥在直接返回烧结配料循环利用的过程中,导致锌、铅等有色金属在钢铁冶炼流程中循环富集,影响高炉的顺行和寿命。因此,需要寻找一种可行的方式,将钢铁冶炼尘泥中有害的金属元素进行选择
目的:使用2010年国际肾脏病理学会研究委员会(Research Committee of the Renal Pathology Society,RPS)标准,对糖尿病肾病(Diabetic Nephropathy,DN)病理分型与肾脏预后的关系进行系统评价,为今后临床使用该分型标准提供指导。方法:使用计算机系统检索MED1LINE、EMBASE、Cochrane Library、中国知网、万方