面向用户请求路径的分布式系统监控关键技术研究

来源 :国防科学技术大学 | 被引量 : 0次 | 上传用户:ZPHZPH
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
在现代社会,分布式系统发挥着越来越重要的作用,推动着各行各业的快速发展,极大地便利了人们的日常生活。随着技术的发展和用户需求的增加,分布式系统呈现出新的发展趋势,包括用户数量日趋增加、设施规模日趋庞大、系统结构日趋复杂等。这些发展趋势为分布式系统的发展带来了机遇,但同时也带了挑战,其中重要的一项便是日益增多的系统异常。这些异常严重地影响着系统的可靠性和性能,并可能造成巨大的损失,特别是在安全攸关的领域,这些异常可能带来灾难性的后果。作为一种运行时的技术,系统监控对系统运行时信息进行收集,据此检测和诊断系统运行过程中出现的异常,并对系统进行恢复,从而有效地提高分布式系统的可靠性和性能。在收集的各种类型的数据中,用户请求路径(简称路径)记录了用户请求的执行过程及上下文信息,能为异常的检测和诊断提供更为丰富、更有价值的信息。因此,面向路径的系统监控技术得到了广泛的应用,成为学术界和工业界关注的热点。但是,分布式系统呈现出的发展趋势为面向路径的系统监控技术带来了严峻的挑战,包括:如何准确、实时、低开销地对路径数据进行收集并有效地进行展示;如何快速、准确地从海量的路径数据中检测出系统异常;如何基于路径数据快速、准确地对系统中的故障进行细粒度地识别和定位等。另外,难以获取满足实际需要的路径数据给这些技术的发展带来了阻碍。针对这些问题和挑战,本文对面向路径系统监控的关键技术和基础数据展开深入的研究,主要工作和贡献包括:(1)轻量级的白盒跟踪方法文章给出了一个轻量级的白盒跟踪方法MTracer,MTracer能够准确、实时地捕获用户请求路径,记录节点、构件、函数等不同粒度的执行信息。基于Web的可视化工具MTracer-Viz能够对收集的路径数据进行分析,并从不同的角度对信息进行展示,以辅助用户进行系统理解和维护。实验表明,MTracer给系统带来的额外开销处于较低水平,且具有较高的处理速度,能够有效地对实际系统的行为进行跟踪。另外,MTracer在易用性和通用性方面具有较好的表现。(2)细粒度、多场景的请求路径数据集文章给出了一个细粒度、多场景的请求路径数据集TraceBench,TraceBench是第一个以用户请求为中心的细粒度开源路径数据集。在数据集的收集过程中,通过设置不同的集群规模、请求类型、负载强度、故障种类等构建不同的收集场景,使目标系统在不同场景中表现出不同的行为特征,从而保证数据集可以满足不同的应用需要。实验表明,TraceBench中的数据真实可用,能够有效地支持异常检测和诊断等系统监控相关技术,且适用于一些其它研究,如不变式挖掘等。(3)基于运行时验证的异常检测方法文章给出了一个基于运行时验证的异常检测方法。该方法利用不同的逻辑语言对系统行为特征进行描述,并利用运行时验证中的相关技术将系统特征转换成方法的内部表达,据此对路径数据进行检查,发现系统中存在的异常。实验结果表明,方法采用的逻辑语言可以准确灵活地对系统行为特征模型范围内的行为特征进行描述;且能够在特征描述的范围内准确地检测出异常路径,并具有较高的效率,能够满足实际需要。(4)基于路径分割的性能异常诊断方法文章给出了一个基于路径分割的性能异常诊断方法SegDiag。SegDiag利用自动分割算法对路径数据进行分割,达到降低数据维度、增大样本容量、提高信息利用率等目的,从而提高分析过程的准确度和效率;SegDiag引入循环过程并给出合理的循环终止条件,可以进一步提高方法的准确度;另外,方法还采用了一个综合投票机制,可以准确地对不同粒度的故障进行定位,并为用户提供灵活的投票选择。实验结果验证了SegDiag的准确度和效率。
其他文献
2006年5月11日,国家卫生部和中医药管理局召开全国医院管理年度工作会议,决定恢复医生用药品通用名开处方的制度,加强基础管理,改善服务态度,规范医疗行为,提高医疗质量,确保医院和
在这个日趋多元化的社会中,各种文化的交流也空前繁荣。在文化碰撞中,面对不同的文化,尤其是来自发达国家的强势文化,人们产生很多疑惑,为什么文化间会有如此的差别?哪种文化
随着国内外对薄膜电容器需求的不断增长,我国正朝着薄膜电容器制造大国、强国的方向发展。叠片技术改变了传统的单个卷绕方式,已成为薄膜电容器小型化、片式化的主要手段。介绍
[摘要] 本世纪初,美国政府为了应对经济衰退,采取了“减税”、“降息”等一系列财政和金融政策,虽然经济衰退得到了有效的控制,但也使得次级贷款的规模逐步扩大,最终导致了次贷危机的爆发。在次贷危机爆发、新经济弊端的出现、石油价格居高不下的多重影响下,美国消费者支出大幅缩减,再加上人口衰退期的到来,美国的消费型经济将面临严峻的考验,新一轮的经济衰退将不可避免的出现。  [关键词] 次贷危机 经济衰退 新
目的比较全胃系膜切除与标准D2根治术治疗进展期胃癌的临床疗效。方法选取80例进展期胃癌患者,随机分为A组与B组,各40例。A组采取全胃系膜切除,B组采取标准D2根治术,比较两组
采用润湿平衡法,研究了水溶性钎剂条件下SnAgCu系钎料合金对表面贴装元件的润湿特性。试验结果表明,钎焊温度对润湿力作用显著。Sn2.5As0.7Cu钎料合金的最大润湿力为1.265mN,其最佳
大学生道德冷漠是高等院校中一種不健康的现象,有一定的社会根源。我们在学习、探讨、深化“未来型”、“个人加持计划”以及“2025愿景”等这些“上层建筑”的时候,更多着眼点是教育这棵大树的枝干和茎叶。枝繁叶茂、蔚为可观,若是忽略了作为根的道德文明建设,繁华不过云烟,转眼即逝。  2010年12月12日,黄山风景区公安局的24岁民警张宁海在护送遇险大学生们走出危险区时,不幸坠崖身亡。脱险后的大学生们不仅
[摘 要:科学教育一直是幼兒园教育的薄弱一环,决定幼儿园科学教育质量的准幼儿教师,他们科学素养的高低直接关系到幼儿教师科学素养的整体水平,也直接影响着幼儿科学素养的形成。该文通过分析贵阳幼专学前教育专业学生科学素养现状,探讨现阶段提高学前教育专业学生科学素养的有效途径。  关键词:学前教育专业;科学素养;准幼儿教师]  第九次中国公民科学素质调查结果显示,2015年我国具备科学素质的公民比例达到6
回 回 产卜爹仇贱回——回 日E回。”。回祖 一回“。回干 肉果幻中 N_。NH lP7-ewwe--一”$ MN。W;- __._——————》 砧叫]们羽 制作:陈恬’#陈川个美食 Back to yield
传统的语文教学注重知识的传授,而新课改语文教学更加体现了语文工具性与人文性的高度统一,要求语文教师在教学中应该把'语文是最接近人的心灵的一门艺术'作为展开教