银行监管数据实时分析系统的设计及实现

来源 :贵州大学 | 被引量 : 0次 | 上传用户:dingdang_2
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
我国银行业是一个具有高危风险的行业,通过对银行业实施有效监管,降低各种金融风险,实现金融稳定是中国人民银行的基本职责。中国人民银行拥有海量监管数据,通过对监管数据进行挖掘分析能够帮助央行了解金融现状,做出合理决策。体量庞大的监管数据中蕴含着巨大的价值信息,其信息价值也会随着时间的流逝逐渐衰减。央行对于监管数据处理分析的时效性,决定了其监管效率和监管有效性。而随着数据不断积累,监管数据规模不断增大,但是银行对数据处理分析的速度却要求越来越高,甚至是希望能够在数据流入业务系统之前就能够得到数据分析结果。目前,央行某市中心支行对于监管数据的分析利用主要存在以下问题:数据采集流程复杂,存在较为严重的滞后性;数据处理技术更新缓慢,缺乏实时数据处理能力导致数据下发延迟高;数据分析建模方式简单、低效且缺乏实时性,无法根据最新数据做出及时、准确的判断。针对以上问题,结合某市中心支行对监管数据实时分析、处理的需求,本文旨在研究并设计一套基于监管数据的实时分析系统,通过在系统中集成分布式日志采集以及消息中间件技术解决监管数据的实时采集、存储,利用实时计算技术构建数据处理流程完成监管数据的实时预处理,最后通过流数据挖掘技术构建实时分析模型,实现对监管数据的实时分析。本文主要研究工作如下:(1)整合Logstash、Kafka以及Kettle实时流处理工具。针对现阶段某市中心支行监管系统缺乏数据实时处理能力,通过编码整合Logstash+Kafka实现监管数据的实时采集和存储,同时整合Kettle+Kafka实现监管数据的实时预处理。(2)设计了一种基于CVFDT(Concept Very Fast Decision Tree)算法的可疑交易实时识别模型。基于某市中心支行反洗钱监管部门对于反洗钱数据实时分析的需求,本文研究了流数据挖掘技术,最终采用基于决策树思想的CVFDT算法构建实时可疑交易识别模型。同时,使用Java语言实现CVFDT算法并集成至本文系统中。(3)设计并实现银行监管数据的实时分析系统。系统的设计与开发遵循软件工程相关框架,以Java为核心开发语言、以Spring Boot框架为开发基础。系统的实现采用B/S架构,使用前后端分离开发模式,并遵循面向服务的开发思想。系统主要包括三个模块,分别对应监管数据实时采集、监管数据实时处理、监管数据实时分析。通过监管数据在本系统上应用的实际测试,系统能够提供监管数据的实时采集、实时处理以及实时分析功能,提高了某市中心支行对监管数据利用的时效性和有效性,帮助某市中心支行提高监管效率,从而及时、准确的做出监管决策。
其他文献
风味是食品重要属性之一,是引发消费者食欲的重要因素。食品的风味受其原料种属来源及加工方式等影响。为了更好地将广西本地水产原料资源优势转化为产品优势,本文研究了广西五种优势水产原料(马氏珍珠贝-PM、禾花鱼-PC、金丝鱼-NV、罗非鱼-TP和南美白对虾-LV)炸制前后的气味和滋味,探究其共性和差异,确定了关键风味,对油炸制品进行特征风味的鉴别,并分析五种水产原料油炸前后主要化学成分变化,以期为相关水
百色市农业用水占全市总用水量的60.17%,农业节水潜力巨大。百色市仍使用二十多年前供水价格标准,水价过低,水价不能有效反映水资源稀缺程度和供水成本,不能有效发挥价格杠杆作用。科学合理的农业水价,对促进用户节水和农业可持续发展意义重大。百色市开展农业水价综合改革试点,虽取得一定成效,但也还存在诸多困难和问题。农业水价形成机制是农业水价综合改革的关键,开展百色市农业水价形成机制及定价研究,对提升农业
农村土地流转是促进农村生产力发展的客观要求,是深化农村土地制度改革的必然选择。近年来,老挝农村土地流转日益活跃和创新,呈现出流转规模扩大、方式多样化、主体多样化和区域分化的特点。根据各地农村土地流转发展现状,由于各地未能充分考虑地域差异,盲目追求流转速度,以达到农业规模化经营的目的。这些不适应当地情况的盲目土地流转行为,逐渐暴露出各种问题,具有向社会释放的潜在风险,主要表现为土地流转中农民权益受损
目前国内外的报表产品市场方兴未艾,各种报表工具随着企业业务拓展和电子商务的兴起也将拥有更广阔的发展前景,但是随着金融市场的不断开放,除了各类民营银行和外资银行竞相成立之外,以蚂蚁金服等为首的互联网金融也在大力发展,这些金融机构每天都会产生庞大的数据,使得传统的商业报表软件已经无法满足中国人民银行等金融监管机构在面向金融监管数据时的分析需求。长期以来,中国人民银行某市中心支行作为对金融业实施监督管理
2020年爆发新型冠状病毒期间,各行各业都在积极探索如何更有效的面对突发公共卫生事件。反思目前进行的规划设计,城市社区开放空间设计不应仅从美观性、舒适性、功能性等方面考虑,也应该从空间对传染病的传播阻隔方面进行探索,建设更加健康的城市社区开放空间。本文运用景观生态学的理论方法,结合传染病学中对传染病传播因素和传播途径的研究,分析传染病在社区开放空间中传播的生态过程,从城市社区开放空间尺度和城市社区
十九大报告首次提出了“实施乡村振兴战略”,这是基于中国特色社会主义进入新时代的全新历史视角下,中国共产党站所提出的新的“三农”工作总抓手和总方略。其中,发展壮大农村集体经济是乡村振兴战略的重要组成部分。当前,“三农”问题仍然是制约我国农村经济社会发展的“痛点”,因此,现阶段全国各地通过多途径全力发展农村集体经济,既体现了化解农村社会经济矛盾的决心,也从侧面反映了发展农村集体经济对于保障农民利益和实
伴随着社会经济的不断发展和我国社会治理格局的转型,面对社区中诸多公共事务,多元主体共同参与的治理型模式正悄然兴起。社区协商作为基层社会治理的一项制度性革新,不仅符合当下“共建共治共享”的要求,并且是有效解决社区公共问题的现实需要,受到政府的高度重视。参与协商的主要执行场域为多种力量相联结的基层社区,而多元主体之间的互动关系建构不仅直接影响社区公共问题的解决,还是优化社区治理结构的关键因素,因此厘清
“十四五”时期中国进入新发展阶段,广西中锦工程咨询有限公司发展环境出现巨大变化。国家更加关注高质量发展,在新型城镇化、乡村振兴等方面将投入更大,给公司提供了巨大发展机遇。新一轮科技革命和产业变革方兴未艾,智能化、绿色化、数字化成为工程建设的必然趋势,工程建设行业面临升级与转型。同时受新冠肺炎疫情全球蔓延的影响,全球经济增长放缓,中国的经济增长的速度也下降,同时受到疫情防控因素的影响,工程行业面临着
工业发展排放大量污水使得环境中的水资源污染愈发严重,这其中含镉废水是常见的水资源污染源。常见的去除污水中的镉离子的方法很多,其中吸附法操作过程简单高效节能,逐渐在重金属离子的去除领域得到青睐。而吸附法关键在于吸附剂的选择。纤维素是一种天然的高分子化合物,其碳链上连接着大量可化学修饰的羟基,化学改性后可接枝改性制备吸附剂。经过处理后的木薯渣的主要成分是纤维素,将其进行化学改性制备吸附剂可极大降低吸附
近年来,在社会金融化的背景下,青年人遭遇“校园贷”、接触不良金融服务从而陷入金融风险的案例屡见不鲜,青年人陷入金融风险不仅会造成自身及家庭的经济损失的而且会严重危害当代青年人的身心健康,迫使青年人成为经济脆弱、身心脆弱的双重脆弱群体。面对日渐严峻的社会现象,不同领域的学者开始研究此现象出现的原因,现有研究表明超前的消费心理、不足的金融知识储备量、易接触不良金融服务是青年人易遭受金融风险,陷入金融困