吉林农信数据平台三步走

来源 :中国计算机报 | 被引量 : 0次 | 上传用户:Gsea
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
  在我国金融行业信息化的进程中,商业银行始终是主力军。然而,农村信用社作为主要为我国广大农村提供服务的金融机构,在日益复杂的市场环境中,其信息化需求也日益迫切。特别是大数据被业界普遍讨论的今天,数据分析与管理成为金融行业信息化的必修课。
  吉林省农村信用社(简称吉林农信)在数据管理方面迈出了坚实的一步。3月8日,在位于长春市人民大街的吉林农信大厦,吉林农信科技信息部总经理助理袁福宇、吉林农信数据平台项目经理郑宪东接受了《中国计算机报》记者的独家专访,向记者介绍了他们数据平台的实践经验。
  51个应用 数据量日增500GB
  省级农村信用社的历史并不算长。吉林省农村信用社联合社成立于2004年,作为国家第一批改革试点的农信联社之一,形成了省、县两级法人体制结构。2007年4月,吉林农信综合业务系统全面推广,实现了全省数据大集中和通存通兑,结束了手工、单机和局部网络版作业的历史。然而,随着业务的逐渐发展,在全省数据集中后,吉林农信后先后建设了51个应用系统。在信息化建设有效推进和快速发展的同时,各类风险问题也随之而来。如何有效利用数据成为摆在吉林农信面前的重要问题。“对金融行业来说,我们在系统内的每一条客户信息、每一笔交易都是关键数据。对数据的有效管理和使用是至关重要的,直接影响到经营决策。”袁福宇说。
  金融行业在数据管理方面遇到的挑战都很相似。袁福宇介绍,“我们的主要数据来源之一是核心账务系统。核心账务系统既要支持日常业务,又要为其他系统提供数据支撑,压力繁重,为核心系统减压是我们面临的严峻挑战。同时,数据源分散、数据冗余量大等问题也越来越严重。”为了有效解决上述问题,满足安全运营和管理决策需要,建设集中统一的数据平台是吉林农信信息化建设的必经之路。
  2011年5月,吉林农信启动了数据平台项目建设。“我们一开始就希望从基础做起,搭建一个扩展性强、稳定性好的数据平台。”袁福宇介绍,吉林农信数据平台是ODS(操作性数据存储)、DW(数据仓库)、HDS(历史数据存储)构建的综合体。从底层的ODS、DW到上层的BI(商业智能)展现,数据平台项目在各个交易系统之间、交易系统和报表分析系统之间实现了数据交换,通过数据的加工、整合实现了报表统计和决策分析,并通过数据生命周期管理满足了历史数据查询和稽核审计等需求。
  吉林农信的核心账务系统、信贷管理系统、国际结算系统等主要业务系统均通过数据平台进行了数据整合。数据平台从这些源系统中抽取日常运行的增量数据,然后进行数据标准化、内容聚合、格式转换等整合加工,再将数据导入数据仓库,最后进行汇总处理,形成决策支持数据。
  据郑宪东介绍,目前吉林农信数据平台数据量约10TB,每日增量数据在500GB左右,日常数据处理需要约2~3个小时。数据平台使用的IBM DB2数据库应用状况良好,无论是夜间数据处理的装载及日间数据查询使用,即使面对千万级的记录数据,均能快速响应。
  事实上,不仅仅是DB2,吉林农信数据平台采用了IBM较完整的企业级数据仓库(EDW)解决方案,包括DB2、Information Server以及数据分析与BI展现工具Cognos等产品。“在选型期间,我们开展了同业之间的反复论证,并进行了严格的POC验证。经过甄选,我们觉得IBM的数据仓库建设方案比较成熟,能够确保项目实施的可持续性。”袁福宇说。
  多维度BI体现应用价值
  袁福宇认为,数据仓库是数据平台的基础,而平台的最终目的还是要实现数据的整合、分析与利用,支持领导决策。
  “以前,决策支持数据的生成耗时耗力。它需要人工进行统计和层层上报,最终由计财部门将各类报表进行汇总分析,通常只能是一个月做一次汇总,领导只能看到前一个月的数据。”袁福宇介绍,“而且,我们的报表以反映日常运行的业务状况为主,基本上是将账务数据或会计信息数据经过较为简单的统计和收集生成,缺乏全方位的数据和信息分析。”
  为此,吉林农信以数据平台为基础开发了领导驾驶舱系统。它提供了多维度、多展现形式的数据分析查询功能,同时支持iPad等移动设备。
  “现在,我们的基础数据和决策支持数据的时效性为T 1,即领导每天打开电脑就能看到前一天的数据。由于有了数据平台,我们的数据采集加工质量和效率有了大幅提升。”袁福宇说。
  据了解,领导驾驶舱的指标体系设计为3个大类、10个子类共67个指标,包括资产类、负债类、所有者权益类等6类41个主要经营指标,安全性、流动性等3类19个主要财务指标以及人均贷款、存款、资产等7个主要人均指标。
  “Cognos完成了领导驾驶舱的分析展现工作。通过图表分析、排名分析、明细查询等功能,各级领导可以看到相应的报表数据分析与结果展现。省联社领导可以看到全面的数据分析,基层行社领导可以根据相应的权限看到其所辖范围内的数据统计与分析结果。”袁福宇介绍。
  缜密部署 规划先行
  事实上,吉林农信的数据平台项目并非随意为之,他们有着明确的信息化规划。袁福宇介绍,为了充分了解现有IT系统现状,明确未来项目建设方向,避免IT项目建设头痛医头、脚痛医脚的短期行为,在省联社党委的高度重视下,吉林农信于2011年6月开始进行信息系统评估与规划。
  通过信息系统评估与规划,吉林农信确定将应用架构调整作为当前信息化建设的首要工作,主要体现为“三大平台”建设:渠道平台、数据平台和中间业务平台。
  “数据平台正是我们应用架构调整的关键之举,也是对规划成果的良好验证。我们希望简化原来各个应用系统复杂的数据依赖关系,通过数据平台对各个应用系统实现高效支撑。”袁福宇介绍,截至2012年12月,吉林农信数据平台经过两个阶段的实施,完成了平台架构的搭建,并基于数据平台提供的数据,完成了反洗钱系统、分析型报表系统、领导驾驶舱、征信系统、指标数据短信平台等应用系统的建设。未来,吉林农信还将基于数据平台建设CRM、风险管理系统、管理会计等相关业务系统。
  “数据质量其实是BI能否成功的关键因素。如果数据的准确度不够,那么以这些数据为基础的BI对领导决策是毫无帮助的,甚至还会起误导的作用。”袁福宇表示,“所以,在数据平台项目的第三个阶段,我们将重点进行数据治理。”
  郑宪东向记者介绍,尽管在全省数据大集中之前,各个应用系统的版本比较统一,但是仍然存在数据不一致的问题。在监管部门对金融机构数据准确性要求越来越高的环境下,数据治理将成为吉林农信的重要工作。
  “我们目前在数据平台上做了一些数据治理的工作。”袁福宇介绍,“内容包括数据标准制定、元数据管理、数据质量管理等。我们的数据治理项目还通过了银监会的课题验收。下一步,我们希望能够在全行各个系统内展开,通过数据治理保证高质量的数据源接入数据平台。”
  在袁福宇看来,数据治理实际上通过管理体系与IT,将数据的使用者、管理者整合在一起,把前端、中端、后端的数据整个贯穿起来。
  “我们希望通过管理体系、管理流程,从源头上提高数据质量,支撑业务系统,提高BI分析的准确度。当然,数据治理是一个大工程,涉及财务、信贷、风险、电子银行等诸多业务条线,需要各个业务部门共同参与。”袁福宇说。
其他文献
DevOps 有助于成功实现移动应用程序生命周期管理。DevOps 紧缩了开发人员和操作之间的反馈环路,开发人员可以更迅速地进行更改,而且操作可以加速其应用程序的优化和更新。  传统的软件组织通常会依据职能将开发、IT运维和质量保障分设为不同的部门,这种天然形成的鸿沟给如今大数据、移动时代下,软件的快速交付造成了障碍。比如,IT运维人员要求应用要有更好的可靠性和安全性,开发人员则希望基础设施响应更
移动互联网的快速发展,让手机应用得到普及。近年来,游戏、社交、娱乐、电商、阅读……各式各样的应用走入移动终端,手机App产业中的相关市场被逐步细分,竞争也越来越激烈。  在听书App这样的新兴市场,就已经出现了懒人听书、酷我听书、话匣子等多个产品。但这类产品的共同特点是对有声读物依赖性强,而有声读物却因人工费用较高、资源较少,很快便让一些听书App出现了坐吃山空的问题。  天行听书的妙招  在听书
英特尔2013年第二季度财报数据显示其净利润下滑29%,AMD由去年的第二季度盈利3700万美元到今年的亏损7400万美元——两大PC芯片厂商先后发布的财报都不尽如人意,不约而同地遭遇滑铁卢,  英特尔履新不久的CEO Brian Krzanich在财报发布后的电话会议上详细地说明了英特尔未来的战略布局及发展方向,即把“Ultramobile”放在了至关重要的位置。AMD则一门心思要做好“游戏和定
经过新闻媒体和学术会议的大肆宣传之后,大数据技术趋势一下子跌到谷底,许多数据创业公司变得岌岌可危……根据这条著名的Gartner技术成熟度曲线,大数据已经走过了萌芽期和泡沫化的炒作期,并将在未来3~5年内步入低谷期。  市场中的鸿沟  大数据营销模型将经历创新者、早期采用者、早期大众、后期大众和落后者等5个阶段。这5个阶段之间存在着4条裂缝,其中最大、最危险的裂缝存在于早期市场与主流市场之间,我们
本报讯 5月29日,由北京市经济和信息化委员会指导、北京软件行业协会主办的2013北京软件名人论坛在京召开。众多北京软件业界名人围绕“软件革命改变世界”展开激烈讨论。工业和信息化部软件服务业司司长陈伟、北京市经信委副主任姜贵平、中国软件行业协会理事长赵小凡等出席并致辞。论坛由北京软件行业协会执行会长、用友总裁王文京担任联席主席并主持,宽带资本董事长田溯宁、赛迪顾问副总裁赫建营分别主持第一阶段和第二
“在英特尔,摩尔定律就是一条一直在自我实现的预言,它也是一项战略计划。”英特尔前CEO克雷格·贝瑞特曾这样总结摩尔定律对英特尔的意义。  “不让摩尔定律终结”,似乎是每一代英特尔人必须承担的责任,每一位英特尔人都在探寻其深刻本质。在英特尔,摩尔定律更像是一种信仰,也是驱动英特尔持续创新、积极转型的原动力。  不断降低成本、能耗,不断提高性能,使外观更小巧、轻薄,提供更强大而泛在的计算能力……英特尔
每个房间单独观看或共享有线电视、家庭影院,遥控控制音响、空调、照明和电动窗帘,随时切断或调整其中某条线路来控制信号的传输……这些以前在小说里、电视上的情景已经慢慢变成现实。随着信息技术的发展,智能家居、智慧城市已经从纸面理论逐渐演变成现实,其中,综合布线功不可没。  “在智能建筑中,弱电系统是关键。而综合布线能够将海量的终端设备、地址和带宽进行无缝连接,是弱电系统的基础构建。”美国康普公司(简称康
云计算刚出现时,很多人都在争论云计算到底是不是一种全新的技术。对于“软件定义”这个概念,人们也在谈论相同的话题:软件定义的数据中心、软件定义的存储是不是新技术?VMware公司大中华区技术总监张振伦认为,相比“下一代数据中心”、“绿色数据中心”这些名词,软件定义的数据中心是一个非常好的提法,它为数据中心未来的发展指明了方向。就像云计算不是一种新技术而是一种新的IT消费模式一样,软件定义的数据中心也
仿佛一夜之间,软件定义成为业界时髦的话题。但要追根溯源,软件对硬件的定义已经是久远以前发生在通用计算平台上的事儿了。与早期程序固化且难以改变的嵌入式计算系统截然不同的是,通用计算平台可以运行种各种各样的程序,特定的程序运行时,意味着对通用计算平台的重新定义。  在所有通用计算平台中,最为人们熟悉的PC平台已经陪伴人们40多年了。在这40多年里,层出不穷的应用通过对PC的重新定义,进而改变了人们工作
苏州国科数据中心(简称SISDC)是苏州工业园区政府为科技创新和产业转型重点打造的公共技术服务平台,由苏州国科综合数据中心有限公司负责建造和运营,注册资本1.8亿元。数据中心立足苏州、面向全国为高科技中小企业、政府机构、新兴互联网服务企业、现代服务企业提供国际一流的IDC基础服务和云计算专业服务。  苏州国科数据中心是全亚洲第一家严格按照Tier IV标准设计建造并主动申请获得认证的标准绿色数据中