论文部分内容阅读
摘要:采油厂数据中心的建立将为消除数据孤岛、降低数据冗余、统一数据、统一界面、统一接口、实现数据共享提供集成平台;为改进生产经营的整体应用水平、改善应用环境、降低费用、提高全员劳动生产率、提供更加全面、及时、精确、科学的生产经营分析数据。
关键词:数据中心;数据处理流程;数据存储中心;数据编码标准
1采油厂数据库建设中的管理现状
经过多年的发展,采油厂建成了多个计算机应用系统,随着时间的推移,科学技术的日新月异,这些系统暴露出这样或那样的多种问题,存在许多需要改进、深化的方面,归纳起来主要有以下几个方面:
信息孤岛现象:由于各个系统在当时分别独立建设,在设计时没有考虑与其他系统的联系,所以各个系统分别独立封闭运行,即不从其他系统获取数据,也不为其他系统提供信息,造成信息不能共享,形成一个个的信息孤岛,使许许多多的有价值的信息仅能在单个系统内使用,其它系统不能采用,不能发挥出这些系统的全部功效。
冗余数据现象:因为各系统分别开发,没有考虑借用其他系统的数据,所以各系统运行中需要的数据都要单独输入,这就造成许多数据的多次输入,重复输入,重复存储,造成了大量的数据容余,同时增加了工作量,加大了数据出错的概率,这就需要各系统统一数据结构、统一接口、统一数据源。
已有软件中存在数据瓶颈 :由于数据在数量和质量上得不到充分的保障,使得已有的应用软件系统不能充分地发挥作用。数据已经成为应用的瓶颈,数据建设迫在眉睫,而数据中心建设的目标之一就是解决这个应用瓶颈。
升级维护困难:因为各种基础数据分别存储于各个系统,如要修改一数据,就要想着同时修改多个系统中的统一数据,如修改钻井档案,需修改多个系统,而各个系统采用的技术不同,造成维护困难,同步困难。这就极大限制了系统的正常使用,极易造成系统间数据对不起来等现象。
数据库开发技术兼容性差:
有些系统的建成时间较早,所采用的技术,当时是合理的,但随着时间的推移,有些系统的技术已经落后,已不适应现在的管理要求。
标准及编码不统一:由于各系统分别建设,考虑问题的角度不同,采用的技术不同,造成各系统采用的标准及编码不统一,造成系统间的交流困难,同步困难,比如:同一班组在不同系统中,具有不同的编码,这就造成系统间的数据交流困难。同时造成跨系统的统计分析很难,甚至根本无法进行。这就要求各系统,一定要统一编码、统一标准。
数据结构不合理:在开发库的设计中,可能因为当时技术理论的限制,编码字段过多的使用了字符型,随着应用时间的推移,数据量加大,字符型编码将大大降低系统的运行速度。合理的设置应是尽量采用长整型数据;许多数据源点的记录中,缺少录入人、审核人等的记录,对数据的跟踪、安全管理等,形成隐患。
2采油厂数据中建设目标及涉及内容
2.1 数据中心建设的总体目标
把采油厂数据中心建成一个“源点唯一、分类采集、统一存放、授权共享”的企业级数据库体系,要达到“三化”目标,即数据结构的标准化、数据采集的准确化和数据应用的科学化,为信息应用向大范围、深层次的发展铺平道路。(1)源点唯一:研究采油厂生产经营管理机制,理清信息和数据流向,确定数据源点,确保一种数据只有唯一源点。分类采集:根据不同单位的业务范围和生产经营管理过程中产生的信息、数据的差异性,合理分类、科学组织,采取合适的方法分门别类地加以采集。(2)统一存放:详细规划数据库逻辑结构和物理结构,制订适合采油厂信息管理模式的各种标准规范,实现采油厂数据的统一存放、集中管理。(3)授权共享:研究一套数据共享机制和安全备份方案,为不同的用户分配相应的访问权限,满足用户的需求并保障数据中心的安全。
2.2 主要研究内容:确定数据源点,明确数据流向。业务调研涉及到采油厂的所有生产经营领域,包括生产科研、后勤保障、经营管理、人力资源等; 完成业务流程和数据流程分析。在业务调研的基础上,理顺业务关系,熟悉业务过程,完成业务流程和数据流程分析。提出数据中心数据整体组织方案。在业务流和数据流的基础上,详细分析数据库的数据,对数据库数据提出整体数据组织方案。制订数据库逻辑结构及填写规定。制定数据录入、入库、汇总、处理、规范化管理以及考核的相关办法和规定。制订数据中心相应的管理制度。完成安全管理机制研究。开发相关配套程序包括数据采集、查询、检查、加载等程序。
3 采油厂数据中心总体构架
采油厂数据中心所建立的不仅仅是用来管理数据的通用平台即数据库,而是构建支持分析决策的一体化数据资源平台。实现所有的技术方案、生产指挥、经营决策都由数据中心来支持。数据中心主要包括数据采集、数据管理和数据应用三个方面,针对采油厂的具体实际情况,下面详细介绍一下这三个方面的设计思路。
3.1数据采集
采油厂数据中心采集目标:要充分考虑到数据中心的业务覆盖范围,建立完善的数据采集体系,包括组织机构和相应软件,实现源点唯一、分类采集、统一存放。在信息化建设过程中,对采集信息范围的合理性、信息采集周期的时效性、信息采集对象(数据源点)的代表性和权威性、信息采集方法的可行性进行详细、深入地论证。在信息采集过程中,从用户的实际需要出发,对信息进行规划选择、收集和管理;采集的信息能够全面地、系统地、本质地、历史地反映事物的面貌及信息的相互联系性;有特色的进行信息采集,同时强调“一源多用”,避免重复采集。
3.2 数据管理
根据数据库的安全性、完整性、可用性需要,结合采油厂的实际情况,制定如下数据中心安全、恢复方案:数据中心安全总体方案:建立一个结构规范、约束完整、文档齐全的数据库;需要一位数据库安全管理员,负责数据库的安全;针对不同的数据库用户,仔细规划用户的各个特性:名称、用户验证方式、用户的缺省表空间、临时表空间和资源限制;审计某些可能伤害数据库的用户行为。数据中心恢复方案:针对不同的备份方法,确定相应的恢复方法和步骤;在测试环境中定期测试备份和恢复策略,熟悉恢复过程。
3.3 数据应用
建立采油厂数据中心目的是服务于各管理层次、各专业、各部门的生产、科研、经营、管理等诸多方面,所以要求达到分层次、分部门、分业务地数据应用。根据采油厂不同层次管理活动的特点,为不同层管理人员提供各自需要的数据和信息,帮助各个管理层次及时发现问题、分析问题、处理问题。管理层次越高,要求的信息综合度和概括度越高,管理层次越往下则对数据要求越精确详细。数据中心可以根据各管理层的需要分别提供相应的信息和数据,支持各个管理层的各项管理活动。在采油厂各个生产科研部门及生产辅助单位,要面向数据源,在目前的数据库基础上,结合数据管理需求,重新规划设计各种专业数据库,实现对数据源数据的分专业、分部门地应用。
4 结论
采油厂在建成统一的数据中心基础上,合理的规划开发应用软件系统,更好地为管理决策层及时、准确、方便的提供管理决策信息服务,提高工作效率。预计综合效益将提升20%。数据库高质量的存储和管理,保证采油厂重要历史数据的安全性、完整性和可用性。数据库的安全、备份和恢复机制,充分保证了数据中心的安全、高效的运行。统一数据项格式和内容,可减少人为调整因素,规范各基层人员的工作行为,使数据信息更加客观、准确。由于各计算机应用系统,统一了架构,统一了接口,统一了界面,所以预计全厂的IT维护成本将减轻40%。保障专业技术人员和生产管理人员快速获取高质量信息,提高了决策的及时性,准确性,从而大幅度地提高生产力水平。
参考文献
[1] 张龙祥等.数据库原理与设计.北京:人民邮电出版社,2002
[2] 林字等编著.数据仓库原理与实践.北京:人民邮电出版社,2003
作者简介:冷滨虹(1973.9-)女,胜利油田分公司滨南采油厂工程师。
关键词:数据中心;数据处理流程;数据存储中心;数据编码标准
1采油厂数据库建设中的管理现状
经过多年的发展,采油厂建成了多个计算机应用系统,随着时间的推移,科学技术的日新月异,这些系统暴露出这样或那样的多种问题,存在许多需要改进、深化的方面,归纳起来主要有以下几个方面:
信息孤岛现象:由于各个系统在当时分别独立建设,在设计时没有考虑与其他系统的联系,所以各个系统分别独立封闭运行,即不从其他系统获取数据,也不为其他系统提供信息,造成信息不能共享,形成一个个的信息孤岛,使许许多多的有价值的信息仅能在单个系统内使用,其它系统不能采用,不能发挥出这些系统的全部功效。
冗余数据现象:因为各系统分别开发,没有考虑借用其他系统的数据,所以各系统运行中需要的数据都要单独输入,这就造成许多数据的多次输入,重复输入,重复存储,造成了大量的数据容余,同时增加了工作量,加大了数据出错的概率,这就需要各系统统一数据结构、统一接口、统一数据源。
已有软件中存在数据瓶颈 :由于数据在数量和质量上得不到充分的保障,使得已有的应用软件系统不能充分地发挥作用。数据已经成为应用的瓶颈,数据建设迫在眉睫,而数据中心建设的目标之一就是解决这个应用瓶颈。
升级维护困难:因为各种基础数据分别存储于各个系统,如要修改一数据,就要想着同时修改多个系统中的统一数据,如修改钻井档案,需修改多个系统,而各个系统采用的技术不同,造成维护困难,同步困难。这就极大限制了系统的正常使用,极易造成系统间数据对不起来等现象。
数据库开发技术兼容性差:
有些系统的建成时间较早,所采用的技术,当时是合理的,但随着时间的推移,有些系统的技术已经落后,已不适应现在的管理要求。
标准及编码不统一:由于各系统分别建设,考虑问题的角度不同,采用的技术不同,造成各系统采用的标准及编码不统一,造成系统间的交流困难,同步困难,比如:同一班组在不同系统中,具有不同的编码,这就造成系统间的数据交流困难。同时造成跨系统的统计分析很难,甚至根本无法进行。这就要求各系统,一定要统一编码、统一标准。
数据结构不合理:在开发库的设计中,可能因为当时技术理论的限制,编码字段过多的使用了字符型,随着应用时间的推移,数据量加大,字符型编码将大大降低系统的运行速度。合理的设置应是尽量采用长整型数据;许多数据源点的记录中,缺少录入人、审核人等的记录,对数据的跟踪、安全管理等,形成隐患。
2采油厂数据中建设目标及涉及内容
2.1 数据中心建设的总体目标
把采油厂数据中心建成一个“源点唯一、分类采集、统一存放、授权共享”的企业级数据库体系,要达到“三化”目标,即数据结构的标准化、数据采集的准确化和数据应用的科学化,为信息应用向大范围、深层次的发展铺平道路。(1)源点唯一:研究采油厂生产经营管理机制,理清信息和数据流向,确定数据源点,确保一种数据只有唯一源点。分类采集:根据不同单位的业务范围和生产经营管理过程中产生的信息、数据的差异性,合理分类、科学组织,采取合适的方法分门别类地加以采集。(2)统一存放:详细规划数据库逻辑结构和物理结构,制订适合采油厂信息管理模式的各种标准规范,实现采油厂数据的统一存放、集中管理。(3)授权共享:研究一套数据共享机制和安全备份方案,为不同的用户分配相应的访问权限,满足用户的需求并保障数据中心的安全。
2.2 主要研究内容:确定数据源点,明确数据流向。业务调研涉及到采油厂的所有生产经营领域,包括生产科研、后勤保障、经营管理、人力资源等; 完成业务流程和数据流程分析。在业务调研的基础上,理顺业务关系,熟悉业务过程,完成业务流程和数据流程分析。提出数据中心数据整体组织方案。在业务流和数据流的基础上,详细分析数据库的数据,对数据库数据提出整体数据组织方案。制订数据库逻辑结构及填写规定。制定数据录入、入库、汇总、处理、规范化管理以及考核的相关办法和规定。制订数据中心相应的管理制度。完成安全管理机制研究。开发相关配套程序包括数据采集、查询、检查、加载等程序。
3 采油厂数据中心总体构架
采油厂数据中心所建立的不仅仅是用来管理数据的通用平台即数据库,而是构建支持分析决策的一体化数据资源平台。实现所有的技术方案、生产指挥、经营决策都由数据中心来支持。数据中心主要包括数据采集、数据管理和数据应用三个方面,针对采油厂的具体实际情况,下面详细介绍一下这三个方面的设计思路。
3.1数据采集
采油厂数据中心采集目标:要充分考虑到数据中心的业务覆盖范围,建立完善的数据采集体系,包括组织机构和相应软件,实现源点唯一、分类采集、统一存放。在信息化建设过程中,对采集信息范围的合理性、信息采集周期的时效性、信息采集对象(数据源点)的代表性和权威性、信息采集方法的可行性进行详细、深入地论证。在信息采集过程中,从用户的实际需要出发,对信息进行规划选择、收集和管理;采集的信息能够全面地、系统地、本质地、历史地反映事物的面貌及信息的相互联系性;有特色的进行信息采集,同时强调“一源多用”,避免重复采集。
3.2 数据管理
根据数据库的安全性、完整性、可用性需要,结合采油厂的实际情况,制定如下数据中心安全、恢复方案:数据中心安全总体方案:建立一个结构规范、约束完整、文档齐全的数据库;需要一位数据库安全管理员,负责数据库的安全;针对不同的数据库用户,仔细规划用户的各个特性:名称、用户验证方式、用户的缺省表空间、临时表空间和资源限制;审计某些可能伤害数据库的用户行为。数据中心恢复方案:针对不同的备份方法,确定相应的恢复方法和步骤;在测试环境中定期测试备份和恢复策略,熟悉恢复过程。
3.3 数据应用
建立采油厂数据中心目的是服务于各管理层次、各专业、各部门的生产、科研、经营、管理等诸多方面,所以要求达到分层次、分部门、分业务地数据应用。根据采油厂不同层次管理活动的特点,为不同层管理人员提供各自需要的数据和信息,帮助各个管理层次及时发现问题、分析问题、处理问题。管理层次越高,要求的信息综合度和概括度越高,管理层次越往下则对数据要求越精确详细。数据中心可以根据各管理层的需要分别提供相应的信息和数据,支持各个管理层的各项管理活动。在采油厂各个生产科研部门及生产辅助单位,要面向数据源,在目前的数据库基础上,结合数据管理需求,重新规划设计各种专业数据库,实现对数据源数据的分专业、分部门地应用。
4 结论
采油厂在建成统一的数据中心基础上,合理的规划开发应用软件系统,更好地为管理决策层及时、准确、方便的提供管理决策信息服务,提高工作效率。预计综合效益将提升20%。数据库高质量的存储和管理,保证采油厂重要历史数据的安全性、完整性和可用性。数据库的安全、备份和恢复机制,充分保证了数据中心的安全、高效的运行。统一数据项格式和内容,可减少人为调整因素,规范各基层人员的工作行为,使数据信息更加客观、准确。由于各计算机应用系统,统一了架构,统一了接口,统一了界面,所以预计全厂的IT维护成本将减轻40%。保障专业技术人员和生产管理人员快速获取高质量信息,提高了决策的及时性,准确性,从而大幅度地提高生产力水平。
参考文献
[1] 张龙祥等.数据库原理与设计.北京:人民邮电出版社,2002
[2] 林字等编著.数据仓库原理与实践.北京:人民邮电出版社,2003
作者简介:冷滨虹(1973.9-)女,胜利油田分公司滨南采油厂工程师。