论文部分内容阅读
摘 要:企业数据库建设目标是消除数据孤岛、降低数据冗余等问题,通过采取统一数据、统一界面、统一接口、实现数据共享等措施提供集成平台;为改进生产经营的整体应用水平,改善应用环境、降低费用、提高全员劳动生产率,为科学生产经营分析提供了更加全面、及时、精确的数据。
关键词:数据处理流程;数据存储中心;数据编码标准
前言
经过多年的发展,油田企业建成了多个计算机应用系统,这些系统为信息事业的发展,做出了巨大的贡献。通过“数据中心”系统的建设,将从一个全新的高度全面审视的数据资源的应用,改正不足,统一规划;将第一次对全厂的各个业务口,统一管理,协调工作,全面摸清的數据源点;做到各种数据,在数据发生的第一时间,一次性输入,准确及时的记录到计算机系统中;改进现有计算机系统的缺陷、理顺业务关系、为以后的计算机开发应用提供可靠的保证;改善应用环境、降低费用、提高全员劳动生产率;将提供更加全面、及时、精确、科学的生产经营分析数据、提高生产经营预决策水平;将为以后开发的各种应用系统提供可靠保证和建设性的方针;通过同一架构,大大降低开发的难度,提高开发质量,使各计算机应用系统结合为一个和谐统一的有机整体。
1 数据库建设存在问题
系统暴露问题,需要改进、深化的方面:(1)信息孤岛现象:各个系统分别独立封闭运行,即不从其他系统获取数据,也不为其他系统提供信息,造成信息不能共享。(2)冗余数据现象:各系统运行中需要的数据都要单独输入,这就造成许多数据的多次输入,重复输入,重复存储,造成了大量的数据容余,同时增加了工作量,加大了数据出错的概率,这就需要各系统统一数据结构、统一接口、统一数据源。(3)已有软件中存在数据瓶颈:已有的应用软件系统不能充分地发挥作用。(4)升级维护困难:因为各种基础数据分别存储于各个系统,如要修改一数据,就要想着同时修改多个系统中的统一数据,如修改钻井档案,需修改多个系统,而各个系统采用的技术不同,造成维护困难,同步困难。这就极大限制了系统的正常使用,极易造成系统间数据对不起来等现象。(5)数据库开发技术兼容性差:随着时间的推移,有些系统的技术已经落后,已不适应现在的管理要求。(6)标准及编码不统一:由于各系统分别建设,考虑问题的角度不同,采用的技术不同,造成各系统采用的标准及编码不统一,造成系统间的交流困难,同步困难。(7)数据结构不合理:在开发库的设计中,可能因为当时技术理论的限制,编码字段过多的使用了字符型,随着应用时间的推移,数据量加大,字符型编码将大大降低系统的运行速度。
2数据中建设目标及涉及内容
2.1 数据中心建设的总体目标
企业把数据中心建成一个“源点唯一、分类采集、统一存放、授权共享”的企业级数据库体系,要达到“三化”目标,即数据结构的标准化、数据采集的准确化和数据应用的科学化,为信息应用向大范围、深层次的发展铺平道路。(1)源点唯一:研究生产经营管理机制,理清信息和数据流向,确定数据发生的源点,确保一种数据只有唯一源点。(2)分类采集:根据不同单位的业务范围和生产经营管理过程中产生的信息、数据的差异性,合理分类、科学组织,采取合适的方法分门别类地加以采集。(3)统一存放:详细规划数据库逻辑结构和物理结构,制订适合信息管理模式的各种标准规范,实现数据的统一存放、集中管理。(4)授权共享:研究一套数据共享机制和安全备份方案,为不同的用户分配相应的访问权限,满足用户的需求并保障数据中心的安全。
2.2 主要研究内容
企业数据中心建设涉及的内容多,范围广,进行数据中心建设:确定数据源点,明确数据流向。业务调研涉及到的所有生产经营领域,包括生产科研、后勤保障、经营管理、人力资源等;完成业务流程和数据流程分析。在业务调研的基础上,理顺业务关系,熟悉业务过程,完成业务流程和数据流程分析。提出数据中心数据整体组织方案。在业务流和数据流的基础上,详细分析数据库的数据,对数据库数据提出整体数据组织方案。制订数据库逻辑结构及填写规定。制定数据录入、入库、汇总、处理、规范化管理以及考核的相关办法和规定。制订数据中心相应的管理制度。完成安全管理机制研究。开发相关配套程序包括数据采集、查询、检查、加载等程序。
3 数据中心总体构架
企业数据中心所建立的不仅仅是用来管理数据的通用平台即数据库,而是构建支持分析决策的一体化数据资源平台。实现所有的技术方案、生产指挥、经营决策都由数据中心来支持。数据中心主要包括数据采集、数据管理和数据应用三个方面,针对的具体实际情况,下面详细介绍一下这三个方面的设计思路。
3.1数据采集:数据中心采集目标:要充分考虑到数据中心的业务覆盖范围,建立完善的数据采集体系,包括组织机构和相应软件,实现源点唯一、分类采集、统一存放。在信息化建设过程中,对采集信息范围的合理性、信息采集周期的时效性、信息采集对象(数据源点)的代表性和权威性、信息采集方法的可行性进行详细、深入地论证。在信息采集过程中,从用户的实际需要出发,对信息进行规划选择、收集和管理;采集的信息能够全面地、系统地、本质地、历史地反映事物的面貌及信息的相互联系性;有特色的进行信息采集,同时强调“一源多用”,避免重复采集。
3.2 数据管理:根据数据库的安全性、完整性、可用性需要,结合的实际情况,制定如下数据中心安全、恢复方案:数据中心安全总体方案:建立一个结构规范、约束完整、文档齐全的数据库;需要一位数据库安全管理员,负责数据库的安全;针对不同的数据库用户,仔细规划用户的各个特性:名称、用户验证方式、用户的缺省表空间、临时表空间和资源限制;审计某些可能伤害数据库的用户行为。数据中心恢复方案:针对不同的备份方法,确定相应的恢复方法和步骤;在测试环境中定期测试备份和恢复策略,熟悉恢复过程。
3.3 数据应用:建立数据中心目的是服务于各管理层次、各专业、各部门的生产、科研、经营、管理等诸多方面,所以要求达到分层次、分部门、分业务地数据应用。根据不同层次管理活动的特点,为不同层管理人员提供各自需要的数据和信息,帮助各个管理层次及时发现问题、分析问题、处理问题。管理层次越高,要求的信息综合度和概括度越高,管理层次越往下则对数据要求越精确详细。数据中心可以根据各管理层的需要分别提供相应的信息和数据,支持各个管理层的各项管理活动。在各个生产科研部门及生产辅助单位,要面向数据源,在目前的数据库基础上,结合数据管理需求,重新规划设计各种专业数据库,实现对数据源数据的分专业、分部门地应用。
3 结论
数据中心是一个包含生产科研、财务资产、人力资源等覆盖全部生产经营管理信息的数据库体系,同时也健立一套适用于一级的信息建设的标准化和管理考核制度,全面提升的信息管理水平,生产经营管理水平,和油田开发水平,为生产经营管理方式带来全新的变化:
参考文献
[1] 林字等编著.数据仓库原理与实践.北京:人民邮电出版社,2003.
关键词:数据处理流程;数据存储中心;数据编码标准
前言
经过多年的发展,油田企业建成了多个计算机应用系统,这些系统为信息事业的发展,做出了巨大的贡献。通过“数据中心”系统的建设,将从一个全新的高度全面审视的数据资源的应用,改正不足,统一规划;将第一次对全厂的各个业务口,统一管理,协调工作,全面摸清的數据源点;做到各种数据,在数据发生的第一时间,一次性输入,准确及时的记录到计算机系统中;改进现有计算机系统的缺陷、理顺业务关系、为以后的计算机开发应用提供可靠的保证;改善应用环境、降低费用、提高全员劳动生产率;将提供更加全面、及时、精确、科学的生产经营分析数据、提高生产经营预决策水平;将为以后开发的各种应用系统提供可靠保证和建设性的方针;通过同一架构,大大降低开发的难度,提高开发质量,使各计算机应用系统结合为一个和谐统一的有机整体。
1 数据库建设存在问题
系统暴露问题,需要改进、深化的方面:(1)信息孤岛现象:各个系统分别独立封闭运行,即不从其他系统获取数据,也不为其他系统提供信息,造成信息不能共享。(2)冗余数据现象:各系统运行中需要的数据都要单独输入,这就造成许多数据的多次输入,重复输入,重复存储,造成了大量的数据容余,同时增加了工作量,加大了数据出错的概率,这就需要各系统统一数据结构、统一接口、统一数据源。(3)已有软件中存在数据瓶颈:已有的应用软件系统不能充分地发挥作用。(4)升级维护困难:因为各种基础数据分别存储于各个系统,如要修改一数据,就要想着同时修改多个系统中的统一数据,如修改钻井档案,需修改多个系统,而各个系统采用的技术不同,造成维护困难,同步困难。这就极大限制了系统的正常使用,极易造成系统间数据对不起来等现象。(5)数据库开发技术兼容性差:随着时间的推移,有些系统的技术已经落后,已不适应现在的管理要求。(6)标准及编码不统一:由于各系统分别建设,考虑问题的角度不同,采用的技术不同,造成各系统采用的标准及编码不统一,造成系统间的交流困难,同步困难。(7)数据结构不合理:在开发库的设计中,可能因为当时技术理论的限制,编码字段过多的使用了字符型,随着应用时间的推移,数据量加大,字符型编码将大大降低系统的运行速度。
2数据中建设目标及涉及内容
2.1 数据中心建设的总体目标
企业把数据中心建成一个“源点唯一、分类采集、统一存放、授权共享”的企业级数据库体系,要达到“三化”目标,即数据结构的标准化、数据采集的准确化和数据应用的科学化,为信息应用向大范围、深层次的发展铺平道路。(1)源点唯一:研究生产经营管理机制,理清信息和数据流向,确定数据发生的源点,确保一种数据只有唯一源点。(2)分类采集:根据不同单位的业务范围和生产经营管理过程中产生的信息、数据的差异性,合理分类、科学组织,采取合适的方法分门别类地加以采集。(3)统一存放:详细规划数据库逻辑结构和物理结构,制订适合信息管理模式的各种标准规范,实现数据的统一存放、集中管理。(4)授权共享:研究一套数据共享机制和安全备份方案,为不同的用户分配相应的访问权限,满足用户的需求并保障数据中心的安全。
2.2 主要研究内容
企业数据中心建设涉及的内容多,范围广,进行数据中心建设:确定数据源点,明确数据流向。业务调研涉及到的所有生产经营领域,包括生产科研、后勤保障、经营管理、人力资源等;完成业务流程和数据流程分析。在业务调研的基础上,理顺业务关系,熟悉业务过程,完成业务流程和数据流程分析。提出数据中心数据整体组织方案。在业务流和数据流的基础上,详细分析数据库的数据,对数据库数据提出整体数据组织方案。制订数据库逻辑结构及填写规定。制定数据录入、入库、汇总、处理、规范化管理以及考核的相关办法和规定。制订数据中心相应的管理制度。完成安全管理机制研究。开发相关配套程序包括数据采集、查询、检查、加载等程序。
3 数据中心总体构架
企业数据中心所建立的不仅仅是用来管理数据的通用平台即数据库,而是构建支持分析决策的一体化数据资源平台。实现所有的技术方案、生产指挥、经营决策都由数据中心来支持。数据中心主要包括数据采集、数据管理和数据应用三个方面,针对的具体实际情况,下面详细介绍一下这三个方面的设计思路。
3.1数据采集:数据中心采集目标:要充分考虑到数据中心的业务覆盖范围,建立完善的数据采集体系,包括组织机构和相应软件,实现源点唯一、分类采集、统一存放。在信息化建设过程中,对采集信息范围的合理性、信息采集周期的时效性、信息采集对象(数据源点)的代表性和权威性、信息采集方法的可行性进行详细、深入地论证。在信息采集过程中,从用户的实际需要出发,对信息进行规划选择、收集和管理;采集的信息能够全面地、系统地、本质地、历史地反映事物的面貌及信息的相互联系性;有特色的进行信息采集,同时强调“一源多用”,避免重复采集。
3.2 数据管理:根据数据库的安全性、完整性、可用性需要,结合的实际情况,制定如下数据中心安全、恢复方案:数据中心安全总体方案:建立一个结构规范、约束完整、文档齐全的数据库;需要一位数据库安全管理员,负责数据库的安全;针对不同的数据库用户,仔细规划用户的各个特性:名称、用户验证方式、用户的缺省表空间、临时表空间和资源限制;审计某些可能伤害数据库的用户行为。数据中心恢复方案:针对不同的备份方法,确定相应的恢复方法和步骤;在测试环境中定期测试备份和恢复策略,熟悉恢复过程。
3.3 数据应用:建立数据中心目的是服务于各管理层次、各专业、各部门的生产、科研、经营、管理等诸多方面,所以要求达到分层次、分部门、分业务地数据应用。根据不同层次管理活动的特点,为不同层管理人员提供各自需要的数据和信息,帮助各个管理层次及时发现问题、分析问题、处理问题。管理层次越高,要求的信息综合度和概括度越高,管理层次越往下则对数据要求越精确详细。数据中心可以根据各管理层的需要分别提供相应的信息和数据,支持各个管理层的各项管理活动。在各个生产科研部门及生产辅助单位,要面向数据源,在目前的数据库基础上,结合数据管理需求,重新规划设计各种专业数据库,实现对数据源数据的分专业、分部门地应用。
3 结论
数据中心是一个包含生产科研、财务资产、人力资源等覆盖全部生产经营管理信息的数据库体系,同时也健立一套适用于一级的信息建设的标准化和管理考核制度,全面提升的信息管理水平,生产经营管理水平,和油田开发水平,为生产经营管理方式带来全新的变化:
参考文献
[1] 林字等编著.数据仓库原理与实践.北京:人民邮电出版社,2003.