论文部分内容阅读
随着信息存储技术、处理分析技术的发展和云计算等新兴信息技术应用模式的出现，人们使用IT资源的成本在逐渐降低，汇聚、存储、组合数据再分析的能力超过以往，且数据对业务增长的价值也逐渐凸显，这才使得大数据的概念又得到重视。
IT行业总不乏新鲜的主题，而大数据正当其兴，被业界热情传诵，“数据是一种资产”的概念已成为毫无疑问的共识。EMC、惠普、IBM、微软、谷歌等全球IT巨头纷纷针对大数据加紧部署，诸多行业领域的用户也在期盼着大数据成为重要生产因素，进而推动新一波生产率增长和消费者盈余浪潮到来的时刻。
随着信息存储技术、处理分析技术的发展和云计算等新兴信息技术应用模式的出现，人们使用IT资源的成本在逐渐降低，汇聚、存储、组合数据再分析的能力超过以往，且数据对业务增长的价值也逐渐凸显，这才使得大数据的概念又得到重视。因此，不仅要从历史角度去看大数据概念的源起，也要从发展角度理解大数据的含义。一方面，大数据是一个相对概念，并没有严格的标准限定多大规模的数据才是大数据，且随着时间推移、技术进步，符合大数据资格的数据集合的规模也会随之增长。另一方面，与另一个概念“海量数据”不同，大数据不仅指一类对象，更代表一种对大规模数据进行采集、存储、处理、分析的技术能力。
这样的对象与这样的技术能力组合在一起，就赋予了大数据三大主要属性。一是数据量规模可观。TB、PB成为计量大数据的起步单位，而全球在2011年创建和复制的数据量达到了惊人的1.8ZB。二是数据类型多样化。结构化数据已被视为小菜一碟，图片、音频、视频等非结构化数据正以传统结构化数据增长的两倍速快速创建。三是线性搜索、事后分析等技术已无法适应大数据处理的快速化要求，以“1秒”为目标的实时处理成为大数据的又一重要属性。
如不出意外，大数据将会以前所未有的速度改变人们的生产和生活。广阔的应用空间将给大数据以及其所在的信息产业带来广阔的发展空间。一方面，作为一种新型的技术和架构，从基础设施到分析应用，大数据的处理方式和工具都与传统不同。例如，Hadoop网格集群环境的IT架构和组织方式就与虚拟化IT环境差异很大。这种差异将推动数据中心的战略转型。另一方面，大数据也将成为云计算、物联网和移动互联网发展的催化剂。云计算快速部署、弹性伸缩、按量计价等特性不仅为在短期内部署大数据应用提供了可能，而且大数据的发展能够为分析、挖掘云计算、物联网、移动互联网平台所采集和产生的海量数据提供最得力的工具。
那么，如何把握机遇，发展和应用好大数据，而不会陷入概念热炒之中？个人认为，应注意做好三件事。
一是要找准定位。大数据是一个相对概念，各领域、各部门和各地区的大数据强度都不同。必须结合自身的发展实际，不能盲目跟风，在已有基础设施条件和软件配备下，循序渐进。
二是要择优切入。大数据产业链参与者众多，覆盖面广，按照产品形态，分为硬件、基础软件和应用软件三大领域，又与数据挖掘、智能分析紧密关联。同时，要注重大数据与云计算结合发展，提高大数据处理能力。
三是要打好基础。数据全生命周期涵盖采集、存储、处理、管理、应用和安全，需要结合云计算技术，加快数据采集、汇总，加快开发和建设数据分析规则库、知识库，为实现大数据的处理、管理、应用提供支撑。
IT行业总不乏新鲜的主题，而大数据正当其兴，被业界热情传诵，“数据是一种资产”的概念已成为毫无疑问的共识。EMC、惠普、IBM、微软、谷歌等全球IT巨头纷纷针对大数据加紧部署，诸多行业领域的用户也在期盼着大数据成为重要生产因素，进而推动新一波生产率增长和消费者盈余浪潮到来的时刻。
随着信息存储技术、处理分析技术的发展和云计算等新兴信息技术应用模式的出现，人们使用IT资源的成本在逐渐降低，汇聚、存储、组合数据再分析的能力超过以往，且数据对业务增长的价值也逐渐凸显，这才使得大数据的概念又得到重视。因此，不仅要从历史角度去看大数据概念的源起，也要从发展角度理解大数据的含义。一方面，大数据是一个相对概念，并没有严格的标准限定多大规模的数据才是大数据，且随着时间推移、技术进步，符合大数据资格的数据集合的规模也会随之增长。另一方面，与另一个概念“海量数据”不同，大数据不仅指一类对象，更代表一种对大规模数据进行采集、存储、处理、分析的技术能力。
这样的对象与这样的技术能力组合在一起，就赋予了大数据三大主要属性。一是数据量规模可观。TB、PB成为计量大数据的起步单位，而全球在2011年创建和复制的数据量达到了惊人的1.8ZB。二是数据类型多样化。结构化数据已被视为小菜一碟，图片、音频、视频等非结构化数据正以传统结构化数据增长的两倍速快速创建。三是线性搜索、事后分析等技术已无法适应大数据处理的快速化要求，以“1秒”为目标的实时处理成为大数据的又一重要属性。
如不出意外，大数据将会以前所未有的速度改变人们的生产和生活。广阔的应用空间将给大数据以及其所在的信息产业带来广阔的发展空间。一方面，作为一种新型的技术和架构，从基础设施到分析应用，大数据的处理方式和工具都与传统不同。例如，Hadoop网格集群环境的IT架构和组织方式就与虚拟化IT环境差异很大。这种差异将推动数据中心的战略转型。另一方面，大数据也将成为云计算、物联网和移动互联网发展的催化剂。云计算快速部署、弹性伸缩、按量计价等特性不仅为在短期内部署大数据应用提供了可能，而且大数据的发展能够为分析、挖掘云计算、物联网、移动互联网平台所采集和产生的海量数据提供最得力的工具。
那么，如何把握机遇，发展和应用好大数据，而不会陷入概念热炒之中？个人认为，应注意做好三件事。
一是要找准定位。大数据是一个相对概念，各领域、各部门和各地区的大数据强度都不同。必须结合自身的发展实际，不能盲目跟风，在已有基础设施条件和软件配备下，循序渐进。
二是要择优切入。大数据产业链参与者众多，覆盖面广，按照产品形态，分为硬件、基础软件和应用软件三大领域，又与数据挖掘、智能分析紧密关联。同时，要注重大数据与云计算结合发展，提高大数据处理能力。
三是要打好基础。数据全生命周期涵盖采集、存储、处理、管理、应用和安全，需要结合云计算技术，加快数据采集、汇总，加快开发和建设数据分析规则库、知识库，为实现大数据的处理、管理、应用提供支撑。