主机无缝整合大数据“OLTAP”

来源 :中国计算机报 | 被引量 : 0次 | 上传用户:tianchaoguoshi
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
  主机经过近40年的创新发展,将怎样应对已经到来的大数据时代?在近日举行的2013 IBM System z高峰论坛上,IBM系统与科技部主机产品部大中华区总经理施东峰提出了“OLTAP”的概念以及主机应对优势,他表示:“在大数据时代,主机同样是核心应用平台,它可以在单一平台上实现交易处理(OLTP)和决策分析支持(OLAP)的无缝整合(OLTAP)。”
  大数据应用分解
  据相关机构预测,大数据同期增速为整体IT市场的四倍,服务器市场的五倍,高于同期的云计算市场。IBM预计,2012~2017年主机平台大数据年复合增长率将高达60%以上。那么,在Hadoop、分布式计算闪耀大数据市场的今天,主机的优势到底在哪里?
  在IBM看来,大数据的应用不仅仅是目前所知的适合分布式计算的信息获取,信息的收集和管理仅仅是大数据的初级应用阶段。大数据应当分为信息获取型、交易型和分析型三类,而大数据应用的关键在于交易和分析:大数据不仅是信息检索查询等信息收集型应用(仅占16.6%),交易型和分析型应用(OLTAP)(占投入的83.4%)才是用户实施大数据的最终目标。未来,交易和分析型应用的比重将持续上升,而这正是IBM主机的价值和优势所在。
  这三种不同类型的大数据应用分别适宜怎样的计算平台架构呢?信息获取型适宜分解的大数据应用,它的需求特色是简单的数据处理,目标以查询为主,具备有规律的访问模式,I/O读取能力相对重要,采用标准的集群模式;而交易型和分析型(OLTAP)不适宜分解的大数据应用,它的需求特色是复杂的数据处理(如图像处理),目标是交易和分析,不规律的数据访问,内存和计算能力相对重要,强调单节点处理能力。因此,OLTAP类应用所需的平台与信息获取型不同。
  应对大数据3V
  对于大数据的“3V”特征——Volume(数据量规模庞大)、Variety(数据产生及存储的多样性)、Velocity(即时数据处理及分析的要求),IBM主机都可以应对挑战:System z能够凭借海量处理能力和强大的扩展力,有效应对海量数据带来的挑战;超强的虚拟化能力和混合架构体系帮助实现数据整合,有效降低数据多样性带来的数据分析复杂度;主机最新的DB2数据分析加速器(IDAA)及SPSS预测分析等技术帮助完成OLTAP类应用,并能满足实时业务分析的新需求。
  大数据中的交易型数据,需要即时、安全、可扩展性和高可用的平台;而分析型数据则需要海量处理和实时分析数据的能力。从数据交易(OLTP)应用来看,在单机环境下,主机具有最快的CPU主频5.5GHz,单机可配置CPU 101颗,主机独有的4级缓存架构还可充分发挥高主频CPU性能,单机处理能力高达78000MIPS(每秒处理百万级的机器语言指令数)。而在多机Parallel Sysplex系统综合体环境下,主机具备高达32个节点的物理扩展能力,独有的耦合器设计保障最佳线路扩展。诞生于1988年的硬件逻辑分区技术,支持Z/OS、ZVM、ZLinux等多种多任务操作系统,支持数百上千的Linux镜像,混合负载下典型利用率在85%以上,这些超强的虚拟化能力帮助主机实现高效负载和数据整合,而zEnterprise混合体系架构通过支持不同处理器和包括ZOS、AIX、Linux、Windows多种主流的操作系统,可实现异构环境的整合。
  尤其值得一提的是主机在数据分析应用领域(OLAP)的技术创新。从传统的商业智能向交易实时分析推进,用户所面临的技术挑战是数据拷贝和移动的需求,以及多平台架构共存导致的维护和管理的复杂性。主机的性能可以最大程度地减少数据拷贝和移动,统一平台管理,降低复杂度。DB2数据分析加速器(IDAA)可以帮助主机实现OLTP和OLAP的高效无缝整合。IDAA基于成熟的PureData(Netezza)技术,可以大幅降低复杂查询的响应时间,提高分析应用的实时性,大幅降低数据移动的需求,降低分析应用的设计和开发复杂度。IDAA和DB2紧密集成,应用更为透明,DB2可自动调度。
  此外,SPSS技术可以帮助主机在实现在线交易实时分析上更具优势,SPSS自定义函数可实现按需调用。有了高端的主机硬件架构和最新的软件技术,在大数据时代,主机依然通过创新保持核心平台的地位。
其他文献
苹果要抄微软Xbox的后路?  近日,英特尔以4000万美元买下了一家以色列体感技术公司Omek。两天前,传出苹果正在和另一家以色列科技公司PrimeSense谈判,拟斥资2.8亿美元收购之。英特尔、苹果先后参与巨额并购,被洽购的都是以色列企业,而且都聚焦于体感识别技术,这样的巧合想不吸引眼球都难。  并购Omek公司将有助于英特尔将更炫的体感技术应用于超极本以及其他计算设备上。也许未来,我们只用
本报讯 近日,联想集团在京举行2013年誓师大会。会上,联想集团董事长兼CEO杨元庆表示,联想集团将全面实施PC 战略,并将竞争目标指向苹果和三星。  杨元庆表示,去年联想全球PC销量增长10%,市场份额接近16%;智能手机销量比前年增长了5倍,首次进入全球市场前五名;平板电脑销量增长两倍。  在移动互联浪潮的冲击下,PC市场的增长空间越来越小。杨元庆表示,传统的PC业务仍然是联想的“粮仓”,要继
在云计算时代,企业如何从传统基础架构向云架构转型是个棘手的问题。曾经担任EMC公司首席信息官的EMC执行副总裁Sanjay Mirchandani表示:“我们一直在实施IT基础架构的变革,包括实现虚拟化、自动化和云计算。”  给客户更多的选择权  2008年,EMC公司35%的服务器已经虚拟化,到2010年服务器虚拟化的比例提升至75%,目前服务器虚拟化的比例已经达到92%。Sanjay Mirc
虽然大数据一体机还没有确切的定义,但它已经成为厂商在IT领域争夺的一大战场。当国际厂商Oralce、SAP、IBM、EMC、微软等公司纷纷发布大数据一体机之后,国内厂商岂能视若无睹?要知道,在中国,大数据产业具有重要意义,它是转型发展的重要推动力,具有广阔的市场前景。  “大数据是一个刚出现不久的新领域,虽然IBM等国际企业在其他领域占有巨大优势,但是大数据还是一个没有领导者的、充分竞争的领域。这
证通电子证通电子专注于金融支付信息安全领域近20年,具备较强的金融产品研发和市场优势。  深圳市证通电子股份有限公司(简称证通电子)证通电子专注于金融支付信息安全领域近20年,具备较强的金融产品研发和市场优势。,其产品类别涵盖金融自助服务终端、金融POS终端、金融支付信息安全产品、商用数据加密设备和公共通信终端产品等。  证通电子创立于1993年,经过多年的高速发展,现已成为拥有员工1200人,注
在香港举行的OpenStack峰会上,记者见到了SUSE行业创新、新兴标准和开源总监兼OpenStack基金会主席Alan Clack。在来香港参会之前,他先后在北京、深圳做短暂停留,参加了一系列与云和开源有关的活动,包括与中国开源云联盟进行交流,在北京邮电大学进行了有关开源的公开讲座,又与曙光、华为等厂商进行了深入沟通。对北美之外最活跃的OpenStack市场——中国,Alan Clack显然充
本报讯 3月28日,“2013中国半导体市场年会暨第二届集成电路产业创新大会(IC Market China 2013)”在西安召开。本次年会由中国半导体行业协会、中国电子信息产业发展研究院、西安高新区管理委员会联合主办,赛迪顾问股份有限公司、西安市集成电路产业发展中心、陕西省半导体行业协会承办。  本次年会以“聚焦内需新兴市场,共促产业变革创新”为主题,聚焦“移动互联网芯片技术与应用市场”、“智
“他给这么一大批浑小子留下了不少东西,他们学也学不完。可他自己呢,身在雨季,心却在渴望明媚的阳光。”迈斯特的一位朋友曾这样评价他给美国在线留下的遗产。这位美国在线的真正创始人离开公司时是“净身出户”,因此没有享受到美国在线上市带来的巨大财富。他在美国在线上市前后被查出得了癌症。在此期间,他仍孜孜不倦地搞一些项目,其中一个项目是把传真机与计算机连接起来传送政府文件。  微软创始人保罗·艾伦说过:“什
在2013中国IT市场年会上,荣获“2012——2013中国协同应用管理软件市场年度‘成功企业’及‘年度创新产品’”称号的珠海飞企软件有限公司(简称飞企软件)格外引人注目。这已经是飞企软件第二次在中国IT市场年会获奖了。这个管理软件领域异军突起的“新兵”到底有什么过人之处呢?  协同软件搭船出海  珠海飞企软件有限公司成立于1998年,现如今已经是一家拥有核心技术的快速成长的创新型高新技术企业。目
众所周知,VMware的技术体系分成三层,由下至上分别为云基础架构、云应用平台以及企业终端计算。最近发生的两件事让VMware的云之旅有了微调:一是帕特·基辛格担任VMware公司的首席执行官,二是VMware与EMC成立了一家独立运作的合资公司Pivotal。  三层架构到三个目标  帕特·基辛格上任后对公司的架构和技术体系进行了调整,原来三层架构中的云应用平台层消失了,三层架构变成了三个新业务