Hadoop降低数据分析门槛

来源 :计算机世界 | 被引量 : 0次 | 上传用户:yanyong
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
  数据是一种资产,这已经成为越来越多人的共识。但要利用好数据、真正让数据发挥其价值并不是一件容易的事情。这其中有着很高的技术门槛和资金门槛,因此,很长时间以来数据挖掘、商业智能距离大多数中小企业都很遥远,即使相关厂商不断努力让数据分析技术“平民化”,而今数据的爆炸性增长更是加剧了这种挑战。
  “过去我们只有在企业中、在工作状态中才会产生数据,而在云计算、社交媒体和移动计算高度普及的今天,我们几乎24小时在生产数据,从而迎来了大数据时代。这就使得企业在数据的处理上面临相当大的压力。”Informatica高级副总裁兼首席信息官托尼·杨在日前举行的“2012 Informatica 全球巡展(北京站)”上表示。作为一家以数据集成为主要业务的公司CIO,托尼·杨对于数据的爆炸性增长有着更为直接的体会。
  托尼·杨认为,大数据时代建立在传统的基于数据仓库之上的数据分析处理方法面临着很大局限性,至少从性价比(数据的价值/数据的成本)上来看。一方面,数据仓库的建设不管是软硬件的购置还是数据的准备都涉及很大的投入;而另一方面,数据仓库的部署以及随后的数据建模及其分析都需要专业人士的参与。另外,过去的数据分析方法都是面向传统的结构化数据,而对非结构化数据的处理并不擅长。这也正是Hadoop广受欢迎的主要原因之一。
  “Hadoop的出现将大幅降低数据分析和处理的门槛,提高数据的回报率。”Informatica核心技术部资深产品管理总监郑玮表示。
  在郑玮看来,Hadoop可以从两个方面降低数据处理和分析的成本。其一,Hadoop是开源软件,尽管并不意味着免费,但和商业软件相比,其采购成本要低得多;其二,Hadoop是为普通的硬件设备而设计,本身已经充分考虑到这些硬件的不可靠性,而不是专用硬件,这就大幅降低了硬件投入成本。不过,在郑玮看来,Hadoop的最大价值在于它让我们可以以一种全新的、高回报率的方式来创新性地处理数据。比如,很多电子商务网站利用它来分析访客的行为,从而做出更科学的营销策略,一些半导体企业利用它来帮助分析产品缺陷。而为了帮助企业用好Hadoop,Informatica在其最新的产品Informatica 9.5中特别新增了一些功能模块,包括帮助企业把数据转载入Hadoop、探查Hadoop中数据的质量以及把数据从Hadoop中导入数据仓库中等。
  “降低数据的成本,同时提高数据的价值,另外,即使你是一个小企业,也可以用好大数据,这就是Hadoop的最大价值。”郑玮表示。
其他文献
MarketLive公司在最近《多渠道顾客的想法》调查中称,16%的调查对象打算在节假日和购物旺季通过智能手机或平板电脑来完成大多数的交易,这比2011年的3%有了大幅提升。此外,美国零售联合会的节假日消费者购物调查也显示,53%拥有智能手机和64%拥有平板电脑的顾客打算用移动设备来购买节假日礼物。  虽然移动商务、移动应用程序和二维码存在已有一段时日,但许多零售商仍未能有效利用这些重要的营销工具
Gartner:2016年Android设备数量超Windows  本报讯 10月24日,Gartner发布报告称,在未来4年内,基于谷歌Android操作系统的计算设备数量将超过Windows设备。Gartner预计,到2016年底,将有23亿部计算机、平板电脑和智能手机使用Android,而Windows设备数量为22.8亿部。相比之下,到今年年底,Windows设备数量将达到15亿部,而An
每当出现一种新的存储介质,或者介质技术有了新的发展,就会有人预测:磁带技术将要终结了!近二三十年以来,磁带技术一直是在不断的怀疑中发展前行。    其实,不可否认,随着磁盘技术和一系列存储技术的发展,磁带市场的确受到了很大的影响,这从大多数磁带厂商日益不景气,或者改变了主攻方向就可以看出来。不过,同样毋庸置疑,在数据保护日益重要的今天,磁带仍然有其用武之地,在备份和归档领域具有不可替代性,并且随着
百度第三期的移动产品媒体开放日,聚焦的是“百度移动搜索”。面对用户高标准、多元化、个性化的搜索需求,百度移动搜索也在不断改变。  就移动场景下用户搜索时更关注当前或下步行动的信息需求,百度推出实效搜索功能,以求让用户第一时间获取和“关键词”相匹配的最新信息。比如搜索“NBA”,用户除了获得正在进行的球赛相关的比分等信息内容外,还能看到网友对赛事的最新讨论。  “百度移动搜索就像一个贴心的小秘书,把
7月6日,Creative创新科技发布了包括模块化无线蓝牙音箱、蓝牙耳机、蓝牙媒体播放机在内的多款无线音乐产品。其中ZiiSOUND D5x/D3x/DSx 3款无线模块化蓝牙音箱,可以独立连接蓝牙装置进行无线遥控播放和控制,还可以灵活组合,既能以单个音箱实现立体声效果,也可以多个音箱搭建3.1多声道家用音响系统。
虽说如今的无线路由器纷繁复杂、造型各异,但对于用户而言,选购时有几个基本要素是要考虑的,比如外观、信号覆盖范围、信号稳定程度等。本次我们拿到的是TOTOLINK N350R无线路由器,其集路由器、AP、交换机及防火墙功能于一体,是ipTIME公司特别针对中国市场设计的一款大面积覆盖专用无线产品。这样一款产品究竟会有怎样的表现呢?  外形方面,N350R采用白色方形的设计,时尚大方,由于产品经过亚光
2月15日,打着“国内首只在线商旅A股上市公司”概念的腾邦国际登陆创业板,挂牌首日大受市场追捧,涨幅近50%。这家以机票销售起家、同时亦是淘宝旅行平台上最大卖家之一的商旅公司表示,未来公司将更多转向互联网,提供在线商旅服务,与携程、艺龙等共同争夺市场。  巧合的是,携程网在前一日公布了2010年财报,高调展示其两倍于市场平均增速的机票数据。携程此举被业内认为是对市场份额之争的强力反击。    行业
本报综合消息 随着平板电脑市场的快速发展,IDC预计,今年全球市场平板电脑销售量将会达到1.074亿台,高于此前预期的1.061亿台,而且这种增长动量还将继续下去。  苹果发布新一代iPad以及进一步下调iPad 2价格将会推动其市场份额增长,而谷歌Android平板电脑的市场份额将会受到挤压。IDC预计,到今年底,苹果iPad平板电脑将占据全球市场份额的62.5%,高于去年的58.2%,而谷歌A
目前,OpenStack项目已经有超过20家用户、160家企业和3000名成员参与其中,成为全球开发者共同参与的一个开源项目。在中国,OpenStack项目及其模式也受到了开发者和企业的广泛欢迎,从官方的统计数据来看,来自中国的下载数和OpenStack用户数仅次于美国。“但目前OpenStack项目开发中,来自于中国的贡献非常有限,中国开源云联盟的建立,有望填补这方面的空白。”OpenStack
近日,联想集团正式发布了面向行业高端用户的ThinkCentre M系列全家族商用台式机新品。其中,机箱体积仅为1L的ThinkCentre M4350q以其精巧的设计成为系列中的亮点。而同期发布的ThinkCentre M9201z和ThinkCentre M8400系列,作为联想商用一体台式机和商用台式机的新一代产品,主打的则是高性能、易管理、绿色环保等“特色牌”。据悉,用户还可以根据自己的需