基于R和Hadoop的大规模数据主成分分析

来源 :信息技术与信息化 | 被引量 : 0次 | 上传用户：hzwn001

【摘要】

：

R软件具有强大的统计分析功能,Hadoop平台能够存储和处理TB级别以上的大规模数据,将R与Hadoop相结合,在目前阶段是一种比较好的处理分析大规模数据的方案.本文利用RHadoop项

【作者】

：

毛志远

【机构】

：

贵州财经大学

【出处】

：

信息技术与信息化

【发表日期】

：

2017年12期

【关键词】

：

大规模数据 RHadoop 主成分分析

下载到本地 , 更方便阅读

下载此文赞助VIP

声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架

论文部分内容阅读

R软件具有强大的统计分析功能,Hadoop平台能够存储和处理TB级别以上的大规模数据,将R与Hadoop相结合,在目前阶段是一种比较好的处理分析大规模数据的方案.本文利用RHadoop项目中的rhdfs和rmr2两个包,以及MapReduce编程模型,设计出能够针对大规模数据进行主成分分析的函数,并对纽约股票市场部分股票价格数据进行主成分分析,以验证其可行性.

其他文献

宫颈癌组织中Survivin、Fas与FasL蛋白的表达

目的：检测宫颈鳞状细胞癌（SCC）组织中Survivin、Fas及FasL蛋白的表达。方法：采用免疫组化法检测8例正常宫颈组织、13例不典型增生（CIN）组织和36例SCC组织中Survivin、Fas与FasL蛋白

期刊

宫颈鳞状细胞癌SURVIVINFASFASLcervical squamous cell carcinoma Survivin Fas FasL

王肃与司马氏关系考辨

因王肃与司马氏结为姻亲,于是人们多认为王肃结党于司马氏。从仕职变迁来看,司马氏掌权十六七年间时,王肃官位并没有实质性的提升。在一系列重大政治事件中,如高平陵政变、迎

期刊

王肃司马懿司马家族关系Wang SuSi Ma-yiSi Ma familyrelationship

5G移动通信网络未来发展趋势与应用

随着现代科学技术的不断发展以及4G移动通信技术的普及不断提高,人们对移动通信有了更高层次追求,因此移动通信势必会发展到5G。5G作为网络第五代的传输网络,其峰值的传输速

期刊

5G移动通信网络发展趋势应用

“谁都/也VP”的构式特征和构式化过程及机制

“谁都/也VP”包括施受构式、受施构式和正反同辞构式三种类型,表达施受和受施两种意义,是多义构式。“谁都/也VP”是作为一个完整的形式语义匹配一步步演变而来的,经过了从

期刊

谁都/也VP构式特征构式化过程构式化机制形义匹配模式Shui dou/ye VPconstruction featuresconstruction

社会化媒体语境下企业品牌传播共创论的反思

企业品牌传播的“共创论”转向是当今社会化媒体时代的研究焦点。文章通过文献计量方法对“品牌共创论”范式进行梳理和省思,发现中国的品牌共创研究以企业管理为起点,逐渐转

期刊

社会化媒体品牌传播共创论文献计量法Social media brand communicationCo creation theoryBibliom

全球纺织成衣贸易情势简析

期刊

世界纺织成衣贸易市场分析进口市场出口市场

大豆：弱势仍然未到尽头进口市场“雪上加霜”

近期，除全球金融危机对商品市场的威胁犹存外，其余炒作题材的影响程度正在逐渐消退，这正体现了目前国内外市场虽然多空因素并立，但整体方向迷失的现状。特别对于国内大豆市场，尽管

期刊

商品市场大豆市场国内外市场进口金融危机影响程度政府调控供求关系

二0一三年度山西省骨干建筑业企业简介

公司成立于1953年，具有化工石油、房屋建筑、机电设备安装、市政、冶炼、管道、地基与基础、环保、机电、消防等工程专业总承包一级资质的综合性施工企业。

期刊

建筑业企业山西省机电设备安装房屋建筑施工企业工程专业总承包市政

中日韩自贸区谈判新进展：金融服务及电信等五个议题升级

7月5日,商务部新闻发言人沈丹阳表示,最新一轮中日韩自贸区谈判取得新的进展,三方就协定范围领域达成一致,将金融服务、电信等五个议题升级为分工作组,并决定自下一轮谈判起,

期刊

金融服务谈判议题电信市场准入商务部工作组

多维视角下基于认知诗学的李商隐诗歌美感解读

认知诗学是赏析诗歌的一种方法或技巧,其重视读者自身解读。文章对认知诗学的缘起、发展及主要研究领域进行了简要回顾,运用认知诗学的四个主要理论:概念隐喻、可能世界、图

期刊

认知诗学李商隐诗歌概念隐喻可能世界图形——背景概念整合cognitive poeticsconceptual metaphorpossible

基于R和Hadoop的大规模数据主成分分析

与本文相关的学术论文