快刀初试:Spark GraphX在淘宝的实践

来源 :程序员 | 被引量 : 0次 | 上传用户:xxglov
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
淘宝上数亿买家和卖家每天产生的数百亿行为构成了多个巨型的行为网络,这正是图算法一展身手的好场景。由于SparkGraphX既有良好的性能,又有丰富的功能和运算符,能够在海量数据上自如运行各种复杂的图算法,淘宝开始尝试将它作为分布式图计算平台,进行了各种算法尝试和生产应用。本文将结合GraphX的实现原理和设计特点,分享其在淘宝的应用实践。
其他文献
随着互联网和大数据的发展,需要处理的数据越来越多,所需要的CPU也越来越多。一种处理方式是“Scale Up”,使用带有许多CPU的高性能小型机甚至大型机;另一种方式是“Scale Out”,
随着教育改革的不断深入,作为以创新精神和实践能力为重点的陶艺教学纷纷进入初中艺术课堂。陶艺教学也成了我校美术校本课程开发的突破口。初中陶艺教育是美术课堂的延伸,是与
【摘 要】我国是农业大国,农村教育直接关系着当地社会的和谐发展,对于提高全民族素质具有重要的现实意义。在农村的一些地区,青壮年打工潮催生了空巢现象的产生,根据留守儿童的心理认知特点,进行有针对性的教学,成为当前农村教育的重要切入点。对于农村留守儿童教学的开展,应当充分考虑到其家庭教育相对缺失的现状,须采用针对性的教育教学手段,加大对留守儿童的心理引导,增强其自身心理行为的约束力。另外,在教学模式上
双十一大战,人很辛苦,不管是开店的还是购物的。除了人,其实电脑也很辛苦,不管是硬件还是软件。软件当中,最辛苦的当属浏览器了,那么重的购物网页,常常同时打开几十个。不知道是不是
文体作为文学的首要元素,是实现文学价值的基本依据,文学研究的许多方面如作家作品研究、文学史与批评史的研究、文学创作理论研究等等,无不以准确地把握文体要素为基本前提。中国古代文学在从上古到明清的悠长的发展历史中,创造了极其丰富多样的文体,几乎可以说是一个层出不穷的文体创造的历史,在整个世界文学史中都是罕见的,所以古代文体的研究本身就是古代文学研究中的重要部分。而且,这些古典文学的文体,绝大多数都已经成为文学史上的文体,
本文将分享一套在不改变客户原有ERP系统的情况下,如何扩展传统ERP,适应现在电商需求的方法。
【摘 要】本文主要谈论英语词汇的教学,分析初中英语词汇教学的重要性,结合我的工作经历剖析当前英语词汇教学中存在的一些问题,探讨解决这些问题的方法。  【关键词】词汇教学 重要性 记忆  在初中英语教学中,词汇的学习是一个重要的组成部分。由于汉语和英语在许多方面存在着很大的差异, 给中学生学习词汇带来了不少困难。表现如下:第一,学生在读音方面感觉困难很大,难以读准单词。第二,在拼写方面,学生
云计算涉及的服务繁多,弹性计算服务、文件存储服务、关系数据库服务、Key/Value数据库服务等不胜枚举。本文将简要阐述弹性计算服务的安全问题,因为弹性计算是应用最为普遍的云
一次被逼无奈的转型,促成了《噢粑粑》的诞生。目前,《噢粑粑》已拥有50万用户,本刊近日邀请《噢粑粑》创业团队分享其在转型路上的经验与感悟。
如何设计有效的推荐算法以便实时满足用户对内容的需求,已成为一个亟待解决的问题,并受到研究领域和工业界的广泛关注。本文讨论了为Yahoo!