==========SparkGraphX概述==========1、SparkGraphX是什么？  （1）SparkGraphX是Spark的一个模块，主要用于进行以图为核心的计算还有分布式图的计算。  （2）GraphX他的底层计算也是RDD计算，它和RDD共用一种存储形态...

简单分析一下GraphX是怎么为图数据建模和存储的。能够看GraphLoader的函数。defedgeListFile(sc:SparkContext,path:String,canonicalOrientation:Boolean=false,numEdgePartitions:Int=-1,edgeStorageL...

转自：https://www.cnblogs.com/txq157/p/5978747.html Spark GraphX是一个分布式图处理框架，它是基于Spark平台提供对图计算和图挖掘简洁易用的而丰富的接口，极大的方便了对分布式图处理的需求。众所周知·，社交网络中人与人之间有很多关...

1.1基本概念图是由顶点集合(vertex)及顶点间的关系集合（边edge）组成的一种数据结构。这里的图并非指代数中的图。图可以对事物以及事物之间的关系建模，图可以用来表示自然发生的连接数据，如：社交网络、互联网web页面常用的应用有：在地图应用中找到最短路径、基于与他人的相似度图，推荐产品、服务、人际关系或媒体1.2...

1.PageRankhttp://blog.csdn.net/hguisu/article/details/7996185 2.ConnectedComponents 3.TriangleCounting 例子：users.txt1,BarackObama,BarackObama2,lad...

packagemain.scalaimportorg.apache.spark.graphx.{Edge,Graph,VertexId}importorg.apache.spark.rdd.RDDimportorg.apache.spark.{SparkConf,SparkContext}objectgraph_tes...

importorg.apache.spark.graphx.{Edge,Graph,VertexId}importorg.apache.spark.rdd.RDDimportorg.apache.spark.{SparkConf,SparkContext}//求共同好友objectCommendFriend{defma...

LDA（隐含狄利克雷分布）是一个主题聚类模型，是当前主题聚类领域最火、最有力的模型之中的一个，它能通过多轮迭代把特征向量集合按主题分类。眼下，广泛运用在文本主题聚类中。LDA的开源实现有非常多。眼下广泛使用、可以分布式并行处理大规模语料库的有微软的LightLDA，谷歌plda、plda+，sparkLDA等等。以下介...