期刊文献+

基于MapReduce的快速Newman并行算法

Fast Newman parallel algorithm based on MapReduce
原文传递
导出
摘要 针对经典社团结构算法直接应用于大规模网络时会出现内存溢出的问题,提出一个基于MapReduce的社团结构并行算法,将经典社团发现算法与MapReduce编程模型相结合,实现了社团发现算法的并行化处理.实验平台采用Hadoop,硬件条件为普通服务器集群.实验表明此算法能突破内存瓶颈,处理数据量超过1×108的问题,可应用于大规模网络分析中. 针对经典社团结构算法直接应用于大规模网络时会出现内存溢出的问题,提出一个基于MapReduce的社团结构并行算法,将经典社团发现算法与MapReduce编程模型相结合,实现了社团发现算法的并行化处理.实验平台采用Hadoop,硬件条件为普通服务器集群.实验表明此算法能突破内存瓶颈,处理数据量超过1×108的问题,可应用于大规模网络分析中.
出处 《华中科技大学学报(自然科学版)》 EI CAS CSCD 北大核心 2012年第S1期58-61,共4页 Journal of Huazhong University of Science and Technology(Natural Science Edition)
关键词 网络 社团结构 并行算法 编程模型 云计算 network community structure parallel algorithm programming model cloud computing
  • 相关文献

参考文献7

  • 1Cohen J.Graph twiddling in a MapReduce world. Computing in Science and Engineering . 2009
  • 2Verma A,Llora X,Goldberg D E,et al.Scaling ge-netic algorithms using mapreduce. InternationalConference on Intelligent Systems Design and Appli-cations . 2009
  • 3Mark E J,Newman.A fast algorithm for detecting community structure in networks. Physical Review . 2004
  • 4Cordeiro R L F,Traina Junior C,Traina A J M,etal.Clustering very large multi-dimensional datasetswith MapReduce. Proceedings of the 17th ACMSIGKDD Conference on Knowledge Discovery andData Mining . 2011
  • 5Dean J,Ghemawat S.Mapreduce:simplified dataprocessing on large clusters. Proceedings of the6th Symposium on Operating Systems Design and Im-plementation . 2004
  • 6Lin J,Schatz M.Design patterns for efficient graphalgorithms in MapReduce. Proceedings of theEighth Workshop on Ming and Learning wih Graphs . 2010
  • 7Miao Gengxin,Song Yangqiu,Zhang Dong,et al.Parallel spectral clustering algorithm for large-scalecommunity data minging. Proceedings of theWeb Service Workshop at WWW 2008 . 2008

相关作者

内容加载中请稍等...

相关机构

内容加载中请稍等...

相关主题

内容加载中请稍等...

浏览历史

内容加载中请稍等...
;
使用帮助 返回顶部