高效的社会网络传递性MapReduce并行计算方法
本文关键词:高效的社会网络传递性MapReduce并行计算方法 出处:《湘潭大学自然科学学报》2015年02期 论文类型:期刊论文
【摘要】:社会网络中的传递性对于网络中的社团分析和节点重要性分析都有着十分重要的意义.为了提高社会网络传递性分析中三角计数的性能,提出了一种MapReduce环境下的三角计数并行计算方法.首先,将社会网络的传递性问题转化为计算网络中三角个数的问题.其次,在计算网络中的三角时按照节点之间的度约束对重复的三角进行了过滤,并在MapReduce环境下实现了高效的三角计数并行算法.最后,分析了MapReduce环境下三角计数并行算法的时间和空间复杂性.理论分析和实验表明,该文提出的方法与相关方法相比,不仅降低了算法的内存使用量,也减小了算法的运行时间,因而更适用于大规模社会网络的传递性分析.
[Abstract]:Transfer of social network is of great significance for the analysis of network community analysis and node importance. In order to improve the performance of social network analysis in the transfer triangle count, a method is proposed for calculating the triangle count under the environment of MapReduce in parallel. First of all, will transfer the issue of social network into a number of calculation a triangular network problem. Secondly, the triangle in the calculation of the network according to the degree of constraints between nodes of repeated triangle were filtered, and in the MapReduce environment to achieve the triangle count efficient parallel algorithm. After the analysis, under the environment of MapReduce triangle counting parallel time and space complexities of the algorithm shows that the theory. The analysis and experiment, compared with the related methods of the proposed method, the algorithm not only reduces the amount of memory used, also reduces the running time of the algorithm, so it is more suitable for Yu Da The analysis of the transitivity of a scale social network.
【作者单位】: 中国矿业大学理学院;江苏联合职业技术学院;
【基金】:江苏省教育教学改革立项重点课题项目(苏教科院ZCZ32)
【分类号】:TP338.6
【正文快照】: 随着“六度分割理论”的提出,社会网络引起了社会各界的广泛关注.社会网络[1]是一门与社会学、心理学、数学、计算机科学等学科相关的交差学科.社会网络分析方法将社会网络表示为矩阵,并用矩阵分析的方法分析社会网络的相关属性和特征[2].社会网络的一个重要特征是节点之间往
【参考文献】
相关期刊论文 前2条
1 陈克寒;韩盼盼;吴健;;基于用户聚类的异构社交网络推荐算法[J];计算机学报;2013年02期
2 赵蓉英;王静;;社会网络分析(SNA)研究热点与前沿的可视化分析[J];图书情报知识;2011年01期
【共引文献】
相关期刊论文 前10条
1 郎波;张博宇;;面向大数据的非结构化数据管理平台关键技术[J];信息技术与标准化;2013年10期
2 邵景峰;崔尊民;王进富;白晓波;;大数据下纺织制造执行系统的构建[J];纺织器材;2013年06期
3 张亚楠;谭跃生;;基于MapReduce的并行遮盖文本聚类算法[J];内蒙古科技大学学报;2013年03期
4 周国亮;朱永利;王桂兰;;CC-MRSJ:Hadoop平台下缓存敏感的星型联接算法[J];电信科学;2013年10期
5 王鹏;黄焱;刘峰;安俊秀;;大数据技术中计算与数据的协作机制[J];成都信息工程学院学报;2014年01期
6 杜政颉;王鹏;黄焱;郎福通;;一种基于Storm编程模型的迭代Topology方案[J];成都信息工程学院学报;2014年01期
7 范飞;黄文明;邓珍荣;;Oozie工作流在Mahout分布式数据挖掘中的应用[J];桂林电子科技大学学报;2014年01期
8 丁玉成;诸葛晴凤;沙行勉;;云计算环境下排序算法的性能分析[J];重庆大学学报;2014年04期
9 乔媛媛;刘芳;凌艳;尹劲松;;云计算环境下MapReduce的资源建模与性能预测[J];北京邮电大学学报;2014年S1期
10 刘琼;赵荣;孙立坚;;Map/Reduce框架下的粗糙集空间数据挖掘改进算法[J];测绘科学;2014年05期
相关会议论文 前5条
1 乔媛媛;刘芳;凌艳;尹劲松;;云计算环境下MapReduce的资源建模与性能预测[A];2013年全国通信软件学术会议论文集[C];2013年
2 Xiaoguang Han;Jigang Sun;Wu Qu;Xuanxia Yao;;Distributed Malware Detection based on Binary File Features in Cloud Computing Environment[A];第26届中国控制与决策会议论文集[C];2014年
3 陈佐旗;余柏蒗;吴健平;;基于GPU通用计算的遥感数据处理——以计算地表太阳辐射值为例[A];第十八届中国环境遥感应用技术论坛论文集[C];2014年
4 白永超;付伟;辛阳;;基于Hadoop和Nutch的分布式搜索引擎研究与仿真[A];第十九届全国青年通信学术年会论文集[C];2014年
5 李超越;徐国胜;;Hadoop公平调度算法的改进[A];第十九届全国青年通信学术年会论文集[C];2014年
相关博士学位论文 前10条
1 罗军;基于复杂社会网络的企业员工知识分享行为研究[D];重庆大学;2013年
2 李健;云计算环境下最小化运营开销的调度技术研究[D];北京邮电大学;2013年
3 韩晶;大数据服务若干关键技术研究[D];北京邮电大学;2013年
4 程祥;高效可靠的虚拟网络映射技术研究[D];北京邮电大学;2013年
5 李韧;基于Hadoop的大规模语义Web本体数据查询与推理关键技术研究[D];重庆大学;2013年
6 卢风顺;面向CPU/GPU异构体系结构的并行计算关键技术研究[D];国防科学技术大学;2012年
7 孙鹏;动车组维修物联网及其关键技术研究[D];中国铁道科学研究院;2013年
8 肖奎;维基百科大数据的知识挖掘与管理方法研究[D];武汉大学;2013年
9 程兴国;仿生算法的动态反馈机制及其并行化实现方法研究[D];华南理工大学;2013年
10 马冯;数据密集型计算环境下贝叶斯网的学习、推理及应用[D];云南大学;2013年
相关硕士学位论文 前10条
1 历妍;基于专利的技术发展趋势研究[D];北京工业大学;2011年
2 张世怡;基于SNS的高校图书馆信息服务模式研究[D];天津师范大学;2012年
3 官思发;基于科学知识图谱的知识共享研究进展分析[D];华中师范大学;2012年
4 袁建龙;基于社会网络视角的体育赛事赞助关系研究[D];成都体育学院;2012年
5 胡昭琼;网络教研中教师专业发展场域的形成研究[D];南京师范大学;2012年
6 黄阳;社会网络视域下徐州市信息技术教师知识管理研究[D];江苏师范大学;2012年
7 刘友丽;企业网络组织竞合关系研究[D];大连海事大学;2013年
8 张斯龙;科技期刊文献计量中可视化技术的应用研究[D];杭州电子科技大学;2013年
9 梁慧;基于语义的馆藏资源深度聚合与可视化展示的保障机制研究[D];华中师范大学;2013年
10 李星星;学术虚拟社区成员关系社会网络研究[D];华中师范大学;2013年
【二级参考文献】
相关期刊论文 前3条
1 郑思明,程利国;从社会网络分析的视角看青少年的人际关系[J];集美大学学报(教育科学版);2004年01期
2 侯剑华;陈悦;;战略管理学前沿演进可视化研究[J];科学学研究;2007年S1期
3 侯海燕;刘则渊;陈悦;姜春林;尹丽春;庞杰;;当代国际科学学研究热点演进趋势知识图谱[J];科研管理;2006年03期
相关硕士学位论文 前1条
1 侯剑华;工商管理学科主干理论的演进[D];大连理工大学;2008年
【相似文献】
相关期刊论文 前10条
1 郑敏娟;贺炎;;未来的并行计算[J];中国科技信息;2007年12期
2 陈国良;孙广中;徐云;龙柏;;并行计算的一体化研究现状与发展趋势[J];科学通报;2009年08期
3 王琳;鲁晶晶;殷克功;;关于并行计算在软件发展下的研究分析[J];科技信息;2009年14期
4 刘俊莉;王楚斌;林晓锐;司徒祝坤;;并行计算实验平台的研究与实现[J];科技信息;2009年22期
5 潘沙;范晓樯;李晓宇;丁国昊;冯定华;李桦;;并行计算在高超声速流场数值模拟中的应用[J];计算机工程与科学;2009年S1期
6 逄华;王龙;王剑辉;;一种基于移动Agent的分布式并行计算模型[J];计算机技术与发展;2011年02期
7 程建钢,李明瑞,黄文彬;有限元分析的并行计算方法[J];力学与实践;1995年04期
8 林彬;;并行计算的基本问题及现状分析[J];中国管理信息化;2014年16期
9 林新华;王左利;林新华;;困扰并行计算的三大问题[J];中国教育网络;2008年11期
10 ;光计算[J];中国光学与应用光学文摘;2001年04期
相关会议论文 前10条
1 黄宇光;;整体同步并行计算方法的现状与发展[A];信息科学与微电子技术:中国科协第三届青年学术年会论文集[C];1998年
2 左风丽;莫则尧;叶文华;;计算流体三维分裂格式的高效并行计算[A];中国工程物理研究院科技年报(2003)[C];2003年
3 罗文彩;陈小前;;并行计算的多方法优化协作[A];第二十四届中国控制会议论文集(上册)[C];2005年
4 王欣;李志山;张志远;;并行计算在弹塑性时程分析中的应用[A];信息化推动工程建设工业化——第四届工程建设计算机应用创新论坛论文集[C];2013年
5 张理涛;黄廷祝;谷同祥;左宪禹;;一种适合于分布式并行计算改进的平方共轭残差法[A];2008年全国开放式分布与并行计算机学术会议论文集(下册)[C];2008年
6 胡金初;;并行计算中的任务分配算法[A];2005年全国理论计算机科学学术年会论文集[C];2005年
7 宋庭新;李慧;;面向服务的有限元并行计算网格系统设计[A];湖北省机械工程学会设计与传动学会、武汉机械设计与传动学会2008年学术年会论文集(2)[C];2008年
8 裘懿勇;徐斌;刘晓明;;并行计算作业调度系统的架构及应用[A];第十四届中国科协年会第5分会场:绿色船舶与海洋装备创新发展及产业化论坛论文集[C];2012年
9 裘懿勇;徐斌;刘晓明;;并行计算作业调度系统的架构及应用[A];2012年MIS/S&A学术交流会议论文集[C];2012年
10 肖保国;杨顺华;邢建文;赵慧勇;;当地自适应建表方法在煤油超燃发动机并行计算中的应用[A];第十四届全国激波与激波管学术会议论文集(下册)[C];2010年
相关重要报纸文章 前10条
1 曙光信息产业有限公司研发中心 温鑫;并行计算任重道远[N];中国计算机报;2007年
2 轶嘉;英特尔全球首个并行计算中心落户无锡[N];人民邮电;2009年
3 英特尔并行计算实验室研究员 TimothyMattson;并行计算:减少串行软件[N];中国计算机报;2007年
4 曙光信息产业有限公司研发中心 温鑫;并行计算软件开发概述[N];中国计算机报;2007年
5 刘霞;计算能力的提升需要一场革命[N];科技日报;2010年
6 安世亚太 雷先华;ANSYS高性能并行计算[N];中国航空报;2005年
7 张云泉;并行计算:迎接多核时代的挑战[N];计算机世界;2006年
8 本报记者 马文方;英特尔为何要牵头并行计算[N];中国计算机报;2009年
9 英特尔 赵军(Jun Zhao);PC机并行计算革命尚未成功[N];中国计算机报;2009年
10 ;Linux下的网络并行计算[N];计算机世界;2000年
相关博士学位论文 前10条
1 孙安香;数值气象预报变分同化的伴随模式并行计算[D];中国人民解放军国防科学技术大学;2002年
2 张理论;面向气象预报数值模式的高效并行计算研究[D];中国人民解放军国防科学技术大学;2002年
3 龙柏;并行计算平台上的数据索引技术研究[D];中国科学技术大学;2011年
4 管建和;电磁场有限元法解释分布式并行计算的研究[D];中国地质大学(北京);2006年
5 刘耀儒;三维有限元并行计算及其在水利工程中的应用[D];清华大学;2003年
6 金晶;并行计算普适编程模型及系统架构研究[D];北京邮电大学;2012年
7 盛艳秀;多核异构环境下通用并行计算框架关键技术研究[D];中国海洋大学;2013年
8 张帆;过程系统优化的分布式并行计算[D];浙江大学;2002年
9 刘寿生;虚拟现实仿真平台异构并行计算关键技术研究[D];中国海洋大学;2014年
10 付朝江;集群MPI环境下有限元结构分析并行计算研究[D];上海大学;2006年
相关硕士学位论文 前10条
1 顾慧;基于异构平台的并行计算性能可视化研究[D];辽宁师范大学;2010年
2 徐晓华;光并行计算及其在图像处理和计算分子生物学中的应用[D];扬州大学;2005年
3 田甜;异构环境中并行计算模型与任务调度的研究[D];曲阜师范大学;2010年
4 刘杰;可扩展并行计算及其应用研究[D];湖南大学;2009年
5 孔令梅;三维变分同化并行计算研究及实现[D];国防科学技术大学;2005年
6 刘桂海;网格并行计算系统研究开发[D];西安理工大学;2008年
7 蔡佳佳;图像代数多核并行计算类库的构建与优化[D];厦门大学;2008年
8 陈维;有限单元并行计算方法在地震波动模拟中的应用[D];中国地震局工程力学研究所;2011年
9 陆良刚;土木工程有限元并行计算应用及其软件架构[D];中国地震局工程力学研究所;2011年
10 张立霞;电磁场有限元分析中并行计算的研究[D];河北工业大学;2006年
,本文编号:1431193
本文链接:https://www.wllwen.com/kejilunwen/jisuanjikexuelunwen/1431193.html