基于处理时间的网络地图云服务调度算法
本文选题:云计算 + 网络地图服务 ; 参考:《计算机测量与控制》2013年07期
【摘要】:为提高网络地图云服务效率,需研究Map/Reduce合理的计算节点调度策略,为此提出一种基于处理时间的Map/Reduce动态均衡调度算法;在该算法中,为参与计算的各计算节点建立处理总时间指标;当节点的子任务返回时动态更新当前节点的处理时间,并按照最小处理总时间选择子任务处理的节点;为证明算法的有效性,在局域网环境创建1个JobTracker和2个处理能力基本相同的DataNode并发执行200个相同的GetMap单元任务;结果表明,算法不仅减少了节点与云服务中心服务器的负载信息传递,而且能充分利用节点的处理能力,提高了Map/Reduce调度效率,提升了网络地图云服务的质量。
[Abstract]:In order to improve the efficiency of network map cloud service, it is necessary to study the rational computing node scheduling strategy of Map-Reduce. For this reason, a dynamic equalization scheduling algorithm of Map-Reduce based on processing time is proposed. The total processing time index is established for each computing node involved in the calculation. When the sub-task of the node returns, the processing time of the current node is dynamically updated, and the node processed by the sub-task is selected according to the minimum total processing time. Creating a JobTracker and two DataNode with the same processing capacity in a LAN environment simultaneously executes 200 identical GetMap unit tasks, and the results show that the algorithm not only reduces the load information transfer between the node and the cloud service center server, Moreover, it can make full use of the processing power of nodes, improve the efficiency of Map-Reduce scheduling, and improve the quality of network map cloud service.
【作者单位】: 成都信息工程学院资源环境学院;贵州大学电子科学与信息技术学院;成都理工大学地球物理学院;
【基金】:国家自然科学基金资助项目(61071121)
【分类号】:TP393.09
【相似文献】
相关期刊论文 前10条
1 高岚岚;;云计算与网格计算的深入比较研究[J];海峡科学;2009年02期
2 蔡構;胡欣薇;;云计算在网络课程建设中的应用探讨[J];电子商务;2010年03期
3 徐格静;丁函;王毅;;云计算与网格计算分析比较[J];今日科苑;2010年24期
4 王威;;中小企业如何加强云安全措施[J];企业家天地(理论版);2011年06期
5 赵梦龙;龙士工;刘春英;;基于HITS算法的云化模型[J];微计算机信息;2009年30期
6 崔文;王国勇;;基于校园网的云计算应用初探[J];微计算机信息;2010年18期
7 刘金;;Web服务在网格和云中的应用[J];湖南电力;2010年03期
8 周鹏;李英;李志蜀;;大学计算机网络课程教学模式探析[J];天中学刊;2010年05期
9 杨斌;刘海涛;;云计算对移动互联网发展的助推作用[J];电信工程技术与标准化;2010年12期
10 高宏卿;翟炎杰;郭文鹭;;基于云计算的反垃圾邮件系统研究[J];河南师范大学学报(自然科学版);2011年02期
相关会议论文 前10条
1 金伟伟;刘强生;李晓彤;岑兆丰;;网格计算在大规模光学计算中的应用[A];2007年光电探测与制导技术的发展与应用研讨会论文集[C];2007年
2 王璐璐;张素伟;任颉;;网格调度算法[A];先进制造技术论坛暨第三届制造业自动化与信息化技术交流会论文集[C];2004年
3 崔海东;;一种业务网架构的网格云模型[A];中国通信学会信息通信网络技术委员会2009年年会论文集(上册)[C];2009年
4 周相兵;马洪江;杨兴江;;一种基于云计算的语义Web服务组合模型研究[A];2009年全国开放式分布与并行计算机学术会议论文集(上册)[C];2009年
5 陶冶;刘建勋;唐明董;;基于Map/Reduce的分布式Web服务搜索引擎设计与实现[A];CCF NCSC 2011——第二届中国计算机学会服务计算学术会议论文集[C];2011年
6 单玉红;陈玉敏;朱欣焰;龚健雅;;基于Web Services的分布式地理信息发布技术研究[A];2003年中国智能自动化会议论文集(下册)[C];2003年
7 吴雄奇;曾文华;;基于改进遗传算法的网格资源调度算法[A];2006年全国开放式分布与并行计算学术会议论文集(一)[C];2006年
8 叶建伟;方滨兴;张宏莉;;基于节点相似度的容错网格作业调度算法研究[A];全国网络与信息安全技术研讨会论文集(下册)[C];2007年
9 何龙飞;马亨冰;;基于PSO的多QoS约束网格任务调度算法[A];全国第19届计算机技术与应用(CACIS)学术会议论文集(下册)[C];2008年
10 向培素;田珂;黄勤珍;;网格工作流动态调度研究[A];2007年全国开放式分布与并行计算机学术会议论文集(下册)[C];2007年
相关重要报纸文章 前10条
1 ;小下载也有大学问[N];电脑报;2006年
2 何川 方兴;运筹帷幄决胜千里[N];计算机世界;2001年
3 ;宝德构建腾讯QQ系统平台[N];电脑商报;2004年
4 陈非;GIS Web化[N];中国计算机报;2003年
5 ;分析价值的再提升[N];计算机世界;2003年
6 ;方御防火墙关注应用[N];网络世界;2004年
7 山枫;安全到七层[N];中国计算机报;2004年
8 谢文砚;一个IGC平台的诞生[N];中国计算机报;2004年
9 刘闯;SOPCA:操作系统任意搭配[N];中国计算机报;2004年
10 深圳宝德公司协办;宝德建设万用网“深圳热线”网站[N];电脑商报;2004年
相关博士学位论文 前10条
1 沈静波;基于P2P和云计算的动态内容管理研究[D];中国科学技术大学;2011年
2 姚念民;改进单服务器性能[D];吉林大学;2003年
3 朱智强;混合云服务安全若干理论与关键技术研究[D];武汉大学;2011年
4 丁靖宇;面向企业虚拟私有云的虚拟专用网技术研究[D];东华大学;2012年
5 郑燕峰;基于输入排队的可扩展交换结构调度算法的研究[D];中国科学院研究生院(计算技术研究所);2006年
6 周刚;云计算环境中面向取证的现场迁移技术研究[D];华中科技大学;2011年
7 李波;支持网格资源预留的作业调度算法研究[D];华中科技大学;2005年
8 魏丫丫;Web传输的性能优化[D];清华大学;2006年
9 石莎;移动互联网络安全认证及安全应用中若干关键技术研究[D];北京邮电大学;2012年
10 谷青范;网格环境下的服务调度机制研究[D];东南大学;2006年
相关硕士学位论文 前10条
1 何汪平;基于以太网的音频传输系统研究[D];浙江大学;2005年
2 胡东川;适于高速分组交换输出调度策略的研究与实现[D];中国人民解放军信息工程大学;2005年
3 张磊;对具有共享资源竞争的任务调度算法的研究[D];山东大学;2005年
4 赵丹丽;局域网下任务动态调度和分配的研究[D];中国地质大学(北京);2008年
5 潘勋;网格环境中资源调度策略研究[D];燕山大学;2007年
6 张磊;智能网络磁盘(IND)存储系统调度算法研究[D];中南大学;2007年
7 赵静;数字图书馆网格结构模型及调度算法研究[D];燕山大学;2009年
8 马言春;面向云市场的资源管理的研究与实现[D];江苏科技大学;2012年
9 丁宇光;基于QoS约束的云计算调度算法的研究[D];辽宁大学;2012年
10 邓自立;云计算中的网络拓扑设计和Hadoop平台研究[D];中国科学技术大学;2009年
,本文编号:1981371
本文链接:https://www.wllwen.com/guanlilunwen/ydhl/1981371.html