云计算环境下基于模糊聚类的并行调度策略研究

发布时间：2017-12-29 19:15

  本文关键词：云计算环境下基于模糊聚类的并行调度策略研究　出处：《计算机科学》2014年08期 　论文类型：期刊论文

  更多相关文章： 云计算 并行调度 模糊聚类 任务资源混合聚类 贝叶斯分类算法

【摘要】：并行任务调度是分布式计算研究的核心问题之一,其结合大规模的石油地震勘探数据在处理过程中对高性能计算的需求,研究云计算环境下地震资料数据的并行调度问题。由于地震资料数据规模较大,因此通常将大作业进行分割,通过并行处理获得较高的处理效率。对任务进行并行处理的一个关键问题是如何将划分后的任务分配到合适的调度节点,最高效的情况是使云计算环境中的每一个资源节点都在进行计算,并且计算性能高的节点执行作业块大且复杂的任务,性能相对低的资源节点则运行对计算性能要求不高的任务或小任务,以达到整体上的负载平衡。因此基于模糊聚类思想,提出一种任务与资源混合聚类的调度优化策略,以作业与资源节点属性的匹配程度为基准,对并行作业进行聚类划分求解,在缩小任务调度规模的同时,为动态调度任务奠定基础。在划分完成后引入基于改进的贝叶斯分类调度算法,将资源节点依据其实时负载情况与队列中的作业进行快速的匹配。实验证实,此方案具有较高的执行效率。
[Abstract]:......
【作者单位】： 中国石油大学计算机与通信工程学院;
【基金】：中国石油天然气集团公司石油科技中青年创新基金项目(07E1024) 中央高校基本科研业务费专项资金(13CX02032A)资助
【分类号】：TP393.01
【正文快照】： 1引言在目前主流的分布式计算环境中,研究作业的并行调度[1]问题成为提高作业效率的一个主要攻克方向,也是该领域未来的主要研究点之一。云计算环境中包括同构或异构的多资源、多集群环境,各个资源节点的计算能力一般不会完全相同,作业服务器处理并行作业时需考虑节点间的执行

【相似文献】

相关期刊论文 前10条

1 钟茂生;WEB页面的模糊聚类[J];华东交通大学学报;2004年05期

2 郝先臣,刘小玲,周建华,赵海;模糊聚类挖掘方法在电子商务中的应用[J];东北大学学报(自然科学版);2001年04期

3 郝先臣,张德干,朱红艳,赵海;模糊聚类挖掘方法在电子商务中的应用研究[J];计算机工程;2002年01期

4 王惠敏;聂规划;;基于模糊聚类和资源平滑的协同过滤推荐[J];情报杂志;2007年07期

5 田俊峰;张晶;毕志明;;基于改进RBF神经网络的入侵检测研究[J];计算机工程与应用;2008年31期

6 张国锁;周创明;雷英杰;;改进FCM聚类算法及其在入侵检测中的应用[J];计算机应用;2009年05期

7 何鹏,徐立臻,庄晓青;模糊聚类在Web信息检索中的应用研究[J];计算机工程;2002年10期

8 徐静;蔡琼;喻俊杰;;基于模糊聚类的Web日志挖掘的应用研究[J];电脑知识与技术(学术交流);2006年20期

9 童一飞;李东波;;基于属性的网格资源动态聚类研究[J];计算机集成制造系统;2008年04期

10 吴蓉晖;梁一鸣;喻飞;徐成;;基于模糊C-均值聚类算法的DDoS攻击检测与仿真[J];小型微型计算机系统;2008年06期

相关会议论文 前2条

1 白亚男;任广伟;;一种基于孤立点挖掘的网络入侵系统[A];2009全国计算机网络与通信学术会议论文集[C];2009年

2 令狐大智;李陶深;;一种基于模糊理论的自适应入侵检测方法[A];2007年全国开放式分布与并行计算机学术会议论文集(上册)[C];2007年

相关博士学位论文 前2条

1 张仕斌;模糊信任模型及国家级PKI体系的研究[D];西南交通大学;2006年

2 贾智平;嵌入式分布系统通信实时性问题的研究[D];山东大学;2007年

相关硕士学位论文 前10条

1 隋星光;Web用户浏览模式模糊聚类算法的研究[D];哈尔滨工程大学;2005年

2 王汝山;基于半监督模糊聚类的入侵检测技术研究[D];江苏科技大学;2010年

3 吴妮娅;基于Web的日志挖掘技术的研究[D];哈尔滨工程大学;2004年

4 王小军;模糊聚类在入侵检测中的应用研究[D];南京师范大学;2006年

5 张文升;基于Web日志的数据挖掘的研究[D];辽宁工程技术大学;2005年

6 金诚;基于神经网络集成的入侵检测技术[D];哈尔滨理工大学;2009年

7 沈世铭;数据挖掘技术在入侵检测中的研究[D];天津工业大学;2007年

8 曾庆花;模糊关联的数据挖掘技术在IDS中的应用[D];曲阜师范大学;2007年

9 李金磊;在线社会网络模糊挖掘模型研究[D];华中科技大学;2008年

10 荆春伟;基于半监督模糊聚类的入侵防御技术研究[D];江苏科技大学;2011年

，

本文编号：1351491