当前位置:主页 > 科技论文 > 计算机论文 >

在公有云上最小化MXNet资源租赁开销的调度技术研究

发布时间:2020-06-28 11:47
【摘要】:近些年来,深度学习技术在图像分类、语音识别、自然语言处理等领域展现出了巨大的优势。MXNet作为一款性能较佳的深度学习框架,其在速度、节省内存、接口灵活性、可移植性、分布式效率等方面都有突出的表现,并在2016年被选为Amazon AWS官方深度学习平台。但是调查发现,目前大部分企业用户在使用MXNet处理深度学习任务时使用的还是单机版的MXNet,这对满足目前的数据量,数据吞吐量以及计算的迭代速度等要求方面都存在着很大的局限性。云计算作为一种新型的商业模式,凭借其海量计算资源与即付即用的服务模式受到了用户广泛欢迎,因此用户可以通过按需租赁云资源来处理本地深度学习任务,这样在一定程度上可避免在单机上处理深度学习任务时存在的局限性。由于在现实生活中,用户在租赁云资源时往往最关注的是:以最少的租赁费用成功处理本地的任务。但是现有关于云计算环境下任务调度研究大多数都是以减少任务在云端完成执行的时间跨度为目标,只有较少的研究同时兼顾到时间跨度和资源租赁开销且使用的任务调度算法在性能上也存在缺陷。因此在云端使用MXNet处理深度学习任务时,实现以缩短深度学习任务完成执行的时间跨度和降低云资源租赁开销为目标的高性能深度学习任务调度算法具有很重要的现实意义。针对现有研究的不足,本文主要对云计算环境下基于MXNet平台的深度学习任务调度技术开展深入研究,主要解决了用户用MXNet处理深度学习任务的云资源租赁开销最小化问题,主要工作如下:1)蚁群算法在求解组合优化问题上有着良好的表现,但是传统蚁群算法也存在部分缺陷,针对传统蚁群算法存在的缺陷,本文提出了相应的优化方案,并对改进蚁群算法(Genetic And Ant Colony Optimization Algorithm,GAACOA)在求解旅行商问题上进行性能评估,实验表明,GAACOA算法的求解结果在最优路径和算法迭代次数上要优于传统遗传算法和传统蚁群算法。2)针对用户在云端处理深度学习任务的资源租赁开销最小化目标,本文建立了云计算环境下基于GAACOA算法的深度学习任务调度模型,并对GAACOA算法求解云计算环境下基于MXNet平台的深度学习任务调度问题进行实验验证,通过和相关算法的求解结果对比表明,GAACOA算法能够优化深度学习任务完成执行的时间跨度的同时,并有效降低了云资源租赁开销。
【学位授予单位】:电子科技大学
【学位级别】:硕士
【学位授予年份】:2018
【分类号】:TP18;TP3

【参考文献】

相关期刊论文 前10条

1 乔东平;裴杰;肖艳秋;周坤;;蚁群算法及其应用综述[J];软件导刊;2017年12期

2 王治东;;云计算环境下任务调度研究综述[J];中国新通信;2017年09期

3 林基明;班文娇;王俊义;童记超;;基于并行遗传-最大最小蚁群算法的分布式数据库查询优化[J];计算机应用;2016年03期

4 柳玉;向东阳;郑春弟;;面向异构分布式计算环境的并行任务调度优化方法[J];系统工程与电子技术;2016年02期

5 李智勇;陈少淼;杨波;李仁发;;异构云环境多目标Memetic优化任务调度方法[J];计算机学报;2016年02期

6 邢晓溪;;粒子群算法研究进展[J];数据通信;2015年03期

7 魏峗;陈元元;;基于改进蚁群算法的云计算任务调度模型[J];计算机工程;2015年02期

8 尹宝才;王文通;王立春;;深度学习研究综述[J];北京工业大学学报;2015年01期

9 张雨;李芳;周涛;;云计算环境下基于遗传蚁群算法的任务调度研究[J];计算机工程与应用;2014年06期

10 朱宗斌;杜中军;;基于改进GA的云计算任务调度算法[J];计算机工程与应用;2013年05期

相关博士学位论文 前1条

1 史恒亮;云计算任务调度研究[D];南京理工大学;2012年

相关硕士学位论文 前5条

1 王贝;云计算环境下任务调度优化算法的研究[D];中国科学技术大学;2017年

2 王诗瑶;基于深度神经网络的事件实时处理系统[D];北京邮电大学;2017年

3 张晓磊;云计算独立任务及关联任务调度算法研究[D];重庆大学;2014年

4 黄璐;基于遗传算法的云计算任务调度算法研究[D];厦门大学;2014年

5 郑莉;云计算环境下资源调度关键技术研究[D];北京邮电大学;2014年



本文编号:2732974

资料下载
论文发表

本文链接:https://www.wllwen.com/kejilunwen/jisuanjikexuelunwen/2732974.html


Copyright(c)文论论文网All Rights Reserved | 网站地图 |

版权申明:资料由用户08dc4***提供,本站仅收录摘要或目录,作者需要删除请E-mail邮箱bigeng88@qq.com