支持绿色云计算的资源调度方法及关键技术研究
本文选题:绿色云计算 + 资源调度 ; 参考:《南京大学》2016年博士论文
【摘要】:近年来,随着云计算技术的不断发展,云数据中心硬件规模不断膨胀,云数据中心的能耗问题得到了学术界和产业界的广泛关注,如何实现绿色云计算成为推动云计算产业健康发展的关键问题。作为云数据中心资源分配与管理的重要技术手段,虚拟化资源调度技术为实现绿色云计算提供了强有力的支撑。一方面,虚拟化资源调度可以有效地确保云计算按需获取、按需计费等技术特征,实现用户对于资源QoS (Quality of Service,服务质量)的弹性需求;另一方面,基于虚拟化资源调度,可以从节能优化的角度,有效地支持绿色云计算的应用实施,实现数据中心的绿色节能。虚拟化资源调度技术,从技术上为绿色云计算的实施提供了可行的应用途径。但是,当前绿色云计算的研究工作,重点关注的是节能方面,经常忽略云数据中心在资源调度过程中服务质量与能耗内在的影响关系,尤其是与能耗有关的服务质量保障技术,如用户对服务的QoS增强需求和能耗控制的关系、规模庞大且复杂化的虚拟机迁移与个性化且多样化的服务请求之间的协调关系等。针对这种应用需求,支持绿色云计算的资源调度主要面临如下挑战:1)传统的QoS评估体系中尚未考虑云服务的能耗因素,进行能耗优化的资源调度过程中,需要考虑QoS增强的需求;2)为了实现节能减排,云数据中心面临复杂、动态变化的虚拟机迁移请求,在资源调度过程中需要权衡考虑虚拟机迁移引起能耗优化与性能衰减;3)云平台中部署海量具有不同资源请求特征的应用,需要根据应用个性化的资源需求,进行应用实现。针对上述面向绿色云计算的资源调度所面临的挑战,本文对支持绿色云计算的资源调度方法及关键技术展开研究,主要工作包括以下几项:1)为实现云数据中心节能减排,本文提出了一个支持绿色云计算的资源调度框架,该框架分为五个层次,自下而上分别为硬件层、虚拟化层、资源调度方法层、资源调度技术、以及应用实现层。具体而言,硬件层主要是指分布在云数据中心底层的硬件设施、空调制冷设备以及通风设备等,用于响应云服务过程中所需要的各种资源需求。虚拟化层主要是为不同类型的应用提供不同的虚拟机实例,也为云数据中心管理提供各种技术支撑。根据虚拟化层提供的虚拟机资源以及支撑技术,资源调度方法层主要为云数据中心提供QoS增强的高能效调度方法。资源调度技术层则是为了优化资源调度过程,选择对虚拟机性能以及能耗权衡最优的资源调度方案。最后,应用实现层主要针对部署到云平台上运行的具有个性化资源需求和调度特性的应用,进行高能效的资源分配与调度。2)为了满足能耗优化的过程中用户对服务质量增强的需求,本文提出了一个支持绿色云计算QoS服务增强的资源调度方法。具体而言,本文首先提出了一个云环境下的能耗模型,对任务执行过程中的能耗进行详细分析和计算。基于该能耗模型,通过能耗感知的虚拟机调度实现了对低功耗物理机空余空间的充分利用,将高能耗物理机上的虚拟机迁移到低能耗物理机上运行,再通过关闭空载的物理机达到节省能耗的目的,从而降低了数据中心的成本开销。若将节约的成本部分让利于用户,则能从降低云服务价格的角度,让用户体验执行价格的动态优化效果。然后,通过执行时间感知的虚拟机调度将低性能物理机上运行的虚拟机迁移到高性能物理机上运行,缩短了部署在虚拟机上的计算任务的执行时间,使用户更直接体验了执行时间动态优化的应用效果;最后通过设计迁移剪枝策略,优化了调度过程中的虚拟机迁移次数,实现了QoS增强的虚拟机调度。3)针对云数据中心虚拟机迁移带来的能耗节约优势和性能衰减问题,本文研究了支持绿色云计算的能耗与性能权衡的资源调度技术。具体而言,为了量化虚拟机迁移技术对能耗以及虚拟机性能带来的影响,分别构建了面向虚拟机迁移的能耗模型和性能衰减模型。进一步,为了归一化能耗与性能两个资源调度指标,引入简单加权法(Simple Additive Weighting, SAW)和多准则决策(Multiple Criteria Decision Making, MCDM)两种技术对能耗与性能两个指标进行了归一化处理。然后,针对云数据中心虚拟机的分布情况,对虚拟机迁移策略进行启发式搜索。最后,根据归一化处理后的效用函数,确定了最终优化的虚拟机迁移策略,实现了云环境下能耗与性能权衡的虚拟机调度。4)从性能验证的角度出发,对支持绿色云计算的科学工作流应用进行了分析与研究,验证了上述研究内容的有效性与可扩展性。具体而言,首先根据科学工作流的个性化特征进行资源需求分析,并分析了科学工作流执行过程中所产生的各方面能耗。进而,构建物理机资源使用表,并及时追踪分析了科学工作流中的子任务所占用的物理资源情况。然后,根据科学工作流的个性化资源需求进行静态的资源分配,使得任务初始分配阶段资源利用率最高,且所占用的物理机数量最优。最后,在任务执行的过程中,针对分配资源的动态变化的情况,利用虚拟机实时迁移技术对虚拟机进行动态调度,实现了科学工作流在动态执行过程中的高能效目标。
[Abstract]:In recent years , with the development of cloud computing technology , the scale of cloud data center hardware is expanding continuously , and the energy consumption of cloud data center has been widely paid attention to by the academic community and industry . How to realize the green cloud computing is the key problem to promote the healthy development of cloud computing industry . As the important technology for resource allocation and management of cloud data center , virtualization resource scheduling technology provides powerful support for realizing green cloud computing .
On the other hand , based on the virtualization resource scheduling , the application of the green cloud computing can be effectively supported from the energy - saving optimization perspective , and the green energy - saving of the data center is realized .
2 ) In order to realize energy conservation and emission reduction , the cloud data center is faced with complex and dynamic virtual machine migration requests , and the energy consumption optimization and the performance attenuation caused by the migration of the virtual machines are balanced in the resource scheduling process ;
The invention provides a resource scheduling method for supporting green cloud computing , which comprises the following steps :
The paper studies the energy consumption model and the performance attenuation model for virtual machine migration .
【学位授予单位】:南京大学
【学位级别】:博士
【学位授予年份】:2016
【分类号】:TP302;TP393.09
【相似文献】
相关期刊论文 前10条
1 曹晓刚;;Java虚拟机的10年[J];程序员;2005年07期
2 宋韬;盘细平;罗元柯;倪国军;;Java虚拟机在嵌入式DSP系统上的实现[J];计算机应用与软件;2007年04期
3 刘黎波;;Java虚拟机拦截原理研究[J];科技风;2008年21期
4 刘治波;;Java虚拟机简析[J];济南职业学院学报;2008年01期
5 郝帅;;Java虚拟机中相关技术的探讨[J];成功(教育);2008年08期
6 李霞;;系统虚拟机关键技术研究[J];微型电脑应用;2010年03期
7 郑晓珑;孔挺;;虚拟机的安全风险与管理[J];硅谷;2010年16期
8 李学昌;平淡;;为速度而战,虚拟机内外兼修[J];电脑爱好者;2010年18期
9 王惠萍;张海龙;冯帆;王建华;;Java虚拟机使用及优化[J];计算机与网络;2010年21期
10 郑婷婷;武延军;贺也平;;云计算环境下的虚拟机快速克隆技术[J];计算机工程与应用;2011年13期
相关会议论文 前10条
1 孟广平;;虚拟机漂移网络连接方法探讨[A];中国计量协会冶金分会2011年会论文集[C];2011年
2 段翼真;王晓程;;可信安全虚拟机平台的研究[A];第26次全国计算机安全学术交流会论文集[C];2011年
3 李明宇;张倩;吕品;;网络流量感知的虚拟机高可用动态部署研究[A];2014第二届中国指挥控制大会论文集(上)[C];2014年
4 林红;;Java虚拟机面向数字媒体的应用研究[A];计算机技术与应用进展——全国第17届计算机科学与技术应用(CACIS)学术会议论文集(上册)[C];2006年
5 杨旭;彭一明;刑承杰;李若淼;;基于VMware vSphere 5虚拟机的备份系统实现[A];中国高等教育学会教育信息化分会第十二次学术年会论文集[C];2014年
6 沈敏虎;查德平;刘百祥;赵泽宇;;虚拟机网络部署与管理研究[A];中国高等教育学会教育信息化分会第十次学术年会论文集[C];2010年
7 李英壮;廖培腾;孙梦;李先毅;;基于云计算的数据中心虚拟机管理平台的设计[A];中国高等教育学会教育信息化分会第十次学术年会论文集[C];2010年
8 朱欣焰;苏科华;毛继国;龚健雅;;GIS符号虚拟机及实现方法研究[A];《测绘通报》测绘科学前沿技术论坛摘要集[C];2008年
9 于洋;陈晓东;俞承芳;李旦;;基于FPGA平台的虚拟机建模与仿真[A];2007'仪表,,自动化及先进集成技术大会论文集(一)[C];2007年
10 丁涛;郝沁汾;张冰;;内核虚拟机调度策略的研究与分析[A];'2010系统仿真技术及其应用学术会议论文集[C];2010年
相关重要报纸文章 前10条
1 ;虚拟机的生与死[N];网络世界;2008年
2 本报记者 卜娜;高性能Java虚拟机将在中国云市场释能[N];中国计算机报;2012年
3 本报记者 邱燕娜;如何告别虚拟机管理烦恼[N];中国计算机报;2012年
4 ;首批通过云计算产品虚拟机管理测评名单[N];中国电子报;2014年
5 申琳;虚拟机泛滥 系统安全怎么办[N];中国计算机报;2008年
6 Tom Henderson邋沈建苗 编译;虚拟机管理的五大问题[N];计算机世界;2008年
7 盆盆;真实的虚拟机[N];中国电脑教育报;2004年
8 本版编辑 综合 编译整理 田梦;管理好虚拟机的全生命周期[N];计算机世界;2008年
9 李婷;中国研制出全球最快反病毒虚拟机[N];人民邮电;2009年
10 张弛;虚拟机迁移走向真正自由[N];网络世界;2010年
相关博士学位论文 前10条
1 宋翔;多核虚拟环境的性能及可伸缩性研究[D];复旦大学;2014年
2 王桂平;云环境下面向可信的虚拟机异常检测关键技术研究[D];重庆大学;2015年
3 周真;云平台下运行环境感知的虚拟机异常检测策略及算法研究[D];重庆大学;2015年
4 郭芬;面向虚拟机的云平台资源部署与调度研究[D];华南理工大学;2015年
5 周傲;高可靠云服务供应关键技术研究[D];北京邮电大学;2015年
6 代炜琦;云计算执行环境可信构建关键技术研究[D];华中科技大学;2015年
7 刘圣卓;面向虚拟集群的镜像存储与传输优化[D];清华大学;2015年
8 彭成磊;云数据中心绿色节能需求的虚拟机负载均衡技术研究[D];南京大学;2016年
9 赵长名;IaaS云中基于资源感知的虚拟机资源管埋[D];电子科技大学;2016年
10 许小龙;支持绿色云计算的资源调度方法及关键技术研究[D];南京大学;2016年
相关硕士学位论文 前10条
1 潘飞;负载相关的虚拟机放置策略研究[D];杭州电子科技大学;2011年
2 王建一;混合型桌面云高可用性研究与实现[D];华南理工大学;2015年
3 周衡;云计算环境下虚拟机优化调度策略研究[D];河北大学;2015年
4 罗仲皓;基于OpenStack的私有云计算平台的设计与实现[D];华南理工大学;2015年
5 李子堂;面向负载均衡的虚拟机动态迁移优化研究[D];辽宁大学;2015年
6 张煜;基于OpenStack的“实验云”平台的研究与开发[D];西南交通大学;2015年
7 曾文琦;面向应用服务的云规模虚似机性能监控与负载分析技术研究[D];复旦大学;2013年
8 施继成;面向多核处理器的虚拟机性能优化[D];复旦大学;2014年
9 游井辉;基于虚拟机动态迁移的资源调度策略研究[D];华南理工大学;2015年
10 方良英;云平台的资源优化管理研究与实现[D];南京师范大学;2015年
本文编号:1971461
本文链接:https://www.wllwen.com/guanlilunwen/ydhl/1971461.html