MapReduce能耗建模及优化分析

作     者：廖彬 张陶 于炯 尹路通 郭刚 国冰磊 Liao Bin;Zhang Tao;Yu Jiong;Yin Lutong;Guo Gang;Guo Binglei

作者机构：新疆财经大学统计与信息学院乌鲁木齐830012 新疆大学软件学院乌鲁木齐830008 新疆大学信息科学与工程学院乌鲁木齐830046 新疆医科大学医学工程技术学院乌鲁木齐830011 

基　　金：国家自然科学基金项目(61562078 61262088 71261025) 新疆财经大学博士科研启动基金项目(2015BS007)~~ 

出 版 物：《计算机研究与发展》 (Journal of Computer Research and Development)

年 卷 期：2016年第53卷第9期

页      码：2107-2131页

摘      要：云计算中心规模的不断扩大以及设计时对能耗因素的忽略,使其日益暴露出高能耗低效率的问题.为提高MapReduce框架能耗利用率,首先对MapReduce任务进行了能耗建模,提出基于CPU利用率估算、主要部件能耗累加及平均功耗估算的任务能耗模型,并在此基础上建立了MapReduce作业能耗模型.其次,基于能耗模型对能耗优化进行了分析,提出从优化MapReduce作业执行能耗、减少MapReduce任务等待能耗与提高MapReduce集群能源利用效率3个方向对MapReduce进行能耗优化.再次,提出异构环境下的数据放置策略减小MapReduce任务等待能耗,提出截止时间约束下的最小资源分配方法提高MapReduce作业能耗利用效率.通过大量的实验及能耗数据分析,验证了能耗模型及能耗优化方法的有效性.

主 题 词：绿色计算 任务调度 能耗建模 节能分析 数据布局 

学科分类：0810[工学-土木类] 0808[工学-自动化类] 0839[0839] 08[工学] 080402[080402] 0804[工学-材料学] 0835[0835] 0811[工学-水利类] 0812[工学-测绘类] 

核心收录：

D　O　I：10.7544/issn1000-1239.2016.20148443

馆 藏 号：203189385...