Seadown:一种异构MapReduce集群中面向SLA的能耗管理方法

作     者：林彬 李姗姗 廖湘科 孟令丙 刘晓东 黄訸 LIN Bin;LI Shan-Shan;LIAO Xiang-Ke;MENG Ling-Bing;LIU Xiao-Dong;HUANG He

作者机构：国防科学技术大学计算机学院长沙410073 

基　　金：国家自然科学基金项目"无线协同的混合数据中心网络流量管理技术研究"(61272483) "面向云数据中心节能降耗的网络优化控制技术研究"(61202430)资助 

出 版 物：《计算机学报》 (Chinese Journal of Computers)

年 卷 期：2013年第36卷第5期

页      码：977-987页

摘      要：数据中心的能耗管理已经成为大规模数据处理中的热点问题,其主要目标是控制相关成本的急剧增长.大量的工作围绕着在集群利用率较低时,关闭部分服务器来降低能耗,但是这些方法都严重受限于数据存储策略,同时难以保证应用的实时性能.MapReduce集群作为目前流行的大规模数据处理平台,能耗问题尤为突出.文中针对异构MapReduce集群,提出一种面向SLA的能耗管理方法Seadown.首先,提出一种混合数据副本存储策略,它允许关闭大量节点,同时保证数据的完整性和集群的容错能力.其次,设计了一种基于历史记录的响应时间预测方法,它根据服务器节点的数量、性能参数和运行时间的历史信息准确估计程序的响应时间,相对误差大都在6%以下.最后,通过选择性地关闭部分节点以达到最小化能耗,同时保证应用程序的实时性能.文中证明了该优化问题是NP-hard问题,并提出了一种启发式的节点关闭策略.实验结果表明,在节点关闭策略下MapReduce应用的实时性得以保证,同时降低了大量的能耗.

主 题 词：能耗管理 节点可开关 MapReduce 数据中心 绿色计算 

学科分类：0810[工学-土木类] 12[管理学] 1201[管理学-管理科学与工程类] 0808[工学-自动化类] 0839[0839] 08[工学] 0835[0835] 0811[工学-水利类] 081201[081201] 0812[工学-测绘类] 

核心收录：

D　O　I：10.3724/sp.j.1016.2013.00977

馆 藏 号：203673601...