支持云计算环境的MapReduce模拟器设计

作     者：张国平 黄淼 马丽 Zhang Guoping;Huang Miao;Ma Li

作者机构：平顶山学院软件学院河南平顶山467000 

基　　金：国家自然科学基金项目(61103143) 河南省科技计划项目(134300510037) 平顶山学院青年科研基金项目(QNJJ-2013010) 

出 版 物：《信阳师范学院学报（自然科学版）》 (Journal of Xinyang Normal University(Natural Science Edition))

年 卷 期：2015年第28卷第3期

页      码：428-432页

摘      要：针对云计算环境下很难确定出有助于实现良好性能的Hadoop参数集的问题,设计了一种MapReduce模拟器.首先,对Hadoop的各种参数进行建模;然后,集群读取元件从集群中读取参数,从而创建模拟的Hadoop集群环境;最后,利用作业跟踪器跟踪模拟的作业,并利用任务跟踪器运行单个任务.所设计的模拟器从多角度研究Hadoop应用的性能,集中模拟Hadoop的映射和化简行为,弥补了MRPerf设计的不足.在基准测试结果和用户自定义MapReduce应用中验证了模拟器的有效性.

主 题 词：MapReduce Hadoop框架 云计算 模拟器 集群参数 

学科分类：12[管理学] 1201[管理学-管理科学与工程类] 08[工学] 081201[081201] 0812[工学-测绘类] 

D　O　I：10.3969/j.issn.1003-0972.2015.03.030

馆 藏 号：203797588...