电力全业务统一数据中心突发性数据处理任务调度方法

作     者：王德文 刘庭辉 WANG Dewen;LIU Tinghui

作者机构：华北电力大学控制与计算机工程学院河北省保定市071003 

基　　金：国家自然科学基金资助项目(51677072)~~ 

出 版 物：《电力系统自动化》 (Automation of Electric Power Systems)

年 卷 期：2018年第42卷第8期

页      码：177-184页

摘      要：国家电网有限公司正在开展电力全业务统一数据中心的建设,以实现全业务范围、全数据类型、全时间维度数据的统一存储、管理分析。在全业务范围数据全量推送过程中,尤其在突发性海量数据涌入时,全业务统一数据中心的处理能力面临着巨大挑战,数据处理任务调度方法是提高其数据处理能力的关键。通过对电力全业务统一数据中心设计方案和架构的分析,给出一种数据处理任务控制调度模型,从任务的时间和有效价值两方面综合分析任务的优先级。提出了基于多级队列的动态实时优先级调度(DRPS)算法,并分析了不同类型处理任务的优先级动态变化趋势。采用CloudSim平台模拟全业务统一数据中心的数据抽取—转换—加载(ETL)任务,并进行仿真测试。结果表明DRPS算法相比于动态价值密度(DVD)算法及最早截止优先(EDF)算法,在截止期错失率方面有明显下降,任务完成率也有明显提高。

主 题 词：全业务统一数据中心 突发性海量数据 任务调度 动态实时优先级 

学科分类：0808[工学-自动化类] 080802[080802] 0809[工学-计算机类] 08[工学] 0807[工学-电子信息类] 0802[工学-机械学] 0811[工学-水利类] 0812[工学-测绘类] 

核心收录：

D　O　I：10.7500/aeps20170802001

馆 藏 号：203285689...