大规模高校纠删码键值存储读写负载均衡研究

作     者：沈佳杰 朱良杰 向望 任晨 王新 SHEN Jiajie;ZHU Liangjie;XIANG Wang;REN Chen;WANG Xin

作者机构：复旦大学信息化办公室上海200433 复旦大学计算机科学技术学院上海200433 上海市智能信息处理重点实验室上海200433 

基　　金：国家自然科学基金资助项目(61971145) 

出 版 物：《深圳大学学报（理工版）》 (Journal of Shenzhen University(Science and Engineering))

年 卷 期：2020年第37卷第S1期

页      码：175-183页

摘      要：纠删码广泛部署于分布式键值存储系统来保证数据可靠性.通过将用户数据编码并存储到多个存储节点,纠删码存储系统可以在部分节点失效的情况下恢复原始数据.随着存储节点数量的增加,存储节点往往会出现负载不均衡的情况,限制其在高校云计算和信息化领域的应用场景.为解决上述问题,提出大规模纠删码键值存储系统负载均衡方案.通过将逻辑控制和存储功能分离,纠删码存储系统可以高效地确定存储节点的负载状态.为充分利用节点之间网络带宽资源,提出多切片数据编码传输方案.根据用户写入数据量,设计混合数据写入机制来提升数据写入操作的性能.在此基础上,设计了原型纠删码键值存储系统,实际原型系统测试验证了本研究中负载均衡算法的有效性.

主 题 词：纠删码存储系统 键值存储系统 云存储系统 存储架构 负载均衡 读写性能优化 

学科分类：12[管理学] 1201[管理学-管理科学与工程类] 08[工学] 0802[工学-机械学] 081201[081201] 0702[理学-物理学类] 0812[工学-测绘类] 

核心收录：

D　O　I：10.3724/SP.J.1249.2020.99175

馆 藏 号：203992034...