文献检索-宁波市创意产业特色资源库

限定检索结果

基于YARN的分布式资源动态调度与协同分配系统: 收藏
分享
引用; 《计算机工程》2021年第2期47卷 226-232页; 作者：郝志峰黄泽林蔡瑞初傅正佳温雯唐凯麟广东工业大学计算机学院广州510006 佛山科学技术学院数学与大数据学院广东佛山528000; Storm on YARN是目前主流的分布式资源调度框架,但其存在需要人工干预和无法根据资源可用性实时调整系统资源的不足。根据流数据处理的实时延迟计算系统负载情况,在Storm平台上基于YARN设计分布式资源调度和协同分配系统。建立包含系统...; Storm on YARN是目前主流的分布式资源调度框架,但其存在需要人工干预和无法根据资源可用性实时调整系统资源的不足。根据流数据处理的实时延迟计算系统负载情况,在Storm平台上基于YARN设计分布式资源调度和协同分配系统。建立包含系统层和任务层的双层调度模型,系统层通过对流数据处理负载的实时监测进行资源分配预测,任务层利用ZooKeeper和YARN对集群资源的高效管理能力进行动态资源管理。实验结果表明,该系统可以实时调整集群资源分布,有效减小系统延迟。; 来源：详细信息评论

限定检索结果