限定检索结果

检索条件"机构=上海淇毓信息科技有限公司"
1 条 记 录,以下是1-10 订阅
视图:
排序:
广播机制解决Shuffle过程数据倾斜的方法
收藏 引用
《计算机系统应用》2019年 第6期28卷 189-197页
作者:吴恩慈上海淇毓信息科技有限公司 
在Spark 计算平台中,数据倾斜往往导致某些节点承受更大的网络流量和计算压力,给集群的CPU、内存、磁盘和流量带来了巨大的负担,影响整个集群的计算性能.本文通过对Spark Shuffle 设计和算法实现的研究,深入分析在大规模分布式环境下发...
来源:详细信息评论
聚类工具 回到顶部