一种基于动态拓扑的流计算性能优化方法及其在Storm中的实现.pdfVIP

一种基于动态拓扑的流计算性能优化方法及其在Storm中 的实现 陆佳炜;吴涵; 陈烘;张元鸣;梁倩卉; 肖刚 【期刊名称】《电子学报》 【年(卷),期】2020(048)005 【摘要】响应性和稳定性一直是流式计算中两个至关重要的问题,而流计算系统 在过载时常常表现出数据计算延迟增加和拓扑不稳定的现象,无法适应数据负载 的动态变化.针对这一问题本文研究提出了一种基于动态拓扑的流计算性能优化 方法,主要包括:(1)动态逐级反压:拓扑中的任务可以根据当前自身负载情况,动态 调整上游向其发送数据的速率 .