基于Flink的数据运营平台系统设计与实现.docx

PAGE6

基于Flink的数据运营平台系统设计与实现摘要

如今大数据的处理技术手段已经迭代发展了多个阶段，其中由Hadoop为代表的那一套组件是第一代，由Spark为代表的是第二代，到如今发展火热的Flink为第三代。无论是哪一代技术都有着自身的特色，用哪一个，只是看具体处理的需求而言。而在越来越讲究实效性的今天，越来越多的企业对海量数据实时处理的需求越发旺盛，Flink对数据出色的计算能力让它得到了人们的青睐。它达到了同时满足数据高吞吐和低延迟的性能时，又保证了数据在处理流程中的高可靠性。基于实时处理需求出发，本文提出了一套可行的系统方案。

首先，在数据采集阶段，要使