大数据分析技术应用-Kafka工作原理.pptx

Kafka工作原理

学习目标Kafka架构Kafka工作原理132知识思政技能Kafka工作流程吃苦耐劳科学探索精神

技术前提Centos7.0Flume实时数据采集脚本的编写

Kafka的应用场景应用场景主要包括：实时流数据处理、日志收集和消息。

Kafka的工作原理相关概念1.Topic和Partition：Kafka中的数据被组织成一个或多个主题（Topic），每个主题可以被分成多个分区（Partition）。分区可以视为数据在Kafka中的存储单元，每个分区都是一个有序的、不可变的数据记录序列。每个分区都有一个唯一的标识符（PartitionID），它由一个整数表示。

Kafka