- 2
- 0
- 约1.09万字
- 约 18页
- 2021-02-06 发布于山东
- 举报
Kafka 剖析(一): Kafka 背景及架构介绍
近年来,活动和运营数据处理已经成为了网站软件产品
特性中一个至关重要的组成部分,这就需要一套稍微更加复
杂的基础设施对其提供支持。
Kafka 简介
Kafka 是一种分布式的,基于发布 /订阅的消息系统。主要设
计目标如下:
以时间复杂度为 O(1) 的方式提供消息持久化能力,即使对
TB 级以上数据也能保证常数时间复杂度的访问性能。高吞
吐率。即使在非常廉价的商用机器上也能做到单机支持每秒
100K 条以上消息的传输。 支持 Kafka Server 间的消息分区,
及分布式消费,同时保证每个 Partition 内的消息顺序传输。
同时支持离线数据处理和实时数据处理。 Scale out :支持在
线水平扩展。
为何使用消息系统
解耦
在项目启动之初来预测将来项目会碰到什么需求,是极其困
难的。消息系统在处理过程中间插入了一个隐含的、基于数
据的接口层,两边的处理过程都要实现这一接口。这允许你
独立的扩展或修改两边的处理过程,只要确保它们遵守同样
的接口约束。
冗余
有些情况下,处理数据的过程会失败。除非数据被持久化,否则将造成丢失。消息队列把数据进行持久化直到它们已经被完全处理,通过这一方式规避了数据丢失风险。许多消息
队列所采用的 插入 -获取 -删除 范式中,在把一个消息从队列中删除之前,需要你的处理系统明确的指出
您可能关注的文档
- ERP物料编码的意义和原则.docx
- erp软件设计说明书.docx
- g20峰会文艺晚会《最忆是杭州》书法竟然出自他手.docx
- GetCallbackEventReference的用法挨踢人生.docx
- GPS技术在矿山控制测量中的应用研究.docx
- HPLC法测定脑力静颗粒中三种维生素的含量.docx
- hpomenpro移动工作站规格.docx
- HPUX操作系统性能分析指南.docx
- HS0038红外一体化接收头.docx
- HXN3型内燃机车抱轴箱体螺纹孔修复的研究.docx
- 三菱数控系统M800V-M80V-Series-Programming-Manual-Machining-Center-System-ib1501621-1501622enga操作说明书手册.pdf
- 三菱数控系统M800VS-M80V-Series-Connection-and-Setup-Manual-ib1501613enga操作说明书手册.pdf
- 三菱数控系统M800-M80-E80 Series PLC Programming Manual操作说明书手册.pdf
- 三菱数控系统M800-M80-E80-C80-Series-Programming-Manual-Lathe-System操作说明书手册.pdf
- 三菱数控系统M800-M80-E80-C80-Series-Specifications-Manual-Function操作说明书手册.pdf
- 三菱数控系统M800-M80-E80-Series-PLC-Development-Manual操作说明书手册.pdf
- 三菱数控系统M800-M80-Series操作说明书手册.pdf
- 三菱数控系统M800W-M80W-Series-Connection-and-Setup-Manual操作说明书手册.pdf
- 三菱数控系统M800V-M80V-Series-Specifications-Manual-Function-ib1501610engb操作说明书手册.pdf
- 三菱数控系统M800-M80-E80 Series Alarm und Parameter Manual操作说明书手册.pdf
最近下载
- 2026中国游戏产业趋势及潜力分析报告.pdf VIP
- 2026 IHC A-6希望杯数学竞赛六年级试卷及答案发布版.pdf VIP
- 2025年游戏行业电竞产业发展报告及未来五至十年游戏产业创新趋势报告.docx VIP
- 地方建筑图集建筑 甘肃室外工程(一)---甘12J5-1图集建筑.docx VIP
- 儿童门急诊急性呼吸道感染专家共识(2026)解读PPT课件.pptx VIP
- 北师大版数学九年级上册6.1反比例函数教案.doc VIP
- 2026年游戏行业云游戏技术创新报告及未来游戏产业趋势分析报告.docx VIP
- 城市地下管网管廊及设施建设改造实施方案编制指南(试行).docx VIP
- 富菱达交流变频调速电梯电气原理图.pdf VIP
- 2026 大学生3C数码消费趋势洞察.pptx VIP
原创力文档

文档评论(0)