- 1、本文档共23页,可阅读全部内容。
- 2、原创力文档(book118)网站文档一经付费(服务费),不意味着购买了该文档的版权,仅供个人/单位学习、研究之用,不得用于商业用途,未经授权,严禁复制、发行、汇编、翻译或者网络传播等,侵权必究。
- 3、本站所有内容均由合作方或网友上传,本站不对文档的完整性、权威性及其观点立场正确性做任何保证或承诺!文档内容仅供研究参考,付费前请自行鉴别。如您付费,意味着您自己接受本站规则且自行承担风险,本站不退款、不进行额外附加服务;查看《如何避免下载的几个坑》。如果您已付费下载过本站文档,您可以点击 这里二次下载。
- 4、如文档侵犯商业秘密、侵犯著作权、侵犯人身权等,请点击“版权申诉”(推荐),也可以打举报电话:400-050-0827(电话支持时间:9:00-18:30)。
查看更多
Flink
Introduction of Two New StateBackends
Ø
Ø
Ø
Review of Flink State
Input Stream Output Stream
Keyed vs. Operator
Event Pattern
State
ML Model
Historic Data Raw vs. Managed
Review of Flink State Backends
HeapKeyedStateBackend RocksDBKeyedStateBackend
Ø State lives as Java objects on the heap Ø State lives as serialized bytes in offheap memory
Ø Data is de/serialized only during state and on local disk
snapshot and restore Ø Data is de/serialized on every read and update
Ø Highest Performance Ø Lower Performance (~order of magnitude)
Ø Memory overhead of representation Ø Relative low overhead of representation
Ø State size limited by available heap memory Ø State size limited by available local disk space
Ø Affected by GC overheads Ø Not affected by GC overheads
Ø Currently no incremental checkpoints Ø Naturally supports incremental checkpoints
A HEAP KEYED STATEBACKEND THAT NEVER FULLGC
您可能关注的文档
- 【李峰】FLINK在大规模实时无效广告流量检测中的应用.pdf
- 【孟文瑞-于淼】Uber 商业性能指标生成与管理.pdf
- 【邹丹】Flink在字节跳动的实践.pdf
- 【鞠⼤升】基于Flink的美团点评实时计算平台实践和应.pdf
- 【分会场四01-王绍翾-章剑锋】Challenges and Opportunities of Apache Flink Ecosystem.pdf
- 【翟佳-郭斯杰】使⽤Flink和Pulsar进⾏批流⼀体弹性计算.pdf
- 【滕昱】为流处理世界重新设计的存储.pdf
- 【姜春宇】以标准推动开源技术在行业的落地.pdf
- 【陈华曦】基于Apache Flink的搜索处理平台.pdf
- 【倪春恩】Apache Kylin-大数据OLAP利器.pdf
- 《电梯工程施工质量验收规范》GB50310-2002.pdf
- AVR单片机专用周周实验报告(数码管一位显示).docx
- GB∕T 39845-2021 基于LTE技术的宽带集群通信(B-TrunC)系统 网络设备技术要求(第一阶段).pdf
- GB∕T 39847-2021 固定卫星通信业务地球站进入卫星网络的验证测试方法.pdf
- GB∕T 39839-2021 基于LTE技术的宽带集群通信(B-TrunC)系统 终端设备技术要求(第一阶段).pdf
- GB∕T 39810-2021 高纯银锭 GB∕T 39810-2021 高纯银锭.pdf
- GB∕T 39850-2021 国际贸易核心构件业务单证集成技术规范.pdf
- GB∕T 39806-2021 悬空地板、踏步、步道及栈道玻璃安全性能评价.pdf
- GB∕T 39888-2021 项目和项目群管理中的挣值管理.pdf
- GB∕T 39884-2021 疑似毒品中大麻三种成分检验 气相色谱和气相色谱-质谱法.pdf
文档评论(0)