【FFA 2026】Real-Time Analysis 2 心跳× Watermark 小红书基于Flink 的实时日志传输架构演进实践.docx

【FFA 2026】Real-Time Analysis 2 心跳× Watermark 小红书基于Flink 的实时日志传输架构演进实践.docx

心跳×Watermark

小红书基于Flink的

实时日志传输架构演进实践

赵宝珠(库奇)

赵宝珠(库奇)小红书实时引擎工程师

Hear士bea士

区分没数据or延迟

独立于业务数据的链路进度信号

统一的数据进度透传方案

Flink和下游都

通用的数据完整度信号

connector

生产落地

保障方案落的语义正确和效率

背景痛点

背景-日志采集服务Agentsmith介绍

u

uAgentsmith是为后端埋点数据提供流/批入仓通道的服务

u支撑的核心业务数据需求包括商业化广告、社区DAU、搜推效果、安全风控、内容审核

u采集节点以DaemonSet方式部署,数量约

您可能关注的文档

文档评论(0)

1亿VIP精品文档

相关文档