原创力文档基于Fluss+Paimon+Starrocks搭建淘天集团湖流一体数据链路
朱奥
淘天集团高级数据工程师
项目背景与核心策略
Fluss+Paimon+Starrocks
在淘天集团湖流一体场景下的应用
阶段成果与未来规划
项目背景与核心策略
1.1当前湖仓架构
1.2业务诉求与核心痛点
业务诉求
?秒级实时数据schema化
?湖仓一体架构支持秒级场景
?湖流一体开发效率提升
核心痛点
?流批存储不统一
?秒级实时数据不可见
?没有一个高效易用的湖流一体数据加工方案
1.3核心策略
统一流批存储，数据可见列裁剪和多级分区
您可能关注的文档
- 2025年全球光伏市场报告.docx
- 2025年度中国乘用车企业平均燃料消耗量与新能源汽车积分核算情况表.docx
- 2025东亚银行·胡润财富报告.docx
- 【FFA 2026】智能开发与运维 从结构化到多模态Dataphin 基于Flink 实时非结构化实践.docx
- 【FFA 2026】多模态与向量计算 从数据到进化：大模型驱动的自进化智能体 技术突破与洞察.docx
- 【FFA 2026】AI Agent Apache Flink AI智能体时代的LLamaFactory 高效大模型训练与数据治理.docx
- 2025年教育改革：新课程体系与教学方法创新报告.docx
- 2026年高考备考策略分享报告.docx
- 统编版语文七年级下册第五单元练习题（含答案）.docx
- 统编版语文八年级下册第四单元训练题（含答案）.docx
- 2026年冀教版（三起）（新教材）小学英语四年级下册期末综合测试卷及答案（2套）.pdf
- 2026年统编版小学语文二年级下册期末字词专项复习卷含答案.pdf
- 2026年外研版（三起）版小学英语六年级下册期末综合测试卷及答案.docx
- 2026年人教PEP版（一起）（新教材）小学英语一年级下册期末综合测试卷及答案（2套）.pdf
- 2026年北京版小学数学六年级下册期末综合测试卷及答案.docx
- 2026年冀教版（三起）小学英语五年级下册期末质量检测卷及答案.pdf
- 2026年北师大版小学小升初数学模拟检测卷附答案.pdf
- 2026年人教新起点版小学英语六年级下册期末综合测试卷及答案（2套）.pdf
- 2026年青岛版小学数学五年级下册期末综合测试卷及答案.docx
- 2026年人教新起点版小学英语五年级下册期末学情自测卷及答案.docx
最近下载
- eVTOL技术2025年适航认证关键性能指标与测试方法报告.docx
- 2026新疆农发集团（供销社）有限公司招聘4人笔试历年参考题库附带答案详解.docx VIP
- 清西大桥钢护筒施工方案.pdf VIP
- 2025新疆农发集团（供销社）有限公司招聘3人笔试历年典型考点题库附带答案详解.docx VIP
- 人教新版初二数学下册平行四边形(提高题).docx VIP
- 2023年东莞理工学院城市学院计算机应用技术专业《数据结构与算法》科目期末试卷A（有答案）.docx VIP
- 分析化学（兰州大学）知到智慧树期末考试答案题库2024年秋兰州大学.docx VIP
- （2025）新生儿败血症诊疗专家共识PPT课件.pptx VIP
- 2025届四川省成都七中学育才学校数学七下期末联考试题含解析.doc VIP
- 新生儿败血症诊断与治疗专家共识.docx VIP
文档评论（0）