字节跳动EB级Iceberg数据湖的机器学习应用与优化.docx

字节跳动EB级Iceberg数据湖的机器学习应用与优化.docx

字节跳动EB级Iceberg数据湖的机器学习应用与优化

谢凯/字节跳动基础架构研发工程师

谢凯/字节跳动基础架构研发工程师

?毕业于新加坡国立大学,曾就职于PayPalAIInfra

?从事数据湖、ML特征工程8年,取得过十余份该领域的专利

?目前在字节跳动负责Iceberg数据湖、FeatureStore样本存储的开发工作

Outline

?机器学习样本存储:背景与趋势

?Magnus:字节强化版Iceberg数据湖

?字节跳动EB级样本存储优化与实践

?总结与展望

机器学习样本存储:背景与趋势

机器学习与训练

文档评论(0)

1亿VIP精品文档

相关文档