字节跳动EB级Iceberg数据湖的机器学习应用与优化.pdf

字节跳动EB级Iceberg数据湖的机器学习应用与优化.pdf

字节跳动EB级Iceberg数据湖的

机器学习应用与优化

谢凯/字节跳动基础架构研发工程师

谢凯/字节跳动基础架构研发工程师

•毕业于新加坡国立大学,曾就职于PayPalAIInfra

•从事数据湖、ML特征工程8年,取得过十余份该领域的专利

•目前在字节跳动负责Iceberg数据湖、FeatureStore样本存储的开发工作

Outline

•机器学习样本存储:背景与趋势

•Magnus:字节强化版Iceberg数据湖

•字节跳动EB级样本存储优化与实践

•总结与展望

机器学习样本存储:背景与趋势

机器学习与训练样

文档评论(0)

1亿VIP精品文档

相关文档