快手基于指标中台的实验数据链路建设.pdfVIP

快手基于指标中台的实验数据

链路建设

陈硕-快手-指标平台技术负责人

DataFunSummit#2023

目录

CONTENT

01实验领域介绍03详细介绍

02问题与解法04总结

01

实验领域介绍

DataFunSummit#2023

什么是AB实验？

购物车图标动态话，是否能够提升点击率？

随机分流实验部署实验数据分析实验结论

1%用户对照组对照组

静态样式点击率1%实验组点击

率更高且统

小黄车banner计显著，动

实验参与用户态样式能有

效提升点击

1%用户实验组实验组率，该功能

动态样式点击率1.3%推全

实验平台基本架构

实验配置服务实验分析配置

实验管理与执行模块实验数据与分析模块

实验分组管理实验指标定义

参数配置实验报表配置

实验分流

实验命中日志实验报告生产

报表/可视化

参数下发实验即时分析

自助分析

数仓埋点日志

服务端SDK客户端SDK高级分析方法

实验执行服务实验日志服务实验分析服务实验分析应用

02

问题与解法

DataFunSummit#2023

问题：AB实验指标的质效问题

基于指标中台重构前的架构

AB实验指标/生产/查询能力闭环建设

实验/分组指

标聚合表问题：