基于内存的分布式计算实践.docxVIP

基于内存的分布式计算 主讲人：TalkingData 企业产品研发总监 周国平 背景简介 我们团队专注于移动运营平台企业版，客户的APP日活小的有不到10万，大的可以达到数千万。 我们致力于让移动运营平台企业版能够弹性地支持小、中、大型企业客户，系统稳定且易于维护。  移动运营平台企业版 产品进化图 V4.0 V3.0 V3.1 V2.0 V1.0 2013 2014 2015 2016 2017 问题 我们团队负责 事实证明移动运 有一天，我们的一个客 移动运营平台企业 营平台企业版 V3.0 能 户，他们上线了几个日活量 版 V3.0 及后续版本 够满足绝大多数企业 较大的APP，系统的整体日活 迭代，当时的设计 客户的需求，能够稳 达到了2000万，运维人员反 目标支撑500w日活 ， 定地支撑他们的业务。 映MySQL的binlog增长很快， 数据库使用 MySQL 。 快把剩余磁盘空间占满了。 企业客户APP日活设计目标 500 W  2000 W 500 W 问题分析 1 我们使用了bitmap索引技术保证移动运营各项指标（如日活、留存、转化漏斗等）的实时 计算，因为bitmap索引高效且能节省存储空间，它能很方便地做指标的实时排重。  bitmap 某APP某天0：0的初始活跃状态 第1位 第2位 第3位 … 第N-1位 第N位 设备1 设备2 设备3 设备N