大数据核心技术对比分析.pptx

;目录;?大数据技术难点分析;大数据技术难点分析;?大数据?生态系统架构;?大数据?生态系统架构;?大数据?生态系统架构;大数据系统对比-存储分析;;大数据系统对比;测试条件 记录条数分为100亿以内和1000亿条 服务器数量为70台，配置为:CPU 12核，内存96G，硬盘48T 测试语句：select count(*) from test where age 25 and gender 0 and os 500 and sc in (0001009,0002036,0016030,”…) or bs585 and group by age,gender,os,bs 总共200列：动态列为3列（多值列），普通列为11列; 1000亿;每天请求数超过 100 亿 每天增长超过 5TB 级数据 每天对几千亿条记录进行上 1000 种维度的计算 客户有流式、实时、离线需求 数据源有广告曝光、点击数据，有微博、微信、新闻、论坛数据，还有 CRM、渠道等第三方数据;看起来像这样;理解;数据流分析案例;跨设备识别案例;跨设备识别案例;广???反作弊分析;全流量分析案例;移动端消费分析;可口可乐分析：昵称瓶”;可口可乐分析：昵称瓶”