《互联网行为定向广告技术_20160830》.pdfVIP

大数据时代的互联网行为定向 广告技术 品友互动 林昭 • 最大的数据服务公司 •十年后，谁是NO.1 1 互联网广告介绍 2 大数据计算平台 3 定向广告的数据挖掘 互联网广告分类 • 搜索广告 – 搜索广告是指广告主根据自己产品的内容和特点 等，确定相关的关键词，自主定价投放的广告 • 展示广告 – 应用广泛 – 形式多样：图片、文字链接、视频广告、移动广 告、社交广告等形式 – 前景广阔 展示广告增长强劲 互联网广告的计费方式 • CPT/CPD(Cost-Per-Time):每小时/天费 用 • CPM(Cost-Per-Mille/Impressions):每 千次曝光费用 • CPC(Cost-Per-Click):每次点击费用 • CPA/CPS(Cost-Per-Action):每次效果 费用 • …… 互联网行为定向广告 • 通过获取用户行为（浏览、点击、购 买等），分析其用户属性（关注点、 兴趣取向等），从而实现“定向投放” 的广告 –网站广告资源充分利用 –广告主实现最大的投放效果 –网民体验更好，看到自己感兴趣的 信息 大数据计算平台 工具和技术 LibSVM 基础架构 Flume Collectors Flume agent Flume agent Pinyou Data Warehouse T1 T2 T3 ... Tn OPEN_API Report DSS OLAP Dashboard Ganglia、Nagios 日志收集系统 - Flume 与DB的交互：Sqoop • SQL-to-Hadoop • 解决数据源多样问题,实现多个不同数据库 与hadoop的快速、简易的传输 Pig在品友的使用 • 大量的业务、需求、分析需要大量的开发 工作，怎么在有限的人力资源和时间成本 中平衡 • Pig的广泛使用 – 简单易学 – Pig Script转换为MR程序,缩短开发时间 – 丰富的Pig Built- In Function – 可扩展的Pig User Defined Function MapReduce程序 工作流：Oozie • 由于我们的分析内容多种多样，一个分析 过程可能就需要对HDFS进行多种操作:MR、 Pig、Sqoop和等多个子程序 • 为了整合分析过程的各个阶段，使分析的 过程更有逻辑性，并且提高Job在Hadoop上 的执行效率，我们使用Oozie作为基于 Hadoop的工作流引擎管理数据流水线。 系统监控-Ganglia(Nagios) Redis在品友的使用 • 定向广告，