大数据技术在精准营销中的应用.PDFVIP

Business Operation 业务与运营 大数据技术在精准营销中的应用 王小鹏 北京东方国信科技股份有限公司 北京 100102 摘　要 简要介绍主流的大数据技术架构和大数据挖掘技术；阐述大数据技术在精准营销与维系系统建设中的应 用，包括技术实现方式以及大数据能力的体现，最后展望大数据应用的前景。 关键词 大数据应用；大数据技术；精准营销；大数据挖掘；大数据能力 一个服务器系统。其基本特征是由多个SMP服务器(每 引言 个SMP服务器称为一个节点)通过节点互联网络连接而 大数据时代 ，数据已经渗透到当今每一个行业和 成，每个节点只访问自己的本地资源( 内存、存储等) ， 业务职能领域 成为重要的生产因素 对于海量数据的 节点之间的信息交互是通过节点互联网络实现的。目 ， 。 挖掘和运用 预示着新一波生产率增长和消费者盈余浪 前的技术可实现512个节点互联。MPP数据库有以下特 ， 潮的到来。回顾近两年对大数据的探索历程，某基础运 点。1)一般存储为结构化数据，有明显的星型或雪花型 结构 适用于大数据分析的应用 2)每个服务器都有自 营商一方面顺应大势，牢牢把握大数据技术快速发展的 ， ； 机遇，另一方面应势而动，充分释放前期IT集中化、一 己独立的存储、内存和CPU ，允许动态地增加或删除 体化的红利 坚定推进数据集中 先后经历了数据集中 节点；3)数据分区划分到不同的物理节点上，通过分布 ， 。 式查询优化来提高系统整体性能 4)主要用在数据仓库 采集的积淀 初试大数据Hadoop平台 传统数据库与 ； 、 、 Hadoop混搭架构的大数据平台创建，以及 目前朝开放 和大规模的分析处理应用中。 式大数据服务平台迈进四个阶段。 1.2 Hadoop大数据处理平台 精准化营销与维系系统 依托大数据精准定位支撑 ， Hadoop是参考Google相关技术而发展起来的开源 端到端多维度维系体系 构建在大数据平台之上 面向 ， ， 分布式存储和计算系统。其核心部分是HDFS(Hadoop 客户、面向服务、面向管理，深化数据分析、数据挖掘 Distributed File System ，分布式文件系统)和M/R(Map/ 能力，洞察客户、透视企业，是将大数据转化为实际生 Reduce) HDFS是一个高度容错性的存储系统 M/ R 。 ， 产力的重要云化应用之一[1] 。 则是一个计算框架。一个M/R作业通常会把输入的数据 集切分为若干独立的数据块，由Map任务以完全并行的 1 大数据技术架构 方式处理。框架会对Map的输出先进行排序，然后把结 1.1 MPP数据库 果输入给Reduce任务，作业的输