回顾丨13年来，淘宝走过的大数据之路.docxVIP

PAGE 1 PAGE 1 回顾丨13年来，淘宝走过的大数据之路  2003年至今淘宝网从零开始飞速发展，走过了13个年头，支撑淘宝业务野蛮式生长背后是一套不断完善的技术平台，淘宝大数据平台，就是其中特别重要的一个组成部分，担当了数据采集、加工处理、数据应用的职责。  —淘宝大数据之路—  2003年至今淘宝网从零开始飞速发展，走过了13个年头，支撑淘宝业务野蛮式生长背后是一套不断完善的技术平台，淘宝大数据平台，就是其中特别重要的一个组成部分，担当了数据采集、加工处理、数据应用的职责，淘宝大数据平台一路到今日，总共经历了三个大的阶段（如图1），不同阶段面临了不一样的挑战，一起来回顾一下这些年淘宝大数据所经历过的故事：  图1数据仓库平台发展三个阶段  第一个阶段：RAC时代  2008年前的单节点ORACLE，这个时候还称不上数据仓库，只能担当简洁的数据处理工作，也基本上没有数据仓库架构，随着业务的飞速发展，很快单节点的ORACLE因无扩展能力，计算存储能力就应付不了了；  2008年之后，为了应对日益增长的数据量，RAC集群应运而生，从一开始的4个节点逐步发展到20个节点，成为当时号称全球最大的RAC集群，在ORACLE官网上也作为了经典案例，RAC集群当时不管在稳定性、安全性、存储能力还是计算能