淘宝构建20节点的rac系统淘宝构建20节点的rac系统.docVIP

Oracle 成功案例 淘宝构建 20 节点的 RAC 系统，  淘宝网 中国 杭州 行业： 零售业 员工人数： 超过2000 年营业额： 2008年网购交易额999.6亿元 Oracle 产品和服务： ? Oracle 数据库 11g ? Oracle RAC 11g ? Oracle 数据库 10g ? Oracle RAC 10g 满足数据仓库海量数据处理需求 “面对淘宝业绩的倍数成长，我们深刻地感到基于Oracle RAC构建企业级数据仓库是一个正确的选择，Oracle解决方案 为淘宝数据仓库提供了支持未来持续成长的延展空间，使我们 能够随着业务的发展不断提升数据仓库环境的性能，满足公司 在市场分析和预测方面迅速增长的业务需求。” 汪海 淘宝网资深总监 淘宝网（）由阿里巴巴集团于2003年5月10日投资 创办，淘宝的业务范围跨越了C2C（个人对个人）和B2C（商家对 个人）两大部分，是亚洲最大的购物网站，会员数超过1.1亿。 自2003年创立以来，淘宝飞速成长的势头就没有停止过，2007年， 淘宝的交易额为433亿元，超过了沃尔玛和家乐福在中国的销售额 总和；2008年，在淘宝上仅手机就卖出了1000多万部，服装卖出 了1.4亿件，交易额在更是达到了令人惊叹的999.6亿元。根据第 三方权威机构调研，淘宝2007以来一直占据中国网购市场70％以 上市场份额。 为了更好地了解客户需求，总结与分析运营和管理的规则，淘宝 于2004开始基于Oracle产品构建企业级数据仓库（EDW），并于2007 年、2008年和2009年三次利用Oracle RAC 10g和Oracle RAC 11g 对数据仓库系统进行了升级和扩充，将数据仓库部署在全球领先 的RAC系统——由20个节点组成的单一数据库集群——之上，使淘 宝在数据仓库规模每年成倍扩大的情况下，实现了数据处理和分 析时效性的不断提升，过去需要数天才能完成的计算现在当天就 能完成，部分以前属于小时级别的计算更是提高到了分钟级别。 目前，淘宝数据仓库能够每天处理几亿次的用户行为，日处理的 数据量接近30TB，堪称目前国内每天数据处理量最大、最忙的数 据仓库。 淘宝首席DBA、资深技术专家陈吉平指出:“淘宝数据仓库不仅仅 是一套数据存储和管理系统，更是一套与业务数据紧密结合的动 态数据仓库系统，系统需要每天甚至每小时动态地处理海量的增 量数据和全量数据，Oracle RAC无论是在基础架构方面和还是在 性能方面都非常适合我们实施高效的海量数据处理。”  Oracle 成功案例 主要效益: ? 利用 Oracle RAC 的跨节 点 并 行 计 算 的 技 术 支 持 海 量 数据处理，实现了数据仓库的 动态业务查询与分析 ? 计 算 能 力 和 节 点 数 按 线 性比例增加，从容应对业务需 求 快 速 变 化 和 数 据 爆 炸 式 增 长的挑战 ? 每 天 处 理 几 亿 次 的 用 户 行 为 ， 日 处 理 的 数 据 量 接 近 30T ? 同时每天出具 400 张左 右的报表 ? 近 500 个 ETL 任务能够 在每天 0：30-9：00 之间全部 准时完成，保证了数据集市中 数 据 的 新 鲜 度 可 以 到 最 近 的 一天 ? 提 供 了 基 于 数 据 仓 库 的 精确分析的个性化推荐、店铺 内推荐、精确邮件定向营销以 及购物风尚榜等服务项目 ? 实 现 了 根 据 业 务 的 发 展 和要求合理地扩容，在满足迅 速 增 长 的 市 场 分 析 和 预 测 需 求同时保持低成本 项目实施方： 淘宝自己的数据仓库实施团队 构建数据仓库，续写电子商务传奇 淘宝通过搭建一个完全自由竞争的互联网交易基础设施，创造出 了一个包括了买家、卖家、支付、物流、金融、广告、搜索等环 节在内的商业生态系统，从某种程度上说，淘宝的成功意味着网 购这一全新商业模式正在颠覆中国传统企业做生意的方式，也在 改变着中国消费者的消费行为模式。然而面对淘宝所创造的电子 商务传奇，淘宝的管理层清醒地认识到：尽管淘宝的快速发展揭 示了中国的确存在巨大的电子商务潜在用户基础，但是在另一方 面，中国电子商务市场目前还是一个年轻的、还远没有成熟的市 场，处在一个价格敏感和体验式的阶段，因此淘宝要想在新的竞 争环境下续写传奇，就需要为店铺和消费者不断提供更新、更全 面的服务，从而全面促进客户体验，培育客户的忠诚度，通过企 业级数据仓库来洞察与了解客户的需求则是实现以上目标的最有 效手段之一。 利用Oracle的数据仓库技术，淘宝实现了将分散在不同业务系统 中的业务数据高效地抽取到集中的数据仓库平台，这些完整记录