GemFire核心功能介绍-杨旭钧IT168文库.pdfVIP

GemFire与12306 GemFire介绍 有状态架构所面临的挑战 • 应用服务器在高负载的压力下可以很好地进行扩展，但是应用 状态管理还必须与数据库服务器进行交互 • 关系型数据库设计植根于过去的技术 • 固有的I/O瓶颈，强一致性锁机制 • 集中架构设计导致扩展瓶颈 • 云环境是虚拟化的、分布式的 • 虚拟化的分布式架构并不适合RDBMS • 高可用性有限 • 完全双活的高可用性难以实现 传统关系型数据库所面临的挑战 Buffers以IO优化 为主 一次写入日 志 二次写入数据文 件  频繁的I/O读写  设计架构不适应现在的应用特点 •对 ACID 关注太多 •磁盘同步瓶颈 GemFire 的前世今生 1982年 GemStone Systems成立于美国俄勒冈州西北部城市比弗顿市。GemStone是领先的分布式数据管理 技术软件公司，在此方面有着厚重的历史。最初使用Smalltalk语言开发出了第一代面向对象的数 据库。并成为Smalltalk执行委员会成员。 1986年 第一代产品Gemstone/S 正式面世，受到金融市场的广泛欢迎。 90年代中后期 随着Java语言的广泛应用，GemStone与Sun公司合作，参与到JEE的规范制定 (JCache -JSR107)， 并陆续更新与JEE平台相结合的产品。GemStone开发出了GemFire，成为业界第一个满足J2EE标准 的中间件。GemFire拥有全新的应用框架，兼容Java, C++, C#。而GemFire在CEP(complex event processing)，Event Stream Processing，Data Virtualization， Distributed Caching几个方 面有着举足轻重的地位。 2008年初 金融危机后，金融监管法规Dodd-Frank、Basel3等陆续出台，各大投资银行为了减少系统风险和 增加透明度，加强了金融衍生品交易平台的投资规模，Gemfire击败Oracle等老牌厂商，跻身为华 尔街第一大分布式数据处理平台软件。 2010年5月 VMware收购了老牌厂商Gemstone，并入SpringSource部门。 什么是GemFire ？ 基于内存的海量数据实时处理平台 分布式池化内存和硬盘资源 • 超低延迟和超高吞吐量 • 动态的线性扩展能力 • 持续高可用性 • MapReduce并行处理 • 数据感知路由 弹性架构扩展系统 A seminal paper on the architecture of elastic applications was written by Pat Helland (Tandem Computing, A, Microsoft) “LifeBeyond Distributed Transactions: an Apostate’s Opinion” /cidr2007/papers/cidr07p15.pdf /b/pathelland/ 这片论文描述了我们的应用系统架构需要怎样的步骤 来达到线性扩展,同时不使用大型硬件产品 面向分层架构 Helland 指出了线性扩展应用的分层架构 顶层不必担心扩展问题 Scale Agnostic Code 中间抽象层