内存缓存技术在门户网站开发中的应用研究.docVIP

内存缓存技术在门户网站开发中的应用研究 　　摘要：该文创造性地探讨了内存缓存技术在门户网站开发中的应用，介绍了Memcached这一杰出成果在的应用情况，并就其实际存在的一些缺陷进行了深入分析。 　　关键词：内存缓存；门户网站；Memcached 　　中图分类号：TP393文献标识码：A文章编号：1009-3044(2008)25-1415-02 　　The Application Research of Memory Cache Technology in the Major Website 　　YANG Li-shen, CAO Zhi-yi 　　(Henan Polytechnic University Network Center, Jiaozuo 454003, China) 　　Abrstract: This article creativelydiscussed the application of memory cache technology in the major website, introduced this outstanding achievement Memcacheds using in the , and has carried on the deep analysis on its actual existences flaws. 　　Key words: memory cache; the major website; Memcached 　　1 引言 　　门户网站开发首要解决的就是速度的问题，但是当我们的数据达到百万以上级别，同时又有百万个用户经常光顾的时候，系统的响应速度就会非常慢。一般的解决办法就是优化数据库，提高硬件的性能，增大带宽等，但是当这些条件一定的情况下，并且我们的资金和技术有限制的时候就是需要采用软的方法（即缓存技术）进行处理。 　　在过去的几十年里，先驱们不懈探索，最初的缓存做法是在线程内对对象进行缓存，但这样进程间就无法共享缓存，命中率非常低，导致缓存效率极低。后来出现了共享内存的缓存，多个进程或者线程共享同一块缓存，但毕竟还是只能局限在一台机器上，多台机器做相同的缓存同样是一种资源的浪费，而且命中率也比较低。近年来，随着内存容量的飞速扩张和价格的下降，使用内存缓存开始成为一种可能。 　　内存缓存技术的产生是基于这样一种思考，即操作系统的一个经典的理论，20%的数据通常在80%的时间内被访问。既然这样，我们的目标就可以集中在这20%的数据中，当这些数据第一次被访问以后就将它放在内存中，再次访问这些数据的时候，只要从内存读取并且赋予它更好的访问级别即可。众所周知，内存的访问速度是非常快的，这样以来我们整个系统的速度就会提高数个重量级。 　　目前内存缓存技术最杰出的成果就是Memcached，我们这次的研究对象是泰国著名的社交门户。该网站现有会员3000万，每天要承受很大的访问压力。因此需要将用户经常访问的数据缓存起来，以此提高响应速度。 　　2 Memcached简介与分布式环境配置 　　Memcached是的一个项目，最早是为LiveJournal服务的，最初为了加速LiveJournal访问速度而开发的，后来被很多大型的网站采用。目前全世界不少人使用这个缓存项目来构建自己大负载的网站，来分担数据库的压力。 　　起初作者编写它可能是为了提高动态网页应用，为了减轻数据库检索的压力，来做的这个缓存系统。Memcached是一个高性能的分布式的内存对象缓存系统，通过在内存里维护一个统一的巨大的hash表，它能够用来存储各种格式的数据，包括图像、视频、文件以及数据库检索的结果等。它的缓存是一种分布式的，也就是可以允许不同主机上的多个用户同时访问这个缓存系统， 这种方法不仅解决了共享内存只能是单机的弊端，同时也解决了数据库检索的压力，最大的优点是提高了访问获取数据的速度！基于Memcached作者对分布式cache的理解和解决方案。Memcached完全可以用到其他地方 比如分布式数据库，分布式计算等领域。 　　我们的第一步工作就是构建一个分布式系统，注意针对Memcached的特性，我们只能在分布式环境中测试它！目前主要分布存储的方式都是按照一定的方式进行切分，主要是垂直切分（纵向）和水平切分（横向）两种方式，当然，也有两种结合的方式，达到更到的切分粒度。目前采用的是类似Master/Slave 结构，具体情况简化如图1所示，我们可以用三台服务器来模拟。 　　■ 　　图1 的类虚拟分布结构 　　当一台作为主服务器，需要在该服务器上配置Memcached的服务端，并在打开守护进程的同时打开一个内存池。另外的两台电脑做客户端，存放的是缓存