大型网站应用架构对比研究.docx

?

?

大型网站应用架构对比研究

?

?

李绪成+刘鑫

摘要：随着使用互联网的人越来越多，网站本身业务的扩展和用户的增多，网站面临着高并发访问、大数据的压力，这时需要对网站进行优化和改进。并发访问量和数据量的瓶颈也成为评价一个大型网站性能的标准。然而怎样改进和优化网站成为一个问题。本文通过研究现今具有代表性的大型网站应用架构，得出大型网站的通用优化方案，以及一套可供参考的大型网站基本架构，为网站设计者提供大型网站优化通用方案、网站改进思路和改进方法。

关键词：网站架构；网站优化；缓存；大数据；搜索

：TP311：A

Abstract：WithmoreandmorepeopleusingtheInternet，thebusinessexpansionofwebsitesandtheuserincreaseofwebsites，websitesarefacinggreatpressureofhighconcurrentaccessandbigdata，soitisnecessarytooptimizeandimprovewebsites.Thebottleneckofconcurrentaccessanddatavolumeisalsoastandardtoevaluatetheperformanceofalargewebsite.However，howtoimproveandoptimizethewebsitehasbecomeaproblem.Bystudyingthetypicalapplicationarchitectureoflargewebsites，thepaperproposesthegeneraloptimizationschemeoflargewebsitesandthebasicframeworkoflarge-scalewebsitesforreference，providingwebsitedesignerswithgeneralsolutions，improvementideasandimprovementmethodstolargewebsites.

Keywords：websitearchitecture；websiteoptimization；cache；bigdata；search

1引言（Introduction）

大型網站分为三大类：电商网站、视频网站和大数据搜索网站，通过这三类网站来研究大型网站应用架构。其中最能代表这三类网站的大型网站是：淘宝、京东、优酷和百度。淘宝和京东是经历过双十一考验的，其性能是毋庸置疑的；优酷是中国最大的视频网站之一，日均播放量上亿，可见其网站性能很稳定；百度网站是全球最大的中文搜索引擎、最大的中文网站，存储了万亿级的网页数量，其对大数据的处理是值得学习的。这些网站都是研究大型网站的最佳对象。

通过对上述网站进行对比研究得出大型网站典型优化方案，以及一套可供参考的大型网站基本架构，为网站设计者提供网站改进思路和改进方法，以及网站优化方案。

2网站基本架构（Basicarchitectureofwebsite）

大型网站架构分为网站前端、应用端和数据库端。每一个部分都有自己的使命，它们协同合作形成一个完整的网站[1，2]。大型网站的基本架构如图1所示。

下面从分别从网站前端、应用服务器和数据库三个方面描述改进方法。

3网站前端（Frontend）

网站前端的作用是加快用户访问速度，过滤恶意请求，实现负载均衡。

3.1CDN服务器

CDN是通过在网络各处放置节点服务器所构成的在现有的互联网基础之上的一层智能虚拟网络，能够实时地根据网络流量和各节点的连接、负载状况，以及到用户的距离和响应时间等综合信息将用户的请求重新导向离用户最近的服务节点上，能够加快响应效率，解决网络拥堵问题。

优酷网站建立了比较完善的CDN，可以保证分布在全国各地的用户能访问到离自己最近的服务器，并把服务状况最好的视频服务器地址反馈给用户，让用户可以以最快的速度获取到视频资源，这也是优酷网站比其他视频网站更流畅的原因。

淘宝网站也在全国各地建立了数百个CDN节点。当用户发起请求时，浏览器访问DNS服务器进行DNS域名解析。然后根据用户的IP将访问分配到不同的入口。如果客户的IP属于电信运营商，那么就会被分配到同样是电信的CDN节点，保证用户访问的CDN节点是离用户最近的。

一些前段框架能够为CDN提供便利，例如AngularJS技术[3]。

3.2反向代理服务