程序员人生 网站导航

大型网站演化历程

栏目:框架设计时间:2015-05-11 09:07:30

本文摘自<<大型网站技术架构 - 核心原理与案例分析>>

1. 初始阶段

1台服务器就绰绰有余,利用程序、数据库、文件等所有资源都在1台服务器上,使用开源的lamp.


2. 利用服务和数据服务分离:

随着网站业务快速发展,1台服务器已没法满足需求,愈来愈多的数据致使存储空间不足。这时候就需要将利用和数据分类。利用和数据分离后全部网站使用3台服务器:利用服务器、文件服务器数据库服务器

这3台服务器对硬件资源的要求各不相同,利用服务器需要处理大量的业务逻辑,因此需要更快更强大的cpu;数据库服务器需要快速硬盘检索和数据缓存,因此需要更快的硬盘和更大的内存;文件服务器需要存储大量用户上传的文件,因此需要更大的硬盘。



3. 使用缓存改良网站性能

大部份的业务访问集中在1小部份数据上,所以如果把这1小部份数据缓存在内存中,就能够减少数据库的访问压力,提高全部网站的数据访问速度。



4. 使用利用服务器集群改良网站并发处理能力

使用集群是网站解决高并发、海量数据问题的经常使用手段。增加服务器可以分担原有服务器的访问及存储压力。

利用服务器实现集群是网站可伸缩集群架构设计中较为简单成熟的1种。



5. 数据库读写分离

利用服务器在写数据的时候,访问主数据库,主数据库通过主从复制机制将数据更新同步到从数据库,这样当利用服务器读数据的时候,就能够通过从数据库取得数据。

数据库读写分离,可以改良数据库负载压力。



6. 使用反向代理和cdn加速网站响应

cdn和反向代理的基本原理都是缓存,区分在于cdn部署在网络供应商的机房,使用户在要求网站服务时,可以从距离自己最近的网络供应商机房获得数据;而反向代理则部署在网站的中心机房,当用户要求到达中心机房后,首先访问的服务器是反向代理服务器,如果反向代理服务器中缓存这用户要求的资源,就将其直接返回给用户。

使用cdn和反向代理的目的都是尽快返回数据给用户,1方面加快用户访问速度,另外一方面也减轻后端服务器的负载压力。



7. 使用散布式文件系统和散布式数据库系统

散布式数据库是网站数据库拆分的最后手段,只有在单表数据范围非常庞大的时候才使用。不到不得已时,网站更经常使用的数据库拆分手段是业务分库,将不同业务的数据库部署在不同的物理服务器上。



8. 使用Nosql和搜索引擎

随着网站业务愈来愈复杂,对数据存储和检索的需求也愈来愈复杂,网站需要采取1些非干洗数据库技术如Nosql和非数据库查询技术如搜索引擎。



9. 业务拆分

大型网站为了应对日趋复杂的业务场景,通过使用分而治之的手段将全部网站业务分成不同的产品线。

具体到技术上,将1个网站拆分成许多不同的利用,每一个利用独立部署保护。利用之间通过1个超链接建立关系,也能够通过消息队列进行数据分发



10.散布式服务


------分隔线----------------------------
------分隔线----------------------------

最新技术推荐