《大型网站技术架构》读书笔记一:大型网站架构演化

思维导图

一、大型网站系统特点

(1)高并发、大流量:PV流量巨大

(2)高可用:7*24小时不间断服务

(3)海量数据:文件数目分分钟XXTB

(4)用户分布广泛:网络情况复杂

(5)安全环境恶劣:黑客的攻击

(6)需求快速变更,发布频繁:快速适应市场,满足用户需求

(7)渐进式发展:慢慢的运营出大型网站

二、大型网站架构演化过程

(1)初始阶段网络架构:一台服务器

  应用程序、文件、数据库等所有资源都集中再一台server上,典型案例:基于LAMP(Linux+Apache+Mysql/MariaDB+Perl/PHP/Python)架构的PHP网站

  

(2)应用和数据服务器分离:三台服务器平天下

  业务发展,平台不再适应业务的发展,将应用和数据分离成三台server(应用服务器,文件服务器,数据库服务器),分离后三台Server对硬件资源的需求各不相同:应用服务器需要更快更强大的cpu,而数据库服务器需要更快的硬盘和更大的内存,文件服务器则需要更大的硬盘:

  

(3)使用缓存改善网站性能:3+x的server模式

  减少数据库的访问压力,提高网站的数据访问速度。缓存又可以分为:本地缓存和远程缓存(可以是分布式的),本地缓存访问速度快,但数据量有限,远程分布式缓存可以集群,因此容量不受限制

  

(4)使用应用服务器集群改善网站的并发能力

  集群解决高并发,海量数据问题的常用手段,实现系统的可伸缩性。通过负载均衡调度器,可以将用户访问分布到集群中的某台server上,应用服务器的负载压力不再成为整个网络的瓶颈。

  

(5)数据库读写分离

  使用缓存后绝大部分都可以不通过DB就能完成,但仍有一部分(缓存访问不命中、缓存过期)和全部的写操作需要访问DB,在网站的用户达到一定规模后,DB因为负载压力过高成为网站的瓶颈。大部分主流DB都提供从热备功能,利用这一功能可以配置两台DB主从管理,一台数据同步更新到另一台server上。网站利用DB的这一功能,实现DB读写分离,从而改善DB负载压力。

  

(6)使用反向代理和CDN加速网站响应

  区别在于CDN部署在网络提供商的机房,而反向代理则部署在网站的中心机房。使用CDN和反向代理的目的都是尽早返回数据给用户,一方面加快用户访问速度,另一方面也减轻后端服务器的负载压力。

  

(7)使用分布式文件系统和分布式数据库系统

  随着网站业务的发展,两台DB服务器依然不能满足需求,文件也一样

  

(8)使用NoSQL和搜索引擎

  NoSQL和搜索引擎都是源自互联网的技术手段,对可伸缩的分布式特性具有更好的支持。应用服务器则通过一个统一数据访问模块访问各种数据,减轻应用程序管理诸多数据源的麻烦。

  

(9) 业务拆分

  通过分而治之的手段将整个网站业务分成不同的产品线,如淘宝将首页、商铺、订单、卖家、买家等拆分成不同的产品线,分归不同的业务团队负责。各个应用之间可以通过建立一个超链接建立关系,也可以通过消息队列进行数据分发。

  

(10)分布式服务

  既然每一个应用系统都需要执行许多相通的业务操作,比如用户管理、商品管理等,那么可以将这些共用的业务提取出来,独立部署。

  

三、大型网站架构演化价值观

  (1)核心价值:随网站所需灵活应对

  大型网站不是从无到有一步就搭建好一个大型网站,而是能够伴随小型网站业务的渐进发展,慢慢地演化成一个大型网站。

  (2)驱动力量:网站的业务发展—业务成就了技术,事业成就了人,而不是相反

四、大型网站架构设计的误区

  (1)一味追随大公司的解决方案

  (2)为了技术而技术->常见问题

  (3)企图用技术解决所有问题:技术是用来解决业务问题的,而业务的问题,也可以通过业务的手段去解决

本博的内容摘自博客:http://www.cnblogs.com/edisonchou/p/3773891.html,作为读书笔记
原文地址:https://www.cnblogs.com/xiaobingqianrui/p/10006243.html