`
newleague
  • 浏览: 1500793 次
  • 性别: Icon_minigender_1
  • 来自: 深圳
社区版块
存档分类

十步构建大型网站架构(1)

 
阅读更多

今天我们来谈谈一个网站一般是如何一步步来构建起系统架构的,虽然我们希望网站一开始就能有一个很好的架构,但makesi告诉我们事物是在发展中不断前进的,网站架构也是随着业务的扩大、用户的需求不断完善的,下面是一个网站架构逐步发展的基本过程,读完后,请思考,你现在在哪个阶段。

AD: <script src="http://www.51cto.com/js/article/keywords_ad_new.js"></script>

 

今天我们来谈谈一个网站一般是如何一步步来构建起系统架构的,虽然我们希望网站一开始就能有一个很好的架构,但makesi告诉我们事物是在发展中不断前进的,网站架构也是随着业务的扩大、用户的需求不断完善的,下面是一个网站架构逐步发展的基本过程,读完后,请思考,你现在在哪个阶段。

架构演变第一步:物理分离WebServer和数据库

最开始,由于某些想法,于是在互联网上搭建了一个网站,这个时候甚至有可能主机都是租借的,但由于这篇文章我们只关注架构的演变历程,因此就假设这个时候已经是托管了一台主机,并且有一定的带宽了。这个时候由于网站具备了一定的特色,吸引了部分人访问,逐渐你发现系统的压力越来越高,响应速度越来越慢,而这个时候比较明显的是数据库和应用互相影响,应用出问题了,数据库也很容易出现问题,而数据库出问题的时候,应用也容易出问题。于是进入了第一步演变阶段:将应用和数据库从物理上分离,变成了两台机器,这个时候技术上没有什么新的要求,但你发现确实起到效果了,系统又恢复到以前的响应速度了,并且支撑住了更高的流量,并且不会因为数据库和应用形成互相的影响。

看看这一步完成后系统的图示:

 

架构演变第二步:增加页面缓存

好景不长,随着访问的人越来越多,你发现响应速度又开始变慢了,查找原因,发现是访问数据库的操作太多,导致数据连接竞争激烈,所以响应变慢。但数据库连接又不能开太多,否则数据库机器压力会很高,因此考虑采用缓存机制来减少数据库连接资源的竞争和对数据库读的压力。这个时候首先也许会选择采用squid等类似的机制来将系统中相对静态的页面(例如一两天才会有更新的页面)进行缓存(当然,也可以采用将页面静态化的方案),这样程序上可以不做修改,就能够很好的减少对WebServer的压力以及减少数据库连接资源的竞争,OK,于是开始采用squid来做相对静态的页面的缓存。

看看这一步完成后系统的图示:

 

这一步涉及到了这些知识体系:

前端页面缓存技术,例如squid,如想用好的话还得深入掌握下squid的实现方式以及缓存的失效算法等。

架构演变第三步:增加页面片段缓存

增加了squid做缓存后,整体系统的速度确实是提升了,WebServer的压力也开始下降了,但随着访问量的增加,发现系统又开始变的有些慢了。在尝到了squid之类的动态缓存带来的好处后,开始想能不能让现在那些动态页面里相对静态的部分也缓存起来呢,因此考虑采用类似ESI之类的页面片段缓存策略,OK,于是开始采用ESI来做动态页面中相对静态的片段部分的缓存。

看看这一步完成后系统的图示:

 

这一步涉及到了这些知识体系:

页面片段缓存技术,例如ESI等,想用好的话同样需要掌握ESI的实现方式等;

架构演变第四步:数据缓存

在采用ESI之类的技术再次提高了系统的缓存效果后,系统的压力确实进一步降低了,但同样,随着访问量的增加,系统还是开始变慢。经过查找,可能会发现系统中存在一些重复获取数据信息的地方,像获取用户信息等,这个时候开始考虑是不是可以将这些数据信息也缓存起来呢,于是将这些数据缓存到本地内存,改变完毕后,完全符合预期,系统的响应速度又恢复了,数据库的压力也再度降低了不少。

看看这一步完成后系统的图示:

 

这一步涉及到了这些知识体系:

缓存技术,包括像Map数据结构、缓存算法、所选用的框架本身的实现机制等。

架构演变第五步: 增加WebServer

好景不长,发现随着系统访问量的再度增加,webserver机器的压力在高峰期会上升到比较高,这个时候开始考虑增加一台webserver,这也是为了同时解决可用性的问题,避免单台的webserver down机的话就没法使用了,在做了这些考虑后,决定增加一台webserver,增加一台webserver时,会碰到一些问题,典型的有:

1、如何让访问分配到这两台机器上,这个时候通常会考虑的方案是Apache自带的负载均衡方案,或LVS这类的软件负载均衡方案;

2、如何保持状态信息的同步,例如用户session等,这个时候会考虑的方案有写入数据库、写入存储、cookie或同步session信息等机制等;

3、如何保持数据缓存信息的同步,例如之前缓存的用户数据等,这个时候通常会考虑的机制有缓存同步或分布式缓存;

4、如何让上传文件这些类似的功能继续正常,这个时候通常会考虑的机制是使用共享文件系统或存储等;

在解决了这些问题后,终于是把webserver增加为了两台,系统终于是又恢复到了以往的速度。

看看这一步完成后系统的图示:

 

这一步涉及到了这些知识体系:

负载均衡技术(包括但不限于硬件负载均衡、软件负载均衡、负载算法、linux转发协议、所选用的技术的实现细节等)、主备技术(包括但不限于ARP欺骗、linuxheart-beat等)、状态信息或缓存同步技术(包括但不限于Cookie技术、UDP协议、状态信息广播、所选用的缓存同步技术的实现细节等)、共享文件技术(包括但不限于NFS等)、存储技术(包括但不限于存储设备等)。

分享到:
评论

相关推荐

    十步学会用css+div建站

    通过这个教程,学习者将逐步掌握构建现代、响应式网站所需的基础技能。 【描述】:这是一份以PPT(演示文稿)形式呈现的CSS+div建站基本教程,内容涵盖了从零开始到熟练运用CSS和div进行网页布局的全过程。PPT作为...

    用div+css布局十步入门

    总之,这个教程通过十步教学,逐步引导初学者理解并实践CSS布局,从基础的HTML结构、文件组织,到具体的CSS样式定义和布局技巧,为构建一个完整的网站布局提供了全面的指导。学习者应逐个环节实践,以便更好地掌握这...

    移动互联网十步法

    根据多年经验所积累总结的一套针对移动互联网十步流程法,特别适应于创业的团队

    十步学会CSS+div

    【标题】"十步学会CSS+div"是一个指导初学者快速掌握CSS(层叠样式表)与div(HTML布局元素)结合使用来构建网页布局的教程。CSS与div的组合是现代网页设计的基础,能够帮助设计师实现灵活、响应式的页面布局。 ...

    创新“十步法”构建防治水管理体系

    冀中能源峰峰集团梧桐庄矿积极探讨防治水方略,通过实施一系列的防治水工程,采取多项防治水措施,构建具有梧桐庄矿物色的防治水管理体系,杜绝突水事故的发生,为矿井的安全生产提供了保障。

    十步解决vmwaretoolsforlinux安装

    ### 十步解决vmware tools for linux安装 在虚拟化技术的应用中,vmware tools 的安装对于提升虚拟机性能、实现主机与虚拟机之间的交互至关重要。本文将详细介绍如何在Linux虚拟机环境中安装vmware tools,并按照...

    十步学会用css建站

    ### 十步学会用CSS建站 #### 第一步:规划网站 在开始任何网站建设项目之前,最重要的是明确网站的设计思路和整体布局。本教程通过一个具体的案例来展示如何使用CSS来构建一个美观且功能完善的网站。 **规划要点:...

    用CSS网站布局之十步实录

    在构建一个现代、响应式且视觉吸引力强的网站时,CSS(层叠样式表)起着至关重要的作用。"用CSS网站布局之十步实录" 提供了一套详细的指南,帮助初学者和有经验的开发者更好地掌握CSS布局技巧。以下是对这个主题的...

    用css布局网站之十步教程.pdf

    【标题】:“用css布局网站之十步教程.pdf” 【描述】:该教程详细介绍了如何使用CSS进行网站布局,通过十个步骤教你构建一个完整的网站结构。教程以一个具体的实例为引导,逐步展示从规划到实现的过程。 【标签】...

    用css网站布局之十步实录.pdf

    根据提供的文件内容,可以看出这是一份关于使用CSS进行网站布局的指南,教程分为十个步骤详细介绍了从网站规划到解决浏览器兼容问题的...通过跟随这十步实录,读者可以系统地学习到网站设计和开发的基本知识和技能。

    实例十步学会用div+css建站

    实例十步学会用div+css建站,易学,好资源,大家下载哟。

    用css网站布局之十步实录

    在构建一个引人入胜且功能完备的网站时,CSS(Cascading Style Sheets)起着至关重要的作用。"用css网站布局之十步实录"是一个教程,旨在帮助初学者掌握CSS布局的核心技巧,从而实现商业网站的专业设计。本教程通过...

    战略管理的十步规划法

    在IT行业的战略管理中,"战略管理的十步规划法"提供了一套系统化的方法论,帮助企业明确方向,制定并实施有效的策略。以下是对这十个步骤的深入解析: ### 一、企业宗旨与价值定位 企业的存在不仅仅是为了盈利,更...

    实例div+css建站十步学会用

    十步学会用实例div+css建站

    HP企业战略规划十步法(完整版).pptx

    HP企业战略规划十步法(完整版).pptx

    十步学会div+css建站

    简单易学,十步学会用div+css建站,新手易学会,包括div和css的基本知识

    软件需求十步走 新一代软件需求工程实践指南 杨巨龙,周永利编著.pdf

    需求规划是新一代需求工程中的最大亮点,它的工作是将业务、对象和信息化体系作为研究对象,采用科学研究、体系架构设计、信息资源规划的方法,编制出具有系统性、科学性、前瞻性的需求规划成果。需求规划的成果中...

    惠普的战略规划十步法--dingdingbio.pptx

    1. **环境分析**:首先,企业需要对外部环境进行深入分析,包括宏观经济状况、行业发展趋势、竞争对手动态以及法律法规等。了解这些因素对企业的影响,以便做出适应市场的决策。 2. **内部评估**:接着,对企业的...

Global site tag (gtag.js) - Google Analytics