`

简述负载均衡和 CDN 技术

 
阅读更多
摘要: 曾经见到知乎上有人问“为什么像facebook这类的网站需要上千个工程师维护?”,下面的回答多种多样,但总结起来就是:一个高性能的web系统需要从无数个角度去考虑他,大到服务器的布局,小到软件中某个文件的实现, ...
 
 
曾经见到知乎上有人问“为什么像facebook这类的网站需要上千个工程师维护?”,下面的回答多种多样,但总结起来就是:一个高性能的web系统需要从无数个角度去考虑他,大到服务器的布局,小到软件中某个文件的实现,甚至于某个循环内的运算如果出现不严谨都可能导致全盘崩溃。
 
上面提到web性能优化需要多个角度去考虑,我们无法考虑到所有的优化细节,但可以从我们已知的层面去优化,我们就先从网络层面说起。
 
1.网络请求路径:
(客户端输入URL定位符)→(DNS服务器寻找映射)→(进入服务器,处理数据)→(返回数据至客户端)
 
在这个用例中我们可以很清晰的看出网络请求到返回的过程,虽然非常抽象,但足够我们以他为基础来进行优化了。
 
1)负载均衡
 
BOSS一次给了小明好多项任务,小明发现怎么安排时间也做不完,于是乎他盯上了在旁边偷偷看电影的小强,小强突然觉得背后有一股凉气,一回头小明一脸坏笑看着他,“这几个任务交给你,晚上请你吃饭,要不然…嘿嘿嘿”,小强虽然不情愿,但是在小明的请求(要挟)下,只能服从。第二天,小明顺利的完成了任务,给小强买了袋辣条。
 
在计算机上负载均衡也类似如此,我们的大BOSS客户端将请求发送至服务器,然而一台服务器是无法承受很高的并发量的,我们就会将请求转发到其他服务器,当然真正的负载均衡架构并不是由一台server转发的另一台server,而在客户端与服务器端中间加入了一个负责分配请求的负载均衡硬件(软件)。
 
DNS
名词:DNS是客户端发送请求中一个非常重要的中转,他的作用是将用户请求的URL映射为具体的IP地址,全世界有13台根服务器,但通常为我们进行域名解析的并不是根服务器,而是直接访问我们的 LDNS(Local DNS Server),通常由网络运营商维护。
 
最早的负载均衡就是利用搭建本地DNS服务器实现的,实现方式简单易懂,为同一个主机名分配多个映射 ,可采用轮循,随机等方式分配请求。看上去没什么问题,但是在使用过程中会发现,如果其中一个地址down机,我们是无法及时发现的,如果有用户被分配到这个主机就会出现访问失败的状况,同时我们也无法判断每个server的负载,可能会出现,某个server几乎闲置,另外一个server负载压力极高的情况。

                                       ↗(进入服务器1,处理数据)↘

(客户端输入URL定位符)→(DNS服务器寻找映射)→(DNS分配请求)                  (返回数据至客户端)   

                                        ↘(进入服务器2,处理数据)↗

硬件设备
名词:负载均衡器(Load Balancer),负载均衡器通常作为独立的硬件置于客户端与服务器之间。
 
负载均衡设备拥有非常好的负载均衡性能,他拥有众多的负载均衡策略(权重,动态比率,最快模式,最小连接数等),可以保证以相对较优的方式分配请求,不过好的东西总是有代价的,那就是价格,一台负载均衡器的售价往往高达十几万甚至几十万,许多企业并不愿意为它买单。
 
反向代理
名词:Nginx。高性能,轻量级,已经成了人们对Nginx的第一印象,Nginx可作为HTTP服务器,在处理高并发请求的时候拥有比现在主流的Apache服务器更高的性能,同时Nginx也是一个优秀的反向代理服务器。
 
第一次听到“反向代理”,可能有些陌生,但如果了解与之对应的正向代理就很好理解了,正向代理通常由客户端主动链接,比如我们的科学上网方式就是使用正向代理,以达到间接访问网站的目的,而反向代理在服务器端,无需主动链接,当我们访问拥有反向代理的网站时,实际访问的是其反向代理服务器,而非真正的服务器,当请求到达反向代理服务器时,反向代理服务器再将请求转发至服务器。反向代理是实现负载均衡的主流手段之一,通常使用Nginx等服务器搭建,Nginx同样拥有众多的分配策略,以保证平均分配压力。

                                       ↗(进入服务器1,处理数据)↘

(客户端输入URL定位符)→(DNS服务器寻找映射)→(反向代理服务器)                     (返回数据至客户端)   

                                                                 ↘(进入服务器2,处理数据)↗

 

Nginx反向代理:
BIGIP(硬件)负载均衡:
2)CDN
视频总在缓冲,图片各种加载不出来,几年前是再正常不过的事了,在当时大家也没觉得是回事,但把这种情况放在现在,我想人们绝对直接就小红叉了吧,那么我们如何避免这样的情况呢?这就是我要说的,内容分发网络(Content Delivery Network),简称:CDN。
 
CDN简单的来说就是存储一些静态文件的一台或多台服务器,通过复制,缓存等方式,将文件保存其中。
 
1.哪些是静态文件?
css,html,图片,媒体都属于静态文件,也就是说用户发送的请求不会影响静态文件的内容,而jsp,php等文件就不属于静态文件,因为他们的内容会因我们的请求而发生改变。
 
 
 
2.CDN如何实现加速?
通常情况下,我们所要的数据都是从主服务器中获取,但假如我们的主服务器在南方,而访问用户在北方,那么访问速度就会相对变慢,变慢的原因有很多,例如传输距离,运营商,带宽等等因素,而使用CDN技术的话,我们会将CDN节点分布在各地,当用户发送请求到达服务器时,服务器会根据用户的区域信息,为用户分配最近的CDN服务器。
 
3.CDN数据从哪里来?
复制,缓存,CDN服务器可以在用户请求后缓存文件,也可以主动抓取主服务器内容。
 
分布在各地的CDNS:
 
http://it.dataguru.cn/article-6942-1.html
分享到:
评论

相关推荐

    淘宝CDN全局流量调度算法介绍.docx

    F5的系统提供了Round Robin等12种局域负载均衡算法和GlobalAvailability等15种广域负载均衡算法,其中这些负载均衡算法按照调度策略是静态配置还是动态生成的分为静态调度方法和动态调度算法。 四、新开发的全局...

    面试总结(1)(1)(5).docx

    9. LVS (Linux Virtual Server) 提供四层负载均衡,通过IP负载均衡技术实现对后端服务器的流量分发。 10. Nginx 是高性能的HTTP和反向代理服务器,用于负载均衡、缓存和SSL终止。 11. Tomcat 是Apache软件基金会的...

    简述分布式操作系统.doc

    4. **局限性**:虽然分布式系统具有很多优点,但也有其局限,例如网络延迟、数据一致性问题、系统复杂性等,这些问题需要通过优化算法和技术来解决。 总的来说,分布式操作系统在处理复杂、大规模的计算任务时显示...

    Java开发亚马逊商城

    - **Spring Cloud**:用于构建分布式系统的服务发现、配置管理、负载均衡等,是构建大型电商系统的重要工具。 2. **数据库设计** - **MySQL**:通常作为主要的关系型数据库,存储商品信息、用户数据、订单详情等...

    .NET工程师笔试题高级

    3. 集群:一组相互协作的服务器,共同提供同一服务,以提高可用性和负载均衡。 4. 分布式:多个独立的节点协同工作以完成一个任务,每个节点都有特定职责,如分布式数据库、分布式计算等。 5. Redis:内存数据结构...

    《软件体系结构课程》试卷A及答案.docx

    - **负载均衡**:分散请求到多个服务器上; - **数据库优化**:如索引优化、查询优化等; - **异步处理**:通过消息队列处理耗时的任务。 7. **暑期实训作业的架构设计** - **项目背景**:简述项目的背景和目标...

    一份超级全面的PHP面试题

    - **负载均衡**:使用负载均衡器分散请求到多个服务器上。 - **缓存机制**:如Varnish、Memcached等。 - **CDN**:内容分发网络可以将静态资源缓存到全球各地的节点上。 - **数据库优化**:采用主从复制、读写分离等...

    PHP面试题(最牛)

    - **负载均衡**:通过负载均衡器分散请求至多个服务器节点。 - **缓存技术**:使用CDN、Varnish等缓存静态资源,减少数据库负担。 - **数据库优化**:使用上述提到的方法优化数据库性能。 - **异步处理**:使用消息...

    2016PHP面试题

    - 负载均衡,分发请求到多个服务器。 #### 24. 请说明php中传值与传引用的区别。什么时候传值什么时候传引用? - **传值**:传递变量的副本,对副本的任何改变都不会影响原始变量。 - **传引用**:传递变量的引用...

    超级全面的PHP面试题整理集合第1/2页

    - **负载均衡**:使用负载均衡器分散请求到多个服务器上。 - **缓存策略**:使用页面缓存、静态资源缓存等减少数据库压力。 - **数据库优化**:对数据库进行读写分离、分区等优化措施。 - **CDN服务**:使用CDN服务...

Global site tag (gtag.js) - Google Analytics