`
arm10504
  • 浏览: 17777 次
  • 性别: Icon_minigender_1
  • 来自: 南京
社区版块
存档分类
最新评论

大型互联网网站架构心得之二:并、换和其它

阅读更多
这次我想说一下其它两个原则:并与换。







为什么要分?是因为我们希望通过分来提高系统的承载能力,那并又是并什么呢?我想了一下有几个方面可以并:



1.       合并用户请求,最基本的就是合并CSS/图片/脚本,还可以合并页面。不过合并就可能产生流量的浪费,需要有一个平衡点。

2.       合并接口的粒度,如果做分布式应用的话,我们可能不会直接访问数据库而是调用应用层提供的接口,由于是网络调用,代价比较大,因此在设计的时候尽量提供粒度比较粗的接口,一次调用返回比较多的数据,而不是细化到添加删除修改的层次。

3.       合并接口的部署,对于频繁的跨机器调用可以考虑有一些数据冗余,把跨网络的服务编程进程间通讯,甚至转到客户端来做。比如论坛发贴时候脏词的过滤,直接调用应用层提供的接口(跨机器)是可以的,但是可能代价比较大,可以把这个接口使用IPC方式部署在本机。







时间换空间,空间换时间是常见的做法,具体一点说:



1.       缓存。缓存的重要性早计算机的硬件中就有重要的体现。对于网站,有很多种缓存,可以是客户端资源的缓存,可以是页面输出缓存,也可以是应用层的数据缓存,目的都是一样的,或是减少了服务器请求次数,或是减少了请求的处理过程,或是减少了数据库的访问次数。当然,生成静态文件也可以算是一种缓存。不访问磁盘固然不可能,但是我们要极大限度降低磁盘访问的机会。

2.       有的时候为了获取极快的响应,我们还会不惜代价采用重复计算。比如,我们的某个操作很可能会由于网络问题等原因响应比较慢,在设计的时候可以有一个统一的处理接口,由这个接口分发到不同的服务器去异步实现这个操作,哪个服务器先返回了结果我们就用这个结果,然后杀死其他服务器的冗余操作。

3.       网站一般追求比较快的响应,一般不太会在比较高的层次用时间来换取空间,但是在一些用户独有数据的处理算法上可能还是会考虑到空间的节省问题。

4.       有的时候我们会用一些聚合表来存放聚合数据,也就是进行一些预计算提高复杂计算(比如报表)的性能。当然,对于数据分析,构建多维数据库也是一种不错的选择。



有很多网友留言说说的比较粗,没有什么具体的东西。我觉得架构这个东西很难去说具体怎么做,因为具体实施的时候要看情况去应用的,由于没有完美的东西,所以做架构通常是去做一个平衡,很可能某一个侧重不同会影响到架构的实施。希望我的这些文章能给大家一个提示的作用,看了之后如果你觉得“这点我倒没有考虑到,以后要注意”那或许就是最大的帮助了,下面我想说一些其它方面的问题,每一条都很零散,算是一个补充吧:



1.       到底是采用已有的东西还是自己去做需要详细考虑的,采用别人的东西可能比较稳定,但是自己的控制少了一点,采用自己做的东西可以很灵活,但是可能会问题比较多。不管怎么样,我们在采用一个第三方框架的时候务必要进行缜密的调查,看到他的不足,否则项目很可能在后期被这个框架制约,反之,决定自己去做一个框架的时候也要看到自己需要什么其他框架不能提供的东西。

2.       数据传输的时候可以做压缩,但要考虑到压缩解压缩需要CPU资源,在IO(磁盘,带宽,传输能力)和CPU之间有一个平衡的考虑。

3.       理想的可伸缩性架构是可以自由增加或替换服务器,无需去停机维护或做很大的调整。在使用一个统一的调度中心来调度这些服务器,分配请求的时候,我们要考虑一下调度服务器能承受多少流量。

4.       使用大量的廉价服务器还是少量的高配服务器?如何根据需求来组合服务器发挥最大作用。

5.       对于分布式构架,我们尽量让每一个节点保持简单的逻辑,尽量减少同一层次节点之间的依赖,另外。需要有统一的地方来管理所有的节点。

6.       功能分解、使用异步进行整合、故障转移、失效保护。

7.       软件的架构升级和计算机硬件的架构升级很像,可能有一段时期,我们是在慢慢提高整体能力,2年也才提高了几倍,之后发现只有通过某种彻底的架构改变才能提高数十倍的能力,升级之后,我们或许又会遇到其他问题。就像CPU,是简单提高主频还是彻底更换架构。

8.       数据方面,读写分离、数据库分隔、功能划分、缓存、镜像。

9.       硬件网络上的架构很重要,但软件开发中的一些细节不可忽略,好的架构不意味着不需要代码审阅。
分享到:
评论

相关推荐

    大型网站架构资源集合

    7. **大型互联网网站架构心得之二并、换和其它.mht**:这部分内容可能深入探讨了数据并行处理、数据库交换策略以及其他与性能优化相关的技术,以应对大数据量和高并发场景。 8. **Linux服务器集群系统的体系结构....

    大型门户网站架构心得

    本文将围绕“大型门户网站架构心得”这一主题,深入探讨其核心理念——“分”,并结合具体实践案例,详细阐述如何通过“分”的原则来优化大型网站的架构设计。 #### 二、横向分原则 ##### 1. 模块化设计 大型网站...

    大型门户网站站架构心得-腾讯-百度-新浪-谷歌网站

    大型门户网站的架构设计是互联网行业中一项复杂而关键的任务,它涉及到如何处理高并发访问、海量数据存储、系统稳定性以及高效能的问题。在这个领域,腾讯、百度、新浪和谷歌等巨头公司的实践经验提供了丰富的学习...

    webservice 心得

    ### WebService 心得体会 ... WebService是一种跨语言、跨平台的应用程序接口(API),它...随着云计算和微服务架构的发展,虽然出现了更多新的服务交互模式,但WebService仍然是构建大型分布式系统时不可或缺的一部分。

    大型装饰家居建材行业门户网站源代码

    【大型装饰家居建材行业门户网站源代码】是一种专为装饰、家居和建材行业的企业提供在线平台的网站源码。这种源代码通常包含一系列功能模块,旨在帮助这些企业构建一个全面的在线展示、销售和服务平台,以提升品牌...

    linux学习心得 多年的总结

    这使得Linux不仅能够适应互联网的需求,如Web服务器、DNS、FTP、电子邮件等服务,还能作为小型服务器和大型企业级系统的解决方案。Linux提供了丰富的桌面环境,如KDE和GNOME,以及支持各种编程语言,如C、C++、Perl...

    XX大型电子商务网站初步需求分析(个人接单)

    在进行大型电子商务网站的需求分析时,我们需要关注的关键点主要包括网站的功能设计、用户体验、交易流程以及增值服务等多个方面。以下是对这些核心需求的详细说明: 1. **首页顶部实时信息广告**: 首页作为网站...

    互联网音乐APP社交化设计与未来趋向.pdf

    - 第二种是通过与现有社交媒体平台的合作,将社交网站的用户资源整合到音乐APP中,用户可以在社交网站上直接跳转到音乐APP界面,进行收听与互动。 - 第三种是由流媒体音乐服务商自己开发的社交服务网络,用户可以...

    基于JavaWeb技术的旅游网站的设计与实现.doc

    旅游行业作为服务性行业之一,迫切需要与互联网技术相结合,以提高服务质量,满足用户的个性化需求。基于JavaWeb技术开发的旅游网站能够提供便捷的信息查询、在线交流等功能,极大地提升了用户体验。 #### 三、关键...

    基于JavaEE技术的网上电视商城毕业设计论文.pdf

    - JavaEE技术:JavaEE,全称Java Platform, Enterprise Edition,是用于开发和运行大型、多层、可伸缩、可靠和安全网络应用的Java企业级平台。它基于JavaSE,提供了各种中间件服务和API,比如Web服务、安全性、事务...

    WordPress手册完整版

    - **移动友好**:随着移动互联网的发展,确保网站在手机端的良好体验已成为SEO的重要因素之一。 #### 六、安全性与备份策略 - **定期更新**:及时升级WordPress核心及插件版本,以修复潜在的安全漏洞。 - **防火墙...

    java远程交易

    - 随着互联网技术的快速发展,尤其是大学作为互联网技术的重要发源地之一,信息技术已经深刻影响了现代社会的各个方面,包括商业、教育、生产和日常生活。 - 传统教育模式面临挑战,互联网技术的应用为教育带来了新...

    ssm课程辅助教学平台的设计与实现设计+vue毕业论文.doc

    4. 课程提问与回答管理:学生可在平台上提出问题,教师和其他学生可以进行互动讨论,促进知识的共享和理解。 5. 课程问卷管理:用于收集学生对课程的反馈,帮助教师了解教学效果,调整教学策略。 6. 教研活动管理...

    消防安全管理自查自纠-安全管理-行业安全-消防安全.docx

    - **组织架构**:成立由指导员、中队长担任组长的安全工作领导小组,成员包括其他班长骨干。 - **定期会议**:每月召开安全形势分析会,总结并部署安全防事故工作。 - **思想认识**:树立“安全工作压倒一切”的...

    java进阶之路 。。

    - **社区参与**:加入如JavaEye、Reddit的r/learnprogramming、技术论坛等社区,与其他开发者交流心得,分享问题和解决方案,可以加速学习进程。 - **实践项目**:通过实际项目来巩固理论知识,可以是个人项目,也...

    中国嵌入式开发从业人员调查报告(2010-2011)

    - **Linux操作系统**:因其开放源代码和强大的社区支持,成为最受欢迎的操作系统之一。 - **Windows CE**:在某些特定场景下也有一定的市场份额。 - **RTOS**:实时操作系统在嵌入式领域有着不可替代的地位。 #####...

    基于微信小程序的旅游系统设计与实现.docx

    - **旅游攻略分享**:用户可以上传自己的旅游心得,也可以查看其他用户的攻略。 ##### 3.2 系统设计 - **前端界面设计**:采用响应式布局设计,确保在不同设备上都能良好展示。 - **后端接口设计**:定义清晰的...

    2017阿里技术年度精选(上)

    - **应用场景**:适用于大规模在线交易处理(OLTP)、混合事务分析处理(HTAP)等场景,满足了互联网金融、电商等行业的高并发和大数据量的需求。 2. **阿里在数据库智能优化路上,做了哪些探索与实践?** - **探索...

Global site tag (gtag.js) - Google Analytics