`
Cindy_Lee
  • 浏览: 112009 次
  • 性别: Icon_minigender_1
  • 来自: 武汉人在北京
社区版块
存档分类
最新评论

答复: 开口大数据闭口高并发,你们都是怎么回答

 
阅读更多
你需要了解大数据高并发的瓶颈在哪里,一般都是数据库层面的,机械硬盘承载不起非常快速的读写操作,cpu承载不起大量的逻辑运算,所以最基本的解决思路就是:
1.换固态硬盘加快硬盘的读写效率。
2.建立缓存中间件降低对硬盘的读写次数,缓存不用多说了,最最最基本和重要的优化策略。
3.将硬盘的读写或者数据的计算分摊到多台机器上,也就是集群。hadoop就是基于这个层面的。
4.良好的查询算法,降低读的次数,分表,分库,索引等都是基于这层面的。

理论上来讲,在带宽充裕的情况下,只要遵循上面的4个思路进行延伸就可以解决大部分的高并发问题。
分享到:
评论
2 楼 QING____ 2013-10-22  
我来阐明一下个人的几个废话:
1) 良好的架构设计/数据存储结构设计,是提高并发能力和大数据存储能力的最有效办法;不良的架构,即影响扩展,又影响稳定性,对于提升整体负载能力有很大的阻力..不良的数据存储结构,是造成数据操作性能的元凶,也是导致很多扭曲的设计的根源.
2) 扩展硬件,是提升独立server负载能力的最直接办法,也是成效最快捷的办法,但是这种办法的可持续性较差.
3) 基于2)之下,需要说明的是,最好不要让硬件成为"并发能力"的瓶颈;如果硬件总是瓶颈,那么说明软件的可优化余地非常大.
4) 没有免费的性能结余

1 楼 yanqingluo 2013-06-05  
好,转走了啊.

相关推荐

    政务资源数据信息大数据管理平台数据使用流程规范【模板】.docx

    【政务资源数据信息大数据管理平台数据使用流程规范】 政务大数据资源管理平台的数据使用流程规范旨在规范政府各部门在处理和利用政务大数据时的行为,确保数据的安全、有效和合法使用。本规范详细阐述了从数据需求...

    大数据时代高校图书馆新馆建筑与功能的分析.pdf

    在信息化时代迅猛发展的背景下,大数据已成为核心变革力量之一。大数据时代是指数据的产生、存储、管理和分析的技术飞速发展,它推动了信息传播和数据处理的关键途径,使数据成为社会发展的风向标。本分析报告针对...

    答复: 一道经典线程面试题的4种解法

    标题中的“答复: 一道经典线程面试题的4种解法”暗示了这是一个关于多线程编程的问题,通常在面试中出现,用于评估候选人的并发处理能力。在这个问题中,可能涉及到同步、线程安全、锁机制等关键概念。 在Java中,...

    答复: PHP验证框

    在Web开发中,确保用户提交的数据安全、有效是至关重要的。... 1. **基本概念** ... ...2. **表单提交与数据接收** ... - 安全性:防止SQL注入、XSS攻击等,保护数据库和用户信息。... - 有效性:确保数据符合预期格式,如邮箱、...

    三年级英语暑假作业之句子改写练习.doc

    - 肯定答复与否认答复:对一般疑问句的回答,肯定答复用“Yes, + 主语 + 助动词/情态动词。”,否定答复用“No, + 主语 + 助动词/情态动词 + not。” 2. 具体题目解答: - 1. It is fun at school. 否认句:It is...

    答复: 通过代码简单介绍JDK 7的MethodHandle,并与.NET的委托对比(二)

    标题中的“答复: 通过代码简单介绍JDK 7的MethodHandle,并与.NET的委托对比(二)”表明本文将深入探讨Java中的MethodHandle概念,并将其与.NET平台上的委托进行对比。MethodHandle是JDK 7引入的一个强大特性,它...

    答复: 喜欢和使用Portal的朋友请进!

    博文链接:https://eric2007.iteye.com/blog/158580

    大数据背景下人工智能客服系统研究.pdf

    在大数据时代,人工智能客服系统正成为提升客户服务体验和降低企业运营成本的重要工具。随着技术的进步,人工智能客服系统已从最初的基本自动化服务,逐渐演变成能够更深入理解和处理客户问题的高级阶段。 首先,...

    答复:答复“通向开放未来的捷径”

    标题中的“答复:答复‘通向开放未来的捷径’”暗示了这是一篇对某个讨论或议题的回应,特别是关于开放科学和知识发布的路径。在描述中提到的SpringerNature是一家知名的学术出版机构,它涉及的社论可能讨论了如何在...

    交通行政复议答复意见书.pdf

    交通行政复议答复意见书是行政复议程序中被申请人(通常是交通行政机关)对申请人提出的行政复议申请进行回应的法律文件。以下是该文件涉及的主要知识点: 1. 行政复议制度:行政复议是公民、法人或其他组织对行政...

    2021年杭州城市大脑卫健系统建设项目——卫健大数据平台二期项目招标.pdf

    【智慧城市】智慧城市的概念是指利用信息技术和创新理念,优化城市运营和服务,提高...这个项目不仅涉及技术层面的解决方案,还涉及到政策法规、数据安全和跨部门协作等多个方面,对参与投标的供应商提出了较高的要求。

    英语句型转换常规基本句式的转换方法.doc

    肯定答复:Yes, there are. 否定答复:No, there aren't. 对于情态动词,如can,否定形式是在其后加"not",一般疑问句则将其提前到句首。例如: 2. 肯定句:Li Ming's father can drive the car. 否定句:Li ...

    冀教版小学英语四年级上册英语重要知识点.doc

    - 答复:`These are...`:这些是... - `What are they?`:它们是什么? - 答复:`They are...`:它们是... 4. **形容词及反义词**: - `new`:新的 - `old`:旧的 - `tall`:高的 - `short`:矮的 - `long`...

    在Word2021中如何答复批注.docx

    ### 在Word2021中如何答复批注 #### 知识点概述 在Microsoft Word 2021中,用户可以通过多种方式对文档中的批注进行答复。这对于团队协作和文档审查非常重要,因为它允许作者和其他参与者就文档内容的具体部分进行...

    西藏那曲地区那曲县公共基础知识真题汇编2010年-2020年带答案(一).docx

    2. 公文写作:答复询问报告的注意事项,不能夹带请示事项。 3. 经济学:社会主义的根本任务是发展生产力。 4. 数学序列:一个数列的规律推断(可能为等差或等比数列)。 5. 公文格式:公文正文通常使用国标仿宋三号...

    OA答复原则及策略(PPT85页).ppt

    重要的是,每次答复都应以提高授权可能性为目标,合理利用专利法的规定来维护申请人的权益。 总之,OA答复不仅要求对专利法有深入理解,还需要对审查意见进行细致分析,以制定出最合适的策略。通过有效沟通和策略性...

    VB答复精选的软件源码

    总的来说,这份【VB答复精选的软件源码】是一个宝贵的VB学习资源,它提供了大量实践案例和理论指导,无论是初学者还是经验丰富的开发者,都能从中受益匪浅。通过深入研究这些源码和配套的技术文章,可以提高VB编程...

    专利审查中如何答复0A

    理解并妥善答复审查意见通知书对于专利申请的成功至关重要。下面详细阐述在答复审查意见通知书时应注意的几个关键知识点。 1. 审查意见通知书的分类和内容: 审查意见通知书主要分为两类:第一次审查意见通知书和...

Global site tag (gtag.js) - Google Analytics