`
pengpeng
  • 浏览: 85264 次
  • 性别: Icon_minigender_1
  • 来自: 杭州
社区版块
存档分类
最新评论

【原】第一节: Linux 性能分析以及调优介绍

阅读更多


Linux 性能分析以及调优介绍
    写在前面:计算机要解决的基本问题之一是如何在不增添更多硬件能力的情况下使其能够完成更多工作;而我们应用设计的一项重要伸缩性原则是:随着应用的推广和访问流量的增加,通过相应数量的服务器资源来应对;资源的消耗应该随负载线性(或更佳)上升,负载可由用户流量、数据量等测量;可以参考ebay的架构最佳实践:
    http://www.infoq.com/cn/articles/ebay-scalability-best-practices
   
本节介绍linux性能分析工具;下一节介绍各个层面的可调参数;最后一节介绍一个web性能问题分析案例;

                                             第一节  性能监控
 1)整体系统cpu利用率
    系统性能的指标之一就是系统对用户的响应速度。在对系统的方法化分析中,首要且最近本的工具之一常常是对系统的cpu利用率进行简单测量。
    $ uptime
    10:17:40 up 6 days, 59 min,  6 users,  load average: 0.00, 0.00, 0.00
    主要看load average也就是我们通常说的服务器load(平均负荷值),代表1分钟,5分钟,15分钟
    系统平均负载被定义为在特定时间间隔内运行队列中的平均进程树。如果一个进程满足以下条件则其就会位于运行队列中:
  - 它没有在等待I/O操作的结果
  - 它没有主动进入等待状态(也就是没有调用'wait')
  - 没有被停止(例如:等待终止)
    (但也有例外,看各个系统的计算方式了,我的debian发布版,从man uptime里System load averages is the average number of processes that are either in a runnable or uninterruptable state,可见它包括等待i/o的线程)
   vmstat命令实时监控系统各个方面的数据;例如每隔3秒显示一下系统性能数据:
   $vmstat 3
    procs -----------memory---------- ---swap-- -----io---- -system-- ----cpu----
     r  b   swpd   free   buff  cache   si   so    bi    bo   in   cs us sy id wa
     1  0 192824  93020 317960 770156    0    1    73    79  114  108 20 23 56  2
     0  0 192824  93012 317960 770164    0    0     0     0  958 2223  7 10 84  0
     procs部分提供了生成报告时正在运行的进程数据(r)以及被阻塞的进程数目(b);
     memory部分提供了换出内存(swpd),空闲内存(free),i/o数据结构的缓冲区缓存(buff),以及从磁盘读取文件的内存缓存(cache)的容量,单位为KB;
     swap部分提供了从磁盘上换入的内存容量(si)以及换出到磁盘上的内存量(so),单位kB/s;
     io部分提供了从设备读入的块数(bi)以及写出到设备上的块数(bo).单位为KB/s;
     system部分提供了每秒的中断数目(in)和上下文切换数目(cs);
     cpu部分提供了用户(us),系统(sy),真正空闲(id),已经等待I/O完成(wa)在cpu总时间中所占百分比。cpu利用率也许是最常用的量度。若wa过大,则应该检查I/O子系统,
        例如,可以判定需要更多的I/O控制器和磁盘以减少I/O等待的时间;
   
    top和gtop命令:提供所有正在运行的进程和系统载荷提供不断更新的概览信息,包括CPU负荷,内存使用以及每隔进程的内存使用情况;
    sar是sysstat工具包的组成部分;它收集并报告错哦阿左系统中广泛的系统活动,包括CPU利用率,上下文切换和中断速率,页换入,和页换出速率,共享内存使用情况,
    设备性能情况,缓冲区使用情况以及网络使用情况;

 2)内存利用率

   工作负荷有可能会耗尽所有可用的内存。Linux提供了对物理内存进行合理,高效的访问并可以访问潜在的海量虚存的技术。虚存通常稍多于操作系统实际拥有的内存容量,以便将较少使用的数据卸载到磁盘存储器上,同时又呈现出系统拥有大量物理内存的假象。糟糕的是,卸载内存的开销可能会比应用延迟高出数十甚至上百倍。如果被换出到磁盘上的内存空间是错误的内存页,或者如果应用程序的当前内存印迹大于物理内存容量的话,那么这些过高的延迟会极大的影响应用的响应时间;

 通过/proc/meminfo和/proc/slabinfo可以监视系统内存资源的整体利用情况;

 可以通过ps aux 查看每个进程消耗系统内存的总体百分比,以及该进程的虚存印迹(VSZ)和当前使用的物理内存量(RSS)。也可以使用top交互式的查看进行列表。然后通过/proc/pid(进行id)/maps查看进行地址空间的所有映射及其大小,等内存分布状况信息。

通过vmstat可以监视内存可用性和交换活动。vmstat可以协助发现异常的系统活动,例如会导致操作系统性能下降的过多的页面错误或上下文切换操作。结合cpu利用率的us,sy,id,wa监视,如果wa的值过大,则要查看I/O系统,结论有可能是需要更多I/O控制器和磁盘以便减少I/O等待时间;

 $vmstat
 procs -----------memory---------- ---swap-- -----io---- -system-- ----cpu----
   r  b   swpd   free   buff  cache   si   so    bi    bo   in   cs us sy id wa
   4  0 306792 159560 228680 298932    0    1    75    84   65   71 19 21 58  2

 


 3)磁盘I/O的利用率和延迟
    尽管整体的处理器速度,内存大小以及I/O执行速度在不断提高,但I/O操作的吞吐率和延迟性能仍然要比等价的内存访问操作低多个数量级;另外,由于许多工作负荷都
    拥有重要的I/O组件,I/O处理容易成为整体吞吐律和应用整体响应时间的重要瓶颈;以下介绍iostat命令:
    $iostat
    Linux 2.6.32-5-686 (zhaopeng)     07/07/2010     _i686_    (2 CPU)

    avg-cpu:  %user   %nice %system %iowait  %steal   %idle
              18.93    0.50   22.80    1.57    0.00   56.21

    Device:            tps   Blk_read/s   Blk_wrtn/s   Blk_read   Blk_wrtn
    sda               5.63        90.79        99.44   47760868   52308144
   
    iostat报告的CPU利用心里类似于top工具提供的内容;之后给出各个磁盘的利用情况的报告;
    tps列表示发至逻辑磁盘的I/O请求数;Blk_read/s 和Blk_wrtn/s 给出分别对应于读写该逻辑驱动器的数据量,以每秒的块数为单位;
    iostat 默认显示以块为单位,也可以加参数iostat -k 以KB为单位显示;

 4)网络I/O利用率
    netstat 是监视linux服务器上网络链接的最常用工具之一;该工具可以显示每种网络协议例如TCP和UDP的活跃socket列表,还提供了关于网络路由信息以及网络接口的累积统计数据,包括输入输出报文数量以及报文冲突次数;
    常用的工具:netstat; iftop;ifstat;apache自带的ab测试工具;

 

参考:《linux服务器性能调整》

          《深入理解linux内核》

1
0
分享到:
评论

相关推荐

    linux性能调优.pdf

    Linux性能调优是系统管理员和开发人员优化Linux系统性能的重要技能。它涉及对系统资源和应用程序的分析、监控、和调整,以实现更高的效率和响应速度。本篇学习笔记详细介绍了性能分析的步骤、优化工具、性能指标的...

    SUSE Linux性能分析、调优和工具

    综上所述,"SUSE Linux性能分析、调优和工具"不仅介绍了如何优化SUSE Linux Enterprise的各个方面,还提供了实用的工具和最佳实践,帮助用户充分利用系统资源,提升系统性能。通过理解和应用这些知识,无论是管理员...

    KVM实战:原理、进阶与性能调优.pdf

    云计算是本书的背景知识之一,作者在第1章中介绍了云计算的相关概念,包括云计算的定义、云计算的发展历程以及常见的服务模型,如基础设施即服务(IaaS)、平台即服务(PaaS)和软件即服务(SaaS)。虚拟化技术则是...

    Linux操作系统性能调优_了解系统.pdf

    本文档将详细介绍 Linux 操作系统性能调优的相关知识点,帮助读者更好地理解 Linux 操作系统的性能优化。 1. 进程状态(Process State) 在 Linux 操作系统中,每个进程都有其自己的状态,包括 TASK_RUNNING、TASK...

    linux 性能调优 linux performance truning

    【Linux性能调优 Linux Performance Tuning】是一本实用的手册,专注于解决Linux系统中的性能问题和日常调优工作。本书适合运维人员以及对Linux性能优化感兴趣的IT从业者使用。书中涵盖了一系列操作系统调优方法、...

    Linux下的MySQL调优

    性能瓶颈定位是调优的第一步,也是最重要的一步。通过准确地识别出导致性能问题的根本原因,才能有针对性地采取措施。以下是一些常用的性能瓶颈定位工具和技术: 1. **Explain**:Explain命令可以帮助我们了解SQL...

    Unix系统性能监控和调优.pdf

    #### 三、Unix系统性能调优 - **调优原则**:遵循先诊断后调优的原则,确保问题得到准确定位。 - **调优方法**: - **优化文件系统**:选择合适的文件系统类型,调整文件系统参数。 - **内存优化**:合理配置交换...

    linux性能调优实验环境.pdf

    Linux性能调优是系统管理员和开发者为了确保系统运行在最佳状态而进行的一系列操作。在Linux环境下,性能调优可以从多个层面进行,包括但不限于系统内核参数调整、进程调度、文件系统优化、内存管理、I/O子系统配置...

    Linux性能调优的几种方法

    首先,Linux性能调优的第一种方法是Disabling daemons(关闭守护进程,简称daemons)。守护进程是Linux系统中运行在后台的一类进程,它们通常在系统启动时被自动启动,并在系统运行过程中持续运行。并非所有的守护...

    Linux性能分析之CPU实战-视频课程资源网盘链接提取码下载 .txt

    - **电子书籍推荐**:《Linux性能监控与调优》、《Linux系统性能分析实战》 - **在线教程与文档**:Linux Performance Tuning Guide、The Linux Kernel Performance Tips - **社区与论坛**:LinuxQuestions.org、...

    分享:JVM及其性能调优,欢迎交流

    JVM(Java Virtual Machine)是Java程序运行的基础,它提供了执行Java字节码的环境。...总之,理解和掌握JVM的工作原理、内存管理、垃圾回收以及调优策略,对于解决Java应用性能问题和提升系统稳定性至关重要。

    linux 调优

    本文将基于提供的部分内容,详细介绍与Linux内核调优相关的知识点。 #### 二、TCP连接管理参数 **1. TCP SYN重试次数** - 参数名:`tcp_syn_retries` - 默认值:5 - 功能描述:设置当接收到一个SYN包时,发送方...

    vCenter性能调优和性能监控

    对于vCenter Server来说,性能调优和监控是保障其稳定运行和提高管理效率的重要措施。性能调优可以帮助vCenter Server应对更多的虚拟机负载,而性能监控则能够帮助管理员及时发现和解决潜在问题,从而避免vCenter ...

    MySQL管理之道 性能调优、高可用与监控.part2.rar

    第1章 mysql5.5介绍 2 1.1 性能上的显著改变 2 1.1.1 mysql5.5默认存储引擎的调整 2 1.1.2 充分利用cpu多核的处理能力 7 1.1.3 提高刷新脏页数量和合并插入数量,改善磁盘i/o处理能力 8 1.1.4 增加自适应刷新...

    Red Hat Enterprise Linux Performance Tuning Guide

    **第一章:性能调优基础** - 理解系统性能瓶颈:介绍如何识别系统中的主要性能瓶颈,包括CPU、内存、I/O等。 - 性能监控工具:列举了可用于监控系统性能的工具,如top、iostat、vmstat等。 - 性能分析方法:探讨了...

    Linux内核视频教程(70G百度网盘资源)

    12. **性能分析与调优**:探讨如何使用工具(如perf、strace、sysdig)来监控和分析系统性能,并进行相应的内核参数调整。 这个庞大的视频教程可能还会涵盖安全、实时性、电源管理等其他方面,适合对Linux内核有...

Global site tag (gtag.js) - Google Analytics