`
longxj
  • 浏览: 101898 次
  • 性别: Icon_minigender_1
  • 来自: 南京
最近访客 更多访客>>
文章分类
社区版块
存档分类
最新评论

使用ulimit和proc去调整系统参数

阅读更多

在使用linux做为关键应用的过程中,特别是大压力负载的时候,经常会遇到一些诸如“too many open files”,“系统默认最大线程数是多少?如何调整?”等问题。此时,我们就必须使用ulimit或proc去调整系统的某些参数。
一、区别
ulimit和对proc目录都可以作出某些限制,但它们之间是有区别的:
1、ulimit命令:
1)直接使用ulimit命令,只对当前tty(终端有效),若要每次都生效的话,可以把ulimit参数放到对应用户的.bash_profile里面;
2)针对所有用户的设置,在/etc/security/limits.conf文件,其是可以对系统用户、组进行cpu、文件数等限制的,通过它可以针对某个用户或全部进行限制。但不能超越系统的限制;
(*表示所有用户、soft表示可以超出,但只是警告;hard表示绝对不能超出,unlimited用于表示不限制)
3)另一方法是,如果想对所有用户设置,也可以放在/etc/profile文件里面,下面是该文件里面的默认参数:

引用
ulimit -S -c 0 > /dev/null 2>&1


2、/proc目录:
1)/proc目录里面包括很多系统当前状态的参数,例如:

引用
/proc/sys/fs/file-max
/proc/sys/fs/inode-max


是对整个系统的限制,并不是针对用户的;
2)proc目录中的值可以进行动态的设置,若希望永久生效,可以修改/etc/sysctl.conf文件,并使用下面的命令确认:

# sysctl -p


例如增加:

引用
fs.file-max=xxx
fs.inode-max=xxx



二、ulimit命令简介
(以下引用网上的部分资料)
1、说明:
ulimit用于shell启动进程所占用的资源.
2、类别:
shell内建命令
3、语法格式:
ulimit [-acdfHlmnpsStvw] [size]
4、参数介绍:

引用
-H 设置硬件资源限制.
-S 设置软件资源限制.
-a 显示当前所有的资源限制.
-c size:设置core文件的最大值.单位:blocks
-d size:设置数据段的最大值.单位:kbytes
-f size:设置创建文件的最大值.单位:blocks
-l size:设置在内存中锁定进程的最大值.单位:kbytes
-m size:设置可以使用的常驻内存的最大值.单位:kbytes
-n size:设置内核可以同时打开的文件描述符的最大值.单位:n
-p size:设置管道缓冲区的最大值.单位:kbytes
-s size:设置堆栈的最大值.单位:kbytes
-t size:设置CPU使用时间的最大上限.单位:seconds
-v size:设置虚拟内存的最大值.单位:kbytes
unlimited 是一个特殊值,用于表示不限制


5、简单实例:
如果我们想要对由shell创建的文件大小作些限制,如:
引用:

[/home/javalee]ll h
-rw-r--r-- 1 javalee javalee 150062 7月 22 02:39 h
[/home/javalee]ulimit -f 100 #设置创建文件的最大块(一块=512字节)
[/home/javalee]cat h>newh
File size limit exceeded
[/home/javalee]
[/home/javalee]ll newh
-rw-r--r-- 1 javalee javalee 51200 11月 8 11:47 newh


文件h的大小是150062字节,而我们设定的创建文件的大小是512字节x100块=51200字节,当然系统就会根据你的设置生成了51200字节的newh文件。
若要每次都生效,把你要设置的ulimit放在/etc/profile这个环境文件中即可。

三、实例说明
对 于一般的应用来说(象Apache、系统进程)1024完全足够使用。但是如何象squid、mysql、java等单进程处理大量请求的应用来说就有点 捉襟见肘了。如果单个进程打开的文件句柄数量超过了系统定义的值,就会提到“too many files open”的错误提示。如何知道当前进程打开了多少个文件句柄呢?下面一段小脚本可以帮你查看:

# lsof -n |awk '{print $2}'|sort|uniq -c |sort -nr|more


在系统访问高峰时间以root用户执行上面的脚本,可能出现的结果如下:

引用
# lsof -n|awk '{print $2}'|sort|uniq -c |sort -nr|more    
131 24204  
57 24244  
57 24231  
56 24264


其中第一行是打开的文件句柄数量,第二行是进程号。得到进程号后,我们可以通过ps命令得到进程的详细内容。

引用
# ps -aef|grep 24204
mysql  24204 24162 99 16:15 ?    00:24:25 /usr/sbin/mysqld


哦,原来是mysql进程打开最多文件句柄数量。但是他目前只打开了131个文件句柄数量,远远底于系统默认值1024。
但是如果系统并发特别大,尤其是squid服务器,很有可能会超过1024。这时候就必须要调整系统参数,以适应应用变化。以root用户运行以下命令:

# ulimit -HSn 4096



以 上命令中,H指定了硬性大小,S指定了软性大小,n表示设定单个进程最大的打开文件句柄数量。个人觉得最好不要超过4096,毕竟打开的文件句柄数越多响 应时间肯定会越慢。设定句柄数量后,系统重启后,又会恢复默认值。如果想永久保存下来,可以修改.bash_profile文件,可以修改 /etc/profile 把上面命令加到最后。

四、/proc目录配置
由于/proc目录涉及的配置非常多,包括网络、文件系统等,后续以一篇独立的文章进行吧。

分享到:
评论

相关推荐

    操作系统参数配置不当引起系统并发访问卡顿排查方法.doc

    操作系统参数配置对于系统的稳定性和性能至关重要,特别是在高并发访问场景下。当参数配置不当,可能会导致系统出现卡顿、响应慢等问题。以下是一些关键的系统参数调整方法,旨在优化并发访问性能: 1. **最大打开...

    LINUX性能调优完全手册

    ulimit 参数是Linux系统中的一个重要参数,控制着系统的资源使用限制。通过调整该参数,我们可以提高系统的性能。 7. 文件打开数目调整 文件打开数目是Linux系统中的一个重要参数,控制着系统的文件打开限制。通过...

    Linux性能分析与调整命令汇总[借鉴].pdf

    总结来说,Linux性能分析与调整是一个综合性的任务,需要熟练运用各种命令工具,通过观察和分析找出性能瓶颈,并通过内核参数调整和资源管理来优化系统性能。这个过程不仅需要深入理解Linux系统内部工作原理,还需要...

    获取和修改linux socket最大连接数,linux,系统

    最后,为了确保系统的稳定性和安全性,调整这些参数时需要谨慎,根据实际的负载和需求进行优化。在生产环境中,建议先进行压力测试,确保改动不会导致其他问题。 总的来说,获取和修改Linux Socket的最大连接数涉及...

    Linux 性能分析

    例如,利用nice和renice调整进程优先级,用ulimit控制用户资源限制,通过sysctl进行全局系统参数调整。 总的来说,Linux性能分析是一个全面的过程,需要结合多种工具和方法,找出系统瓶颈,并采取相应的调优措施。...

    linux系统初始化优化推荐参考.pdf

    6. **sysctl优化**:调整系统参数以提高网络连接跟踪和TCP超时设置,减少错误报告: - `sysctl -w net.ipv4.ip_conntrack_max=655360` - `sysctl -w net.ipv4.neigh.default.gc_thresh3=4096` - `sysctl -w ...

    linux系统优化的相关参数参考.pdf

    以上参数的调整旨在提升Linux服务器的网络性能,防止恶意攻击,优化内存使用,并增强文件系统处理能力。在进行系统优化时,应根据具体服务器负载和应用需求来适配这些参数,确保系统在保证安全的同时,达到最佳运行...

    NBU for Linux 86_64安装

    NBU for Linux 86_64安装 ...NBU for Linux 86_64安装需要对操作系统进行配置和调整内核参数,然后解压NetBackup安装文件,最后开始安装。安装完成后,NetBackup服务器软件将被成功安装在Linux操作系统上。

    Linux_Performance_Tuning.pdf

    根据文件内容,我们将探讨Linux系统性能调优的核心知识点,包括不同命令的使用,以及如何调整CPU、内存、磁盘I/O和网络设置。 Linux系统性能调优的介绍 Linux是一个多用途的操作系统,支持多种发行版,如Suse、...

    Linux服务器性能测试分析命令大全

    当系统发生性能问题时,可以通过修改/proc目录下的相关参数来进行调整。 常用的性能测试和分析工具有: 1. uptime:查看系统平均负载率,反映系统在最近1分钟、5分钟、15分钟内的负载情况。 2. dmesg:获取硬件和...

    Linux内核参数调整方法

    Linux内核参数调整是优化系统性能的关键步骤,它涉及到系统的各种功能,如网络、内存管理、文件系统等。...建议先在测试环境中进行调整,并充分了解每个参数的意义和作用,以便做出合适的调整,提升系统性能和稳定性。

    weblogic内存占用过大调优

    - 在Solaris系统中,可以通过`/usr/proc/bin/pfiles`命令查看当前进程的文件描述符使用情况,并通过`/usr/proc/bin/plimit -n`调整软硬限制。 4. **数据库连接管理**: - 在数据库操作完成后及时关闭连接、...

    Linux性能分析工具汇总.docx

    - **修改/proc/sys/vm/**下的系统参数:例如,通过调整`vm.min_free_kbytes`来控制系统保留的最小空闲内存大小。 - **配置系统的swap交换分区**:确保swap交换分区的大小至少等于或两倍于物理内存的大小,以避免内存...

    Linux报too many open files的解决方案

    为了解决这个问题,我们可以从两个方面入手:一是查看和调整当前会话的文件限制,二是修改系统级别的文件打开数限制。 首先,每个运行在Linux系统中的进程都有一个可以打开文件的最大数量限制。这个限制包括了文件...

    linux-Linux性能优化实战案例

    了解`/proc`和`/sys`文件系统,它们提供了动态调整内核参数的接口。 11. **进程和线程管理**:理解`pthread`库在多线程编程中的应用,以及如何使用`pthread_setschedparam`等函数调整线程优先级。 12. **系统资源...

    linux性能诊断优化.rar

    4. **内存管理**:理解Linux的虚拟内存机制,包括交换空间、分页和缓存,以及如何通过调整`/proc/sys/vm`中的参数来优化内存使用。 5. **磁盘I/O优化**:学习`iozone`等I/O测试工具,了解块设备的工作方式,掌握`...

    RedHatLinux5.1下安装oracle9i.pdf

    保持定期的数据库维护,包括日志切换、备份恢复、性能监控等,以确保数据的安全和系统的健康运行。 综上所述,要在RHEL5.1上成功安装Oracle 9i,需要仔细规划和执行每一步,确保系统环境满足Oracle的硬件和软件...

    linux中的weblogic性能调优.pdf

    在Linux环境中进行WebLogic性能调优是一个复杂的过程,涉及到操作系统层面的多个方面。WebLogic Server作为Oracle提供的企业级...此外,应根据实际工作负载和业务需求来调整这些参数,以确保最佳的系统性能和稳定性。

Global site tag (gtag.js) - Google Analytics