linux命令

可以参考：

1、查询文件，并找出匹配行的上下N行记录。zgrep是查询压缩包

$grep 'n1' file | grep 'n2'//找到同时符合两个条件的行

$grep -C 5 'parttern' file //打印匹配行的前后5行
 
$grep -A 5 'parttern' file //打印匹配行的后5行
 
$grep -B 5 'parttern' file //打印匹配行的前5行

$ls -lh //显示文件，按h(人性化阅读)

 2、top命令

附：TOP命令中需要关注的值：
（1）load average：此值反映了任务队列的平均长度；如果此值超过了CPU数量，则表示当前CPU数量不足以处理任务，负载过高
（2）%us：用户CPU时间百分比；如果此值过高，可能是代码中存在死循环、或是频繁GC等
（3）%sy：系统CPU时间百分比；如果此值过高，可能是系统线程竞争激烈，上下文切换过多，应当减少线程数
（4）%wa：等待输入、输出CPU时间百分比；如果此值过高，说明系统IO速度过慢，CPU大部分时间都在等待IO完成
（5）%hi：硬件中断CPU百分比；当硬件中断发生时，CPU会优先去处理硬件中断；比如，网卡接收数据会产生硬件中断
（6）swap used：被使用的swap；此值过高代表系统因为内存不足在进行频繁的换入、换出操作，这样会影响效率，应增大内存量
（7）%CPU：进程使用CPU的百分比；此值高表示CPU在进行无阻塞运算等

 3、查看进程命令ps

#查找redis进程，第二列是进程id
ps -ef | grep redis-server

#其中10000是进程id，-T显示线程，其中spid表示线程id，cmd表示线程名称
ps -T -p 10000

 其中，ps -ef显示结果含义如下：

字段含义如下：
UID       PID       PPID      C     STIME    TTY       TIME         CMD
zzw      14124   13991      0     00:38      pts/0      00:00:00    grep --color=auto dae

UID      ：程序被该 UID 所拥有
PID      ：就是这个程序的 ID 
PPID    ：则是其上级父程序的ID
C          ：CPU使用的资源百分比
STIME ：系统启动时间
TTY     ：登入者的终端机位置
TIME   ：使用掉的CPU时间。
CMD   ：所下达的是什么指令

 4、grep用的很多，常用的有：

#匹配某字符串，下面两个相同效果
grep 'rCode=0' server.log

#匹配正则表达式某字符串，比如rCode不等于0的情况，其中^是反向选择符
grep 'rCode=[1-9]' server.log
grep 'rCode=[^0]' server.log

 5、日志统计。查看内存占用情况，直接用free

对日志文件的用户id次数进行统计   并显示次数最多的前N名
grep -i -o -E "[0-9]*" test1.txt | sort -n | uniq -c | sort -n -r | head -100
grep命令 用于文本搜索
-E：用于使用正则匹配
-o：只显示匹配的部分
-i：忽略大小写
sort命令用于排序
-n：数值排序
-r：倒序排序
uniq命令用于去重
-c：显示重复次数
head -100命令显示前100行

 

 6、awk的使用：

17:36:03.251 [test] INFO  l.xxxService - 这是一条日志,耗时:30,条数:0
# 打印出30这个数字
grep '这是一条日志' server.log | awk -F ',' '{print $2}' | awk -F ':' '{print $2}'

#统计得到某个操作执行了100遍的用户
grep -E "op=1"xxx.log| awk -F'`' '{print $5}'|awk -F'=' '{print $2}'|sort|uniq -c|sort -nr|awk -F' ' '{if(substr($1,1)+0>100)print $0}'|awk -F' ' '{print $2}' > ~/result.txt
其中grep -E "op=1"xxx.log| awk -F'`' '{print $5}'|awk -F'=' '{print $2}'|将用户id分隔出来，每一行都是一个用户id。
其中|sort|uniq -c|sort -nr是将用户id排序并统计出现次数，并分隔出来，每行都是“次数 用户id”。
其中awk -F' ' '{if(substr($1,1)+0>100)print $0}'，awk中的substr函数截取次数并比较次数大于100的才筛选出来，其中$0是打印全部数据，$1是分隔后的第一个，$2是分隔后的第二个

 7、输出重定向>和>>的区别：

>>这个是将输出内容追加到目标文件中。如果文件不存在，就创建文件。
>   是定向输出到文件，如果文件不存在，就创建文件；如果文件存在，就将其覆盖。一般我们备份清理日志文件的时候，就是这种方法：先备份日志，再用`>`，将日志文件清空（文件大小变成0字节）。

 8、测试网络是否通：

telnet 127.0.0.1 8080
curl cip.cc

 9、查看指定端口是否开放，https://tool.chinaz.com/port/

脚本：https://github.com/dylanaraps/pure-bash-bible