- 浏览: 506076 次
- 性别:
- 来自: 长沙
文章分类
最新评论
-
wang1352083:
正在搭建tomcat源码.一会儿参照楼主经验搭建spring源 ...
Eclipse中阅读开源项目代码 -
w123456789zzzz:
谢谢你,问题解决了,楼主万岁!!
eclipse中如何安装插件 -
xiaoLee:
...
软件性能测试论文草稿 -
铃儿响叮当:
...
使用firefox调试js -
gogopengyou:
很细心啊
eclipse中如何安装插件
有待整理成.chm格式的帮助文档以便查阅
备忘:http://www.microsoft.com/china/cloud/?1300623192
----------------------------------目录----------------------
. 挂载
. 后台服务
. 文件管理和维护
. linux常用文件传输方式比较
. 用户和权限管理
. 安装程序
. 磁盘管理和维护
. 系统设置和管理
. Linux进程
. 文本过滤
. 其他
---------------------------------------------挂载---------------------------------------------
--mount
1. http://www.yuanma.org/data/2006/0730/article_1268.htm (全面的介绍)
--losetup
1.
--mount和losetup的区别
1. http://blog.csdn.net/CrackCell/archive/2008/03/23/2210712.aspx
-------------------------------------------后台服务-------------------------------------------
--重启网络服务
service network restart
问题
1. determining ip information for eth0 failed
解决方案: http://blog.163.com/kammy_87/blog/static/3493394220092254339355/
ifconfig eth0 up
service network start restart不行不知道为什么
--安装dhcp服务
1.查看dhcp是否安装
rpm -qa|grep dhcp -qa 表示查询所有套件然后它的输出作为grep的输入看是否有dhcp
2.如果没有进行安装(这里是关盘安装,如果是虚拟机的话只要是进行虚拟光盘设置就行)
mount /mnt/cdrom
3.然后进入到/mnt/cdrom/REDHAT/RPMS
rpm -ivh rpm -ivh dhcp-3.0pl1-23.i386.rpm
4.redhat没有 /etc/dhcpd.conf这个文件得拷贝一个文件
--启动ftp服务
service vsftpd start
在windows在使用ftp://peizhi:yuanpeizhi@192.168.94.87
--ssh服务
service sshd start
http://www.lupaworld.com/action_viewstutorial_itemid_4319.html ?(不需重新启动改变ssh的监听端口)
--sysv服务和xinetd 服务
xinetd 服务
http://powerclark.iteye.com/blog/527891 什么是xinetd服务
http://wenku.baidu.com/view/cf628b4ae45c3b3567ec8b08.html xinetd配置指南
--怎么在命令行模式和窗口模式之间切换
startx 切换到窗口模式
init 3 切换到命令行模式下
---------------------------------------------文件管理和维护---------------------------------------
--文件系统原理
http://blog.chinaunix.net/u1/45510/showart_357744.html EXT2、EXT3和ReiserFS 结合下面的参考资料看
参考资料
. http://www.freeos.com/articles/3838/ VFS-1
. http://www.freeos.com/articles/3851/ VFS-2
. http://e2fsprogs.sourceforge.net/ext2intro.html ext2
牛人博客:
http://www.cublog.cn/u/12783/showart_402862.html 很全面的博客
--查找文件
1.whereis dhcpd 不支持模糊查询
2.find / -name dhcp 查询根目录下面名称中包含dhcp的文件
格式 find [路劲] -name [正则表达式] [其他参数]
参数
-mtime n n*24小时前修改过的文件
-newer file 比file更新的文件
-nouser
-nogroup
-path pattern
-perm [mode | -mode | /mode]
-type Supported. POSIX specifies ‘b’, ‘c’, ‘d’, ‘l’, ‘p’, ‘f’ , ‘s’
-maxdepth 查询的最大深度
-mindepth 查询的最小深度 (通过这两个参数可以确定一个深度范围)
-not \( expr.... \)
FE: find /home/lhelper/ -maxdepth 3 -mindepth 2 -name \*.sh -not \( -name \*zqy\* -o -name \*bjtest\* \)
-exec command {} +
FE: find /home/lhelper/peizhi/ -maxdepth 3 -mindepth 2 -name \*.txt -exec rm -rf {} +
--查找包含什么内容的文件
1.
--操作
rm 文件名
rmdir 文件夹名字 rmdir不能删除非空文件夹
rm -rf 非空文件夹名字
cp [选项] 源文件或目录 目的文件或目录
-f 强制覆盖同名文件
-r 按递归方式保留原文件的目录结构
mv oldfiledir newfiledir 重命名
--挂载
fstab文件详解 http://blog.chinaunix.net/u/24390/showart_249260.html
------------------------------------linux常用文件传输方式比较-----------------------------------------------
--资料
http://doc.chinaunix.net/linux/200907/189392.shtml 很详细的比较了几种网络传输文件的方式
--ftp
--rcp(性能和安全性不如scp, 所以不如用scp)
--scp
例子:
scp -p -P 2008 lhelper@192.168.7.29:/home/lhelper/peizhi/landsearch.soufun.com.sh /home/peizhi/rsync/
其中-p是保留文件属性
生成公钥不输入密码(看网页)
--wget
例子:
wget -r -np -p -k http://www.baidu.com
公司例子:
wget -O act.txt http://localhost:9995/admin?act=reload&path=..
参数:
1. -np 不进行上层目录搜索什么意思?
2. -k 是绝对链接变成相对链接什么意思?
3. -m 在下载的文件建立起一个镜像是什么意思?
4. -p 下载所有图片
--rsync
http://www.ibm.com/developerworks/cn/aix/library/au-rsyncfamily/ (IBM权威而又详细的解释)
http://kejun.iteye.com/blog/546578 (rsync参数详解)
http://home.phpchina.com/space.php?uid=417&do=blog&id=37119 (很好很有条理的rsync讲解)
IBM网站例子:
rsync --zae "ssh" --delete --progress --exclude "*bak" --exclude "~*" \
/path/* myserver://path/*
公司例子
rsync -Warv --delete --progress rsync://192.168.7.17/indices/newhouse-test/index/ ${idx_dir}/rsync/
重启服务:
rsync --config=/etc/rsyncd.conf --port=31777 --daemon
注意:
1. -a(archive) 表示很多选项的组合(详情见上网页)
2. 被同步的的目录最好加*
3. -a包括-link表示拷贝文件夹下links和他所指向的文件
4. -e "ssh"表示强行使用ssh协议传输,还可以指定相应端口
问题:
1. 网站例子和公司例子中的rsync://...怎么配置的,怎么指定同步不同的机器?
--------------------------------------------用户和权限管理-----------------------------------
--如果用户名密码忘了怎么办
1.非root用户
2.root用户
-在启动的时候按 "e" 进入编辑模式
-选中第二行然后按 "e"
修改:kernel /vmlinuz-2.4.20-8 ro root=LABEL=/
改为:kernel /vmlinuz-2.4.20-8 linux single ro root=LABEL=/
-进入到单用户之后使用: passwd 修改root用户的密码
passwd 用户名 修改其他用户密码
--查看linux下面的用户和组
http://www.jb51.net/LINUXjishu/19947.html 一些命令的介绍
http://www.360doc.com/content/07/0822/16/9144_688573.shtml 用户管理(通俗而且全面的介绍)
用户:
id 用户名 显示用户信息
id root
uid=0(root) gid=0(root) s=0(root),1(bin),2(daemon),3(sys),4(adm),6(disk),10(wheel)
显示它属于的组
who -i (显示登陆的用户)
用户 终端 登陆时间 用户不活动时间 PID Comment
root tty1 Jun 11 10:53 . 1781
root pts/0 Jun 11 10:54 . 2043 (localhost)
w (显示当前登陆的用户)
USER TTY FROM LOGIN@ IDLE JCPU PCPU WHAT
root tty1 - 10:53am 4:01 0.22s 0.22s -bash
root pts/0 localhost 10:54am 0.00s 1.88s 0.00s w
usermod 修改用户信息
http://www.lupaworld.com/action_viewstutorial_itemid_7753.html 详细介绍
usermod -u UID [-g 修改组] [-G 增加组: 组1,组2] 用户名
useradd 添加用户
useradd chenchao 默认是添加一个用户和一个陈超组
useradd -C 用户描述 -d 用户目录 -g 组 -G 新加组1,新加组2 -s /bin/bash 用户名
-n 取消建立以用户名称为名的群组.
-r 建立系统帐号
-e<有效期限> 指定帐号的有效期限
-f<缓冲天数> 密码过期后多少天关闭账号
(问题: -s 指定用户登陆后使用的shell什么意思?)
userdel 删除用户
userdel -r 账号 -r 表示删除用户关联的文件
chown 改变文件用户属性 (用户必须存在于/etc/passwd中)
-R 递归改变
组:
http://www.tetx.com/program/htm/tetx/blog/view/blog_id/1163440145/index.htm 用户组管理命令
groupadd <组名> 增加组
groupdel <组名> 删除组
gpasswd -A <用户名> <组名> 定义一个组管理员
--以上需要系统管理员的身份
gpasswd <组名> 设置组密码
gpasswd -r <组名> 取消组密码 (取消组密码之后,任何其他组的成员不能切换如该组)
gpasswd -a <用户名> <组名> 添加一个组成员
gpasswd -d <用户名> <组名> 删除一个组成员
组密码:
一个用户,登陆之后,他有它默认登陆的一个组,一个用户可以属于多个组
他可以在他属于的组之键用newgrp进行切换,但是如果要切换到不属于他的
组的时候,如果那个组没有密码,那么他永远也切换不了,只有设着了密码
的组他才可以切换!
怎么查看组设置了密码与否?
/etc/gshaow 第二个字段如果不是!或者x等字符,是一串md5编码就表示这个
组设置了密码
chgrp 改变文件的组属性 (组用户必须存在于/etc/group中)
--UID和GID和SUID和SGID和sticky bit
资料:
http://www.linuxeden.com/html/unix/20071031/36892.html 全面的解释
suid-sgid:
首先,一个用户在运行某个程序的时候,必定开启一个进程,那么这个进程会有4个id
uid,gid,effect-id,effect-gid
这个进程在访问一些文件的时候,这些文件会看这个进程的effect-id和effect-gid,
决定这个文件是否可以被访问如:
-rwxrwxr-x 4 peizhi peizhi 4096 5月 21 15:49 run.txt
如果进程的 e-id是 peizhi 或者 e-gid 是peizhi
才可以写入这个文件
一般的命令如:
-rwxr-xr-x 1 root root 149484 2003-01-25 tar
suid和sgid没有设置,那么一个普通用户在执行tar命令的时候,开启的进程的
e-id=peizhi, e-gid=peizhi
但是如果如:
-rwsr-xr-x 1 root root 28628 2003-01-25 /bin/ping
设置了suid,那么普通用户在执行ping命令的时候,他的
e-id=root,e-gid=peizhi
ping命令在执行的时候会访问一些文件,这些文件普通用户是没有访问权限的,
所以如果把ping命令的suid位去掉
chmod -u-s /bin/ping
ping命令就执行不成功.
sticky位:
如果文件夹和文件被设置了这个位,那么除了文件的属主和属组其他用户无法删除它
--设置sudo
--acl
1. http://www.yuanma.org/data/2007/0718/article_2739.htm (全面通俗的介绍)
2. http://www.ibm.com/developerworks/cn/linux/l-acl/index.html (操作指南)
概述:
1. 传统的UGO权限管理模式的弊端
用户 用户所在组 其他用户
Group1:
A B C
Group2:
D E F
Group3:
G H I
-rwxrw-r-- test.sh A Group1
很明显,要设置B和C分别对test.sh有不同的权限,用传统的UGO权限管理模式无法做到
要对Group2和Group3对test.sh设置不同的权限无法实现
当然可以通过 chmod 和 chown 结合 sudo 临时改变文件的权限和所有者来达到灵活变更
权限来执行test.sh的目的,但是这样还是不太灵活,因为凡是设置了sudo的用户他的权限
相当于root用户一样,权限过大
2. ACL的好处
ACL可以更加细致的控制权限,可以针对每个用户和每个组控制权限
使用:
1. 挂载acl
2. 命令
问题:
1. dd if=/dev/zero of=/opt/testptn count=512
从标准输入或文件中读取数据,依指定的格式转换数据,在输出到文件设备和标准输出
其中/dev/zero是什么意思?
2. 什么是linux中的loop设备
3. 怎么查看文件系统有没有支持acl
--------------------------------------------安装程序----------------------------------------------------------------------
--安装文件
由于Linux有很多的版本,所以提供一个可执行文件的话,要提供多个版本的执行文件
所以,linux提供了源代码安装方式
--tar(打包程序)
(http://linux.chinaunix.net/techdoc/system/2007/04/09/954764.shtml
http://tech.sina.com.cn/c/4082.html)
1. 打包:
tar是一个打包程序,它能将多个文件打成一个包,同时也能将打包的程序还原
tar -cvf all.tar *.jpg // 把当前目录下所有的.jpg结尾的文件打成名为all.tar的文件
(注意:不管是打包还是解包 f 表示指定的文件,所有这个参数必不可少)
-c 创建的打包文件的姓名
-v 显示详细信息 (一般都带上)
2. 压缩:
tar程序打包之后能够调用linux下面的压缩命令,进行压缩程序
压缩分为三类
1. gzip gunzip *.gz, *.tar.gz, *.tgz
tar -czvf all.tar.gz *.jpj
tar -xzpvf all.tar.gz p表示还原文件原来的权限
2. bzip2 bunzip2 *.bz2, *.tar.bz2,
tar -cjvf all.tar.gz *.jpj
tar -xjpvf all.tar.gz p表示还原文件原来的权限
3. compress uncompress *.Z, *.tar.Z
tar -cZvf all.tar.gz *.jpj
tar -xZpvf all.tar.gz p表示还原文件原来的权限
4. zip文件
zip all.zip *.jpg
unzip all.zip
--bin文件安装
--rpm安装
--make命令
--------------------------------------------磁盘管理和维护--------------------------------------------------------------------
--fdisk
--
--------------------------------------------系统设置和管理---------------------------------------------------------------------
--
--------------------------------------------Linux进程---------------------------------------------------------------------------
--linux父子进程原理
资料:
http://www.boluor.com/summary-of-fork-in-linux.html
问题:
1. linux的进程控制块-PCB怎么管理进程?
2.
--linux进程和线程的区别
http://www.ibm.com/developerworks/cn/linux/l-threading.html (未读)
http://dev.firnow.com/course/6_system/linux/Linuxjs/2007930/75470.html (未读)
http://www.cublog.cn/u2/68846/showart_1077115.html (未读)
--进程分类和作用
--subshell
--kill命令
http://hi.baidu.com/gowiththewind1/blog/item/0eae18d98c7b632910df9b49.html kill命令详解
http://joancruise.blog.hexun.com/35791692_d.html linux信号(未读!)
--查看进程情况
例如: 如果要查看监听4140端口的进程的信息那么
ps(process status) -p 4140 -p <程序识别码>
--top命令详解
http://blog.csdn.net/sanshiqiduer/archive/2007/12/13/1933625.aspx top的各个参数对照
PID USER PR NI VIRT RES SHR S %CPU %MEM TIME+ COMMAND
29372 lhelper 15 0 12740 1136 828 R 249.3 0.0 0:01.06 top
22019 lhelper 15 0 90908 1920 1080 S 0.0 0.0 0:00.21 sshd
22043 lhelper 15 0 53860 2100 1524 S 0.0 0.0 0:00.00 sftp-server
23389 lhelper 15 0 90908 1780 1016 S 0.0 0.0 0:00.36 sshd
23390 lhelper 15 0 68332 1732 1272 S 0.0 0.0 0:00.14 bash
24591 lhelper 18 0 65984 1184 980 S 0.0 0.0 0:00.00 sh
24594 lhelper 21 0 4585m 4.0g 8984 S 0.0 34.0 142:45.07 java
字段含义
PID 进程id
user 用户名
PR 优先级
NI
VIRT 占内存总量
RES 占物理内存总量 = (CODE + S)
SHR 共享内存量?
r CODE 可执行代码占用的物理内存大小,单位kb ?
s DATA 可执行代码以外的部分(数据段+栈)占用的物理内存大小,单位kb ?
S 进程状态 D=不可中断的睡眠状态 R=运行 S=睡眠 T=跟踪/停止 Z=僵尸进程
更改显示内容
f 显示和隐藏列
o 改变各个列显示的顺序
参数说明
-p 监控进程id
-i 不显示闲置进程和僵死进程
-c 显示整个命令行,而不是显示命令名
交互模式
h 显示帮助命令
k 终止一个进程(默认是发送15信号,如果不能正常结束就使用信号9)
i 忽略闲置和僵死进程
q 退出程序
r 重新安排一个进程的优先级别(系统会提示输入进程的pid和优先级别数字)
S 切换到累计模式?
s 改变两次刷新之间的延迟时间,单位是s
l,m,t 控制上面的5行
c 切换到命令名称和完整名称
M 根据驻留内存(占用的物理内存)大小进行排序
P 根据CPU使用百分比大小进行排序。
T 根据时间/累计时间进行排序。
--------------------------------------------文本过滤---------------------------------------------------------------------------
--grep
注意:
grep的时候尤其是在用正则表示式的时候,原理是以字节的方式去过滤的
也就是说,如果你需要过滤一个中文匹配表达式,那么你得考虑你要过滤的
字符串的编码问题了
例如:
1. 过滤地铁中>=5个字符的地铁记录?
如:
<UnStored2 name="railway">地铁2号线</UnStored2>
这个时候你一定会用
cat ./newhouse_esf.xml | egrep "railway.>.{5,}<"
这个时候你发现过滤出了很多
<UnStored2 name="railway">2号线</UnStored2>
原因是因为
newhouse_esf.xml 采用gbk编码,一个中文字符占两个字节
而grep写的时候,默认都是认为编码都是ASCII编码,所以
2号线 = 1 + 2 + 2 = 5
地铁2号线 = 2 + 2 + 1 + 2 + 2 = 9
所以正确的正则表达式是
cat ./newhouse_esf.xml | egrep "railway.>.{9,}<"
注意:
'+' 和 '?' 这两个正则不适用于grep
2. 过滤中文的问题?
http://www.chedong.com/blog/archives/001261.html
例子:
注意:
grep最好放在前面
grep "..." datafile
不要用
cat datafile | grep "...."
因为这样有些东西可能出不来,如要匹配特殊符号 ' " '的时候
1. 精确匹配48
grep "48\>" data.f 就是48的前后必须是 " " "-"等分隔符 如果 486这样的就匹配不到
2. 匹配重复出现次数
grep ".{5,}" data.f
3. 匹配范围
grep "[a-z]" data.f
4. 或
grep "佩|敏" data.f
5. 空行
grep "^$" data.f
6. 匹配特殊字符
grep '\"' data.f
7. 匹配目录
ll | grep "^d"
8. 匹配非目录
ll | grep "^[^d]"
--awk
资料: 本地的pdf文件
(grade.txt)
yuanpeizhi,20051287,good
zhangchengzhi,20051288,normal
zhaiyandong,20051289,bad
awk -f 'commands'/awk-script-file input-file
-->
awk -F , '{print $1}' ./grade.txt (以","分隔)
-->
awk -F , '{print $1}' ./grade.txt > name.txt (输入到文件)
awk -F , '{print $1}' ./grade.txt | tee name.txt (输入到文件同时打印)
-->(正则)
awk -F , '{if($1~/(^yuan).*/) print $0}' ./grade.txt (如果满足第一个元素以yuan开头, '~'是正则表达式匹配)
yuanpeizhi,20051287,good
-->(变量)
awk -F , 'BEGIN {print "create new domain"} {if($5>0) {all=$0;$6=$5-2; print all","$6}} ' ./grade.txt (新增一列,必须适用变量all)
-->(内置变量)
awk -F , '{print $NF}' ./grade.txt (打印最后一个域, NF表示域数量, $NF表示最后一个域的值)
-->(内置函数)
...
-->
--sed
格式:
命令行 sed [选项] sed命令 输入文件 注:(命令行加命令时,命令要加单引号)
脚本 sed [选项] -f sed脚本 输入文件
选项:
n 不打印(加上这个参数只打印匹配的行)
e 允许多台编辑指令按照顺序执行,如果只有一个可以不加
p 打印编辑行
f 指定sed脚本
sed查询文本:
1. 使用行号
x 行号x
x,y x行-y行
x,y! 不报行x和y行
2. 使用正则表达式
/pattern/ 查询包含模式的行
/pattern/pattern/ 查询包含两个模式的行
3. 综合
/pattern/,x 在1-x行号查询匹配的行 ?(1-x行都打印了)
x,/pattern/ 在给定的行号上查询包含模式的行
sed编辑命令
p 打印匹配行
= 显示文件行号
a\ 在定位行号后附加新文本信息
i\ 在定位行号后插入新文本信息
d 删除定位行
c\ 用新文本替换定位文本
s 使用替换模式替换相应模式
r 从另外一个文件读文本
w 写文本到一个文件
q 第一个模式匹配完成之后退出
l 显示于(八进制ASCII代码控制字符)?等价字符 ?
{} 在定位行执行命令组
n 从另一个文件中读文本下一行,并附加在下一行
g 将模式2粘贴到/pattern n/ ?
y 传送字符 ?
sed元字符
^ 行的开始
$ 行的结束
. 匹配非换行字符
* 匹配零或者多个字符
[] 制定范围内字符[Ss]
[^] 匹配一个不在制定范围内的字符
\(..\) 保存匹配的字符,如s/\(love\)able/\1rs,loveable被替换成lovers
& 保存搜索字符用来替换其他字符,如s/love/**&**/,love这成**love**
\< 锚定单词的开始,如:/\<love/匹配包含以love开头的单词的行
\> 锚定单词的结束,如/love\>/匹配包含以love结尾的单词的行
x\{m,\} 重复字符x,至少m次,如:/o\{5,\}/匹配至少有5个o的行
x\{m,n\} 重复m-n次
例子:
. quote.txt
The honeysuckle band played all night long for only $90.
It was an evening of splendid music and company.
Too bad the disco floor fell through at 23:10.
The local nurse Miss P.Neave was in attendance.
. 显示匹配的第二行
sed -n '2p' quote.txt 如果没有'-n'所有文本打印一遍,到第二行结束,第二行匹配执行p命令,所以第二行打印两遍
. 显示范围
sed -n '1,3p' quote.txt
. 显示pattern匹配
sed -n '/Neave/p' quote.txt
. 行号和查询匹配的pattern用法
sed -n '4,/The/p' quote.txt 如果在该行匹配到pattern就显示该行及以下所有行的,如果没匹配,则显示该行到以下第一个匹配行间所有行
sed -n '/The/,4p' quote.txt ??
. 匹配特殊字符
sed -n '/\$/p' quote.txt
. 显示n到最后一行
sed -n '1,$p' quote.txt $表示最后一行
. 显示匹配行号
sed -e '/music/=' quote.txt -e表示只不显示匹配行而显示行号
. 附加文本, 删除, 插入
附加的文本不能编辑必须在保存后在用另一个sed命令才能编辑
脚本:
append.sed
!#/bin/sed -f
/company/ a\
Then suddely happend\
The second line
命令行
sed '/company/ a\Then suddenly happend\nThe second line' quote.txt
组合命令脚本
./combination_op.sed
#!/bin/sed -f
$ a\
The first append!
$ a\
The second append!
$ i\
The first insert!
$ i\
The second insert!
$ a\
The fourth append!
$ c\
----------------------The old last line----------------------------The first change!
. 替换文本
格式:
sed 's/[old]/[new]/[g|p|w|n]' [FILE]
g 全局替换,默认只替换一行出现的第一个字符
p ??? 效果是被替换的行显示了2次
w 默认是输出到标准输出,w指定要输出的文件(不能指定原来被替换的文件?),写入的是替换的行
保存之前被替换的文本:
sed 's/company/& soufun/p' quote.txt &表示之前被匹配到的字符串
把文件A的内容附加文件B的匹配之后
sed 's/company/r sedex.txt' quote.txt
匹配后退去
sed 's/company/q' quote.txt 首次匹配后退出
引用shell变量
http://findingcc.blog.51cto.com/1045158/234458 sed中引用shell变量要用双引号
例子:
./batch_replace.sh
#!/bin/bash
jobsdir=$1
findpattern=$2
oldpattern=$3
newpattern=$4
if [ -z "${jobsdir}" -o -z "${findpattern}" -o -z "${oldpattern}" -o -z "${newpattern}" ]; then
echo -e "Please input args \"{jobsdir}\" \"{findpattern}\" \"{oldpattern}\" \"{newpattern}\"";
exit 1;
fi
find ${jobsdir} -name "${findpattern}" | while read FILE
do
TEMP=`sed -n "/$oldpattern/p" $FILE`
if [ -n "$TEMP" ]; then
echo -e "$FILE";
cp -pf $FILE $FILE.$$
sed "s/$oldpattern/$newpattern/g" $FILE > $FILE.$$;
mv $FILE.$$ $FILE
chmod 755 $FILE
fi
done
注意:一定要先输出到一个临时文件($FILE.$$),然后在替换现有文件,不知道为什么???
.
参考资料
. 本地pdf
. http://man.lupaworld.com/content/manage/ringkee/sed.htm#id2810450
--------------------------------------------其他----------------------------------------------
--linux下面各个目录和作用
http://blog.chinaunix.net/u1/44388/showart_383339.html
--linux下面的运行级别
http://blog.chinaunix.net/u1/55468/showart_467004.html 没怎么搞清楚
--
date +"%Y-%m-%d %H:%M:%S" 格式化输出时间
date -d '2 day ago' +%F 2010-12-06
shell中的格式
yesterday_resin_format=`date -d '2 day ago' +%F`
ls *.${yesterday_resin_format}
--
du -m/h 文件路劲 查看文件大小以M为单位
du -h --max-depth=1 定义显示的目录层次
--sort排序
http://linux.chinaunix.net/techdoc/system/2008/09/21/1033339.shtml
sort -t ' ' -k1,1r -k2,2nr [文件] 先按照1到1列,再按照2到2列排序按数字倒序排序
-t 分隔符
-k 第几列 到 第几列
-n 按数字排序
-r 倒序
--查看操作系统版本
cat /proc/version
--查看机器配置?
file /bin/ls 查看
--标准输入,输出流
http://www.cnblogs.com/caolisong/archive/2007/04/25/726896.html
Linux每一个进程启动,都会打开三个文件:
标准输入(0),标准输出(1),标准出错处理(2)
系统自定义了三个文件指针
stdin, stdout, stderr
指向
终端输入,终端输出,标准出错输出
所以可以指定,三个指针的指向指定这三个文件的内容的输出路劲
grep 'newhosue' newhouse.xml > /dev/null 2>&1
从右往左执行
1. 2>&1 把标准错误重定向到标准输出
2. 在把grep到标准输出的信息重定向到 /dev/null
--HUP信号和后台运行作业
原因: 在使用ssh连接的时候,相当于开启一个终端的进程
所有在这个终端下面运行的命令,都是终端下面的一
个子进程,如果网络出现故障,终端失去连接这个时
候终端会给服务器发发出一个HUP信号,终止终端进程
下面的所有子进程,如果运行的脚本还没有运行完的话
这个时候就会终端,网页中有几种方法可以避免这种情
况
http://os.51cto.com/art/200912/172706.htm HUP信号概述
http://www.xxlinux.com/linux/article/unix/tigao/2007-10-30/11340.html linux中的各种信号
--如何关掉linux的滴滴声音
资料:
http://www.cpcwedu.com/Linux/jishuyuzixun/jishuziliao/200604/05-8523.html
setterm -bfreq 10
--mail命令
mail -s "subject" -c "$mailCc" "$mailTo" 内容( < 内容文件)
--切换到root用户
sudo vi ./tmp
:sh 就可以切换到root用户了
问题:这么做的原理是什么?
--diff
http://en.wikipedia.org/wiki/Diff 介绍
http://citeseerx.ist.psu.edu/viewdoc/summary?doi=10.1.1.4.6927 algorithms(算法)
--文件系统
--输入输出(echo, read, cat)
http://bbs.chinaunix.net/viewthread.php?tid=444209 概述
echo
http://blog.chinaunix.net/u1/41712/showart_2262654.html
中要是转义字符生效如 "\n, \t"等, 要加 -e 参数
read
http://blog.chinaunix.net/u4/121711/showart_2410671.html
read -d eof -a name
以eof最为结束标志,把输入读入到name这个数组中
问题:
当你输入e的时候,输入自动退出了,怎么把'e'
这个字符读入到数组中呢?
关于文件描述符(fd)的解释
http://blog.csdn.net/doomhuntercj/archive/2007/04/11/1560102.aspx 文件描述符的解释和配置(未看)
系统一开启,默认的打开三个文件stdin, stdout, stderr并赋了三个文件描
述符号0,1,2
exec 3<file 打开一个文件并将文件描述符赋值为3
--exec
http://dev.firnow.com/course/6_system/linux/Linuxjs/20071027/80454.html exec概述
--四则运算
http://wangxiaoyu.blog.51cto.com/922065/197658 linux四则运算
echo "scale=2; (10+(2*3))/4+2.5+3/2" | bc
--expr
查看man expr
# Test the reg match 错误
result=`expr peizhi051287 : '[a-z|A-Z]+[0-9]*'`
echo "result = $result"
# Test the substr function of the expr
substr=`expr substr yuanpeizhigaolin 5 6`
echo "substr = $substr"
# Test the index function of the expr
index=`expr index yuanpeizhi zh`
echo "index = $index"
# Test the length function of the expr
length=`expr length yuanpeizhi`
echo "length = $length"
ARG1=3
ARG2=4
# Test the logical and arithmetic calculus return number
result=`expr $ARG1 + $ARG2`
echo "result = $result"
result=$(expr $ARG1 | $ARG2) 错误
echo "result = $result"
问题:
. 正则表达式的问题 正则表达式匹配不支持 "^" "\w" 好像只支持*?
. 逻辑运算的问题
--lsof<list open file>
概述: 这个命令可以列出所有被打开的文件,同时可以监控端口上运行的程序
可以列出某个用户打开的文件,以及某个文件夹下打开的文件和某个进
程打开的文件(如果要查看某个进程的状况最好还是用ps)
资料:
http://tech.ccidnet.com/art/305/20070829/1194715_1.html 概述
--------------------------------------------问题-----------------------------------------------
1.DHCP服务启动不了
2.NAT方式连接上不了网
3.FTP连接不上
4.
备忘:http://www.microsoft.com/china/cloud/?1300623192
----------------------------------目录----------------------
. 挂载
. 后台服务
. 文件管理和维护
. linux常用文件传输方式比较
. 用户和权限管理
. 安装程序
. 磁盘管理和维护
. 系统设置和管理
. Linux进程
. 文本过滤
. 其他
---------------------------------------------挂载---------------------------------------------
--mount
1. http://www.yuanma.org/data/2006/0730/article_1268.htm (全面的介绍)
--losetup
1.
--mount和losetup的区别
1. http://blog.csdn.net/CrackCell/archive/2008/03/23/2210712.aspx
-------------------------------------------后台服务-------------------------------------------
--重启网络服务
service network restart
问题
1. determining ip information for eth0 failed
解决方案: http://blog.163.com/kammy_87/blog/static/3493394220092254339355/
ifconfig eth0 up
service network start restart不行不知道为什么
--安装dhcp服务
1.查看dhcp是否安装
rpm -qa|grep dhcp -qa 表示查询所有套件然后它的输出作为grep的输入看是否有dhcp
2.如果没有进行安装(这里是关盘安装,如果是虚拟机的话只要是进行虚拟光盘设置就行)
mount /mnt/cdrom
3.然后进入到/mnt/cdrom/REDHAT/RPMS
rpm -ivh rpm -ivh dhcp-3.0pl1-23.i386.rpm
4.redhat没有 /etc/dhcpd.conf这个文件得拷贝一个文件
--启动ftp服务
service vsftpd start
在windows在使用ftp://peizhi:yuanpeizhi@192.168.94.87
--ssh服务
service sshd start
http://www.lupaworld.com/action_viewstutorial_itemid_4319.html ?(不需重新启动改变ssh的监听端口)
--sysv服务和xinetd 服务
xinetd 服务
http://powerclark.iteye.com/blog/527891 什么是xinetd服务
http://wenku.baidu.com/view/cf628b4ae45c3b3567ec8b08.html xinetd配置指南
--怎么在命令行模式和窗口模式之间切换
startx 切换到窗口模式
init 3 切换到命令行模式下
---------------------------------------------文件管理和维护---------------------------------------
--文件系统原理
http://blog.chinaunix.net/u1/45510/showart_357744.html EXT2、EXT3和ReiserFS 结合下面的参考资料看
参考资料
. http://www.freeos.com/articles/3838/ VFS-1
. http://www.freeos.com/articles/3851/ VFS-2
. http://e2fsprogs.sourceforge.net/ext2intro.html ext2
牛人博客:
http://www.cublog.cn/u/12783/showart_402862.html 很全面的博客
--查找文件
1.whereis dhcpd 不支持模糊查询
2.find / -name dhcp 查询根目录下面名称中包含dhcp的文件
格式 find [路劲] -name [正则表达式] [其他参数]
参数
-mtime n n*24小时前修改过的文件
-newer file 比file更新的文件
-nouser
-nogroup
-path pattern
-perm [mode | -mode | /mode]
-type Supported. POSIX specifies ‘b’, ‘c’, ‘d’, ‘l’, ‘p’, ‘f’ , ‘s’
-maxdepth 查询的最大深度
-mindepth 查询的最小深度 (通过这两个参数可以确定一个深度范围)
-not \( expr.... \)
FE: find /home/lhelper/ -maxdepth 3 -mindepth 2 -name \*.sh -not \( -name \*zqy\* -o -name \*bjtest\* \)
-exec command {} +
FE: find /home/lhelper/peizhi/ -maxdepth 3 -mindepth 2 -name \*.txt -exec rm -rf {} +
--查找包含什么内容的文件
1.
--操作
rm 文件名
rmdir 文件夹名字 rmdir不能删除非空文件夹
rm -rf 非空文件夹名字
cp [选项] 源文件或目录 目的文件或目录
-f 强制覆盖同名文件
-r 按递归方式保留原文件的目录结构
mv oldfiledir newfiledir 重命名
--挂载
fstab文件详解 http://blog.chinaunix.net/u/24390/showart_249260.html
------------------------------------linux常用文件传输方式比较-----------------------------------------------
--资料
http://doc.chinaunix.net/linux/200907/189392.shtml 很详细的比较了几种网络传输文件的方式
--ftp
--rcp(性能和安全性不如scp, 所以不如用scp)
--scp
例子:
scp -p -P 2008 lhelper@192.168.7.29:/home/lhelper/peizhi/landsearch.soufun.com.sh /home/peizhi/rsync/
其中-p是保留文件属性
生成公钥不输入密码(看网页)
--wget
例子:
wget -r -np -p -k http://www.baidu.com
公司例子:
wget -O act.txt http://localhost:9995/admin?act=reload&path=..
参数:
1. -np 不进行上层目录搜索什么意思?
2. -k 是绝对链接变成相对链接什么意思?
3. -m 在下载的文件建立起一个镜像是什么意思?
4. -p 下载所有图片
--rsync
http://www.ibm.com/developerworks/cn/aix/library/au-rsyncfamily/ (IBM权威而又详细的解释)
http://kejun.iteye.com/blog/546578 (rsync参数详解)
http://home.phpchina.com/space.php?uid=417&do=blog&id=37119 (很好很有条理的rsync讲解)
IBM网站例子:
rsync --zae "ssh" --delete --progress --exclude "*bak" --exclude "~*" \
/path/* myserver://path/*
公司例子
rsync -Warv --delete --progress rsync://192.168.7.17/indices/newhouse-test/index/ ${idx_dir}/rsync/
重启服务:
rsync --config=/etc/rsyncd.conf --port=31777 --daemon
注意:
1. -a(archive) 表示很多选项的组合(详情见上网页)
2. 被同步的的目录最好加*
3. -a包括-link表示拷贝文件夹下links和他所指向的文件
4. -e "ssh"表示强行使用ssh协议传输,还可以指定相应端口
问题:
1. 网站例子和公司例子中的rsync://...怎么配置的,怎么指定同步不同的机器?
--------------------------------------------用户和权限管理-----------------------------------
--如果用户名密码忘了怎么办
1.非root用户
2.root用户
-在启动的时候按 "e" 进入编辑模式
-选中第二行然后按 "e"
修改:kernel /vmlinuz-2.4.20-8 ro root=LABEL=/
改为:kernel /vmlinuz-2.4.20-8 linux single ro root=LABEL=/
-进入到单用户之后使用: passwd 修改root用户的密码
passwd 用户名 修改其他用户密码
--查看linux下面的用户和组
http://www.jb51.net/LINUXjishu/19947.html 一些命令的介绍
http://www.360doc.com/content/07/0822/16/9144_688573.shtml 用户管理(通俗而且全面的介绍)
用户:
id 用户名 显示用户信息
id root
uid=0(root) gid=0(root) s=0(root),1(bin),2(daemon),3(sys),4(adm),6(disk),10(wheel)
显示它属于的组
who -i (显示登陆的用户)
用户 终端 登陆时间 用户不活动时间 PID Comment
root tty1 Jun 11 10:53 . 1781
root pts/0 Jun 11 10:54 . 2043 (localhost)
w (显示当前登陆的用户)
USER TTY FROM LOGIN@ IDLE JCPU PCPU WHAT
root tty1 - 10:53am 4:01 0.22s 0.22s -bash
root pts/0 localhost 10:54am 0.00s 1.88s 0.00s w
usermod 修改用户信息
http://www.lupaworld.com/action_viewstutorial_itemid_7753.html 详细介绍
usermod -u UID [-g 修改组] [-G 增加组: 组1,组2] 用户名
useradd 添加用户
useradd chenchao 默认是添加一个用户和一个陈超组
useradd -C 用户描述 -d 用户目录 -g 组 -G 新加组1,新加组2 -s /bin/bash 用户名
-n 取消建立以用户名称为名的群组.
-r 建立系统帐号
-e<有效期限> 指定帐号的有效期限
-f<缓冲天数> 密码过期后多少天关闭账号
(问题: -s 指定用户登陆后使用的shell什么意思?)
userdel 删除用户
userdel -r 账号 -r 表示删除用户关联的文件
chown 改变文件用户属性 (用户必须存在于/etc/passwd中)
-R 递归改变
组:
http://www.tetx.com/program/htm/tetx/blog/view/blog_id/1163440145/index.htm 用户组管理命令
groupadd <组名> 增加组
groupdel <组名> 删除组
gpasswd -A <用户名> <组名> 定义一个组管理员
--以上需要系统管理员的身份
gpasswd <组名> 设置组密码
gpasswd -r <组名> 取消组密码 (取消组密码之后,任何其他组的成员不能切换如该组)
gpasswd -a <用户名> <组名> 添加一个组成员
gpasswd -d <用户名> <组名> 删除一个组成员
组密码:
一个用户,登陆之后,他有它默认登陆的一个组,一个用户可以属于多个组
他可以在他属于的组之键用newgrp进行切换,但是如果要切换到不属于他的
组的时候,如果那个组没有密码,那么他永远也切换不了,只有设着了密码
的组他才可以切换!
怎么查看组设置了密码与否?
/etc/gshaow 第二个字段如果不是!或者x等字符,是一串md5编码就表示这个
组设置了密码
chgrp 改变文件的组属性 (组用户必须存在于/etc/group中)
--UID和GID和SUID和SGID和sticky bit
资料:
http://www.linuxeden.com/html/unix/20071031/36892.html 全面的解释
suid-sgid:
首先,一个用户在运行某个程序的时候,必定开启一个进程,那么这个进程会有4个id
uid,gid,effect-id,effect-gid
这个进程在访问一些文件的时候,这些文件会看这个进程的effect-id和effect-gid,
决定这个文件是否可以被访问如:
-rwxrwxr-x 4 peizhi peizhi 4096 5月 21 15:49 run.txt
如果进程的 e-id是 peizhi 或者 e-gid 是peizhi
才可以写入这个文件
一般的命令如:
-rwxr-xr-x 1 root root 149484 2003-01-25 tar
suid和sgid没有设置,那么一个普通用户在执行tar命令的时候,开启的进程的
e-id=peizhi, e-gid=peizhi
但是如果如:
-rwsr-xr-x 1 root root 28628 2003-01-25 /bin/ping
设置了suid,那么普通用户在执行ping命令的时候,他的
e-id=root,e-gid=peizhi
ping命令在执行的时候会访问一些文件,这些文件普通用户是没有访问权限的,
所以如果把ping命令的suid位去掉
chmod -u-s /bin/ping
ping命令就执行不成功.
sticky位:
如果文件夹和文件被设置了这个位,那么除了文件的属主和属组其他用户无法删除它
--设置sudo
--acl
1. http://www.yuanma.org/data/2007/0718/article_2739.htm (全面通俗的介绍)
2. http://www.ibm.com/developerworks/cn/linux/l-acl/index.html (操作指南)
概述:
1. 传统的UGO权限管理模式的弊端
用户 用户所在组 其他用户
Group1:
A B C
Group2:
D E F
Group3:
G H I
-rwxrw-r-- test.sh A Group1
很明显,要设置B和C分别对test.sh有不同的权限,用传统的UGO权限管理模式无法做到
要对Group2和Group3对test.sh设置不同的权限无法实现
当然可以通过 chmod 和 chown 结合 sudo 临时改变文件的权限和所有者来达到灵活变更
权限来执行test.sh的目的,但是这样还是不太灵活,因为凡是设置了sudo的用户他的权限
相当于root用户一样,权限过大
2. ACL的好处
ACL可以更加细致的控制权限,可以针对每个用户和每个组控制权限
使用:
1. 挂载acl
2. 命令
问题:
1. dd if=/dev/zero of=/opt/testptn count=512
从标准输入或文件中读取数据,依指定的格式转换数据,在输出到文件设备和标准输出
其中/dev/zero是什么意思?
2. 什么是linux中的loop设备
3. 怎么查看文件系统有没有支持acl
--------------------------------------------安装程序----------------------------------------------------------------------
--安装文件
由于Linux有很多的版本,所以提供一个可执行文件的话,要提供多个版本的执行文件
所以,linux提供了源代码安装方式
--tar(打包程序)
(http://linux.chinaunix.net/techdoc/system/2007/04/09/954764.shtml
http://tech.sina.com.cn/c/4082.html)
1. 打包:
tar是一个打包程序,它能将多个文件打成一个包,同时也能将打包的程序还原
tar -cvf all.tar *.jpg // 把当前目录下所有的.jpg结尾的文件打成名为all.tar的文件
(注意:不管是打包还是解包 f 表示指定的文件,所有这个参数必不可少)
-c 创建的打包文件的姓名
-v 显示详细信息 (一般都带上)
2. 压缩:
tar程序打包之后能够调用linux下面的压缩命令,进行压缩程序
压缩分为三类
1. gzip gunzip *.gz, *.tar.gz, *.tgz
tar -czvf all.tar.gz *.jpj
tar -xzpvf all.tar.gz p表示还原文件原来的权限
2. bzip2 bunzip2 *.bz2, *.tar.bz2,
tar -cjvf all.tar.gz *.jpj
tar -xjpvf all.tar.gz p表示还原文件原来的权限
3. compress uncompress *.Z, *.tar.Z
tar -cZvf all.tar.gz *.jpj
tar -xZpvf all.tar.gz p表示还原文件原来的权限
4. zip文件
zip all.zip *.jpg
unzip all.zip
--bin文件安装
--rpm安装
--make命令
--------------------------------------------磁盘管理和维护--------------------------------------------------------------------
--fdisk
--
--------------------------------------------系统设置和管理---------------------------------------------------------------------
--
--------------------------------------------Linux进程---------------------------------------------------------------------------
--linux父子进程原理
资料:
http://www.boluor.com/summary-of-fork-in-linux.html
问题:
1. linux的进程控制块-PCB怎么管理进程?
2.
--linux进程和线程的区别
http://www.ibm.com/developerworks/cn/linux/l-threading.html (未读)
http://dev.firnow.com/course/6_system/linux/Linuxjs/2007930/75470.html (未读)
http://www.cublog.cn/u2/68846/showart_1077115.html (未读)
--进程分类和作用
--subshell
--kill命令
http://hi.baidu.com/gowiththewind1/blog/item/0eae18d98c7b632910df9b49.html kill命令详解
http://joancruise.blog.hexun.com/35791692_d.html linux信号(未读!)
--查看进程情况
例如: 如果要查看监听4140端口的进程的信息那么
ps(process status) -p 4140 -p <程序识别码>
--top命令详解
http://blog.csdn.net/sanshiqiduer/archive/2007/12/13/1933625.aspx top的各个参数对照
PID USER PR NI VIRT RES SHR S %CPU %MEM TIME+ COMMAND
29372 lhelper 15 0 12740 1136 828 R 249.3 0.0 0:01.06 top
22019 lhelper 15 0 90908 1920 1080 S 0.0 0.0 0:00.21 sshd
22043 lhelper 15 0 53860 2100 1524 S 0.0 0.0 0:00.00 sftp-server
23389 lhelper 15 0 90908 1780 1016 S 0.0 0.0 0:00.36 sshd
23390 lhelper 15 0 68332 1732 1272 S 0.0 0.0 0:00.14 bash
24591 lhelper 18 0 65984 1184 980 S 0.0 0.0 0:00.00 sh
24594 lhelper 21 0 4585m 4.0g 8984 S 0.0 34.0 142:45.07 java
字段含义
PID 进程id
user 用户名
PR 优先级
NI
VIRT 占内存总量
RES 占物理内存总量 = (CODE + S)
SHR 共享内存量?
r CODE 可执行代码占用的物理内存大小,单位kb ?
s DATA 可执行代码以外的部分(数据段+栈)占用的物理内存大小,单位kb ?
S 进程状态 D=不可中断的睡眠状态 R=运行 S=睡眠 T=跟踪/停止 Z=僵尸进程
更改显示内容
f 显示和隐藏列
o 改变各个列显示的顺序
参数说明
-p 监控进程id
-i 不显示闲置进程和僵死进程
-c 显示整个命令行,而不是显示命令名
交互模式
h 显示帮助命令
k 终止一个进程(默认是发送15信号,如果不能正常结束就使用信号9)
i 忽略闲置和僵死进程
q 退出程序
r 重新安排一个进程的优先级别(系统会提示输入进程的pid和优先级别数字)
S 切换到累计模式?
s 改变两次刷新之间的延迟时间,单位是s
l,m,t 控制上面的5行
c 切换到命令名称和完整名称
M 根据驻留内存(占用的物理内存)大小进行排序
P 根据CPU使用百分比大小进行排序。
T 根据时间/累计时间进行排序。
--------------------------------------------文本过滤---------------------------------------------------------------------------
--grep
注意:
grep的时候尤其是在用正则表示式的时候,原理是以字节的方式去过滤的
也就是说,如果你需要过滤一个中文匹配表达式,那么你得考虑你要过滤的
字符串的编码问题了
例如:
1. 过滤地铁中>=5个字符的地铁记录?
如:
<UnStored2 name="railway">地铁2号线</UnStored2>
这个时候你一定会用
cat ./newhouse_esf.xml | egrep "railway.>.{5,}<"
这个时候你发现过滤出了很多
<UnStored2 name="railway">2号线</UnStored2>
原因是因为
newhouse_esf.xml 采用gbk编码,一个中文字符占两个字节
而grep写的时候,默认都是认为编码都是ASCII编码,所以
2号线 = 1 + 2 + 2 = 5
地铁2号线 = 2 + 2 + 1 + 2 + 2 = 9
所以正确的正则表达式是
cat ./newhouse_esf.xml | egrep "railway.>.{9,}<"
注意:
'+' 和 '?' 这两个正则不适用于grep
2. 过滤中文的问题?
http://www.chedong.com/blog/archives/001261.html
例子:
注意:
grep最好放在前面
grep "..." datafile
不要用
cat datafile | grep "...."
因为这样有些东西可能出不来,如要匹配特殊符号 ' " '的时候
1. 精确匹配48
grep "48\>" data.f 就是48的前后必须是 " " "-"等分隔符 如果 486这样的就匹配不到
2. 匹配重复出现次数
grep ".{5,}" data.f
3. 匹配范围
grep "[a-z]" data.f
4. 或
grep "佩|敏" data.f
5. 空行
grep "^$" data.f
6. 匹配特殊字符
grep '\"' data.f
7. 匹配目录
ll | grep "^d"
8. 匹配非目录
ll | grep "^[^d]"
--awk
资料: 本地的pdf文件
(grade.txt)
yuanpeizhi,20051287,good
zhangchengzhi,20051288,normal
zhaiyandong,20051289,bad
awk -f 'commands'/awk-script-file input-file
-->
awk -F , '{print $1}' ./grade.txt (以","分隔)
-->
awk -F , '{print $1}' ./grade.txt > name.txt (输入到文件)
awk -F , '{print $1}' ./grade.txt | tee name.txt (输入到文件同时打印)
-->(正则)
awk -F , '{if($1~/(^yuan).*/) print $0}' ./grade.txt (如果满足第一个元素以yuan开头, '~'是正则表达式匹配)
yuanpeizhi,20051287,good
-->(变量)
awk -F , 'BEGIN {print "create new domain"} {if($5>0) {all=$0;$6=$5-2; print all","$6}} ' ./grade.txt (新增一列,必须适用变量all)
-->(内置变量)
awk -F , '{print $NF}' ./grade.txt (打印最后一个域, NF表示域数量, $NF表示最后一个域的值)
-->(内置函数)
...
-->
--sed
格式:
命令行 sed [选项] sed命令 输入文件 注:(命令行加命令时,命令要加单引号)
脚本 sed [选项] -f sed脚本 输入文件
选项:
n 不打印(加上这个参数只打印匹配的行)
e 允许多台编辑指令按照顺序执行,如果只有一个可以不加
p 打印编辑行
f 指定sed脚本
sed查询文本:
1. 使用行号
x 行号x
x,y x行-y行
x,y! 不报行x和y行
2. 使用正则表达式
/pattern/ 查询包含模式的行
/pattern/pattern/ 查询包含两个模式的行
3. 综合
/pattern/,x 在1-x行号查询匹配的行 ?(1-x行都打印了)
x,/pattern/ 在给定的行号上查询包含模式的行
sed编辑命令
p 打印匹配行
= 显示文件行号
a\ 在定位行号后附加新文本信息
i\ 在定位行号后插入新文本信息
d 删除定位行
c\ 用新文本替换定位文本
s 使用替换模式替换相应模式
r 从另外一个文件读文本
w 写文本到一个文件
q 第一个模式匹配完成之后退出
l 显示于(八进制ASCII代码控制字符)?等价字符 ?
{} 在定位行执行命令组
n 从另一个文件中读文本下一行,并附加在下一行
g 将模式2粘贴到/pattern n/ ?
y 传送字符 ?
sed元字符
^ 行的开始
$ 行的结束
. 匹配非换行字符
* 匹配零或者多个字符
[] 制定范围内字符[Ss]
[^] 匹配一个不在制定范围内的字符
\(..\) 保存匹配的字符,如s/\(love\)able/\1rs,loveable被替换成lovers
& 保存搜索字符用来替换其他字符,如s/love/**&**/,love这成**love**
\< 锚定单词的开始,如:/\<love/匹配包含以love开头的单词的行
\> 锚定单词的结束,如/love\>/匹配包含以love结尾的单词的行
x\{m,\} 重复字符x,至少m次,如:/o\{5,\}/匹配至少有5个o的行
x\{m,n\} 重复m-n次
例子:
. quote.txt
The honeysuckle band played all night long for only $90.
It was an evening of splendid music and company.
Too bad the disco floor fell through at 23:10.
The local nurse Miss P.Neave was in attendance.
. 显示匹配的第二行
sed -n '2p' quote.txt 如果没有'-n'所有文本打印一遍,到第二行结束,第二行匹配执行p命令,所以第二行打印两遍
. 显示范围
sed -n '1,3p' quote.txt
. 显示pattern匹配
sed -n '/Neave/p' quote.txt
. 行号和查询匹配的pattern用法
sed -n '4,/The/p' quote.txt 如果在该行匹配到pattern就显示该行及以下所有行的,如果没匹配,则显示该行到以下第一个匹配行间所有行
sed -n '/The/,4p' quote.txt ??
. 匹配特殊字符
sed -n '/\$/p' quote.txt
. 显示n到最后一行
sed -n '1,$p' quote.txt $表示最后一行
. 显示匹配行号
sed -e '/music/=' quote.txt -e表示只不显示匹配行而显示行号
. 附加文本, 删除, 插入
附加的文本不能编辑必须在保存后在用另一个sed命令才能编辑
脚本:
append.sed
!#/bin/sed -f
/company/ a\
Then suddely happend\
The second line
命令行
sed '/company/ a\Then suddenly happend\nThe second line' quote.txt
组合命令脚本
./combination_op.sed
#!/bin/sed -f
$ a\
The first append!
$ a\
The second append!
$ i\
The first insert!
$ i\
The second insert!
$ a\
The fourth append!
$ c\
----------------------The old last line----------------------------The first change!
. 替换文本
格式:
sed 's/[old]/[new]/[g|p|w|n]' [FILE]
g 全局替换,默认只替换一行出现的第一个字符
p ??? 效果是被替换的行显示了2次
w 默认是输出到标准输出,w指定要输出的文件(不能指定原来被替换的文件?),写入的是替换的行
保存之前被替换的文本:
sed 's/company/& soufun/p' quote.txt &表示之前被匹配到的字符串
把文件A的内容附加文件B的匹配之后
sed 's/company/r sedex.txt' quote.txt
匹配后退去
sed 's/company/q' quote.txt 首次匹配后退出
引用shell变量
http://findingcc.blog.51cto.com/1045158/234458 sed中引用shell变量要用双引号
例子:
./batch_replace.sh
#!/bin/bash
jobsdir=$1
findpattern=$2
oldpattern=$3
newpattern=$4
if [ -z "${jobsdir}" -o -z "${findpattern}" -o -z "${oldpattern}" -o -z "${newpattern}" ]; then
echo -e "Please input args \"{jobsdir}\" \"{findpattern}\" \"{oldpattern}\" \"{newpattern}\"";
exit 1;
fi
find ${jobsdir} -name "${findpattern}" | while read FILE
do
TEMP=`sed -n "/$oldpattern/p" $FILE`
if [ -n "$TEMP" ]; then
echo -e "$FILE";
cp -pf $FILE $FILE.$$
sed "s/$oldpattern/$newpattern/g" $FILE > $FILE.$$;
mv $FILE.$$ $FILE
chmod 755 $FILE
fi
done
注意:一定要先输出到一个临时文件($FILE.$$),然后在替换现有文件,不知道为什么???
.
参考资料
. 本地pdf
. http://man.lupaworld.com/content/manage/ringkee/sed.htm#id2810450
--------------------------------------------其他----------------------------------------------
--linux下面各个目录和作用
http://blog.chinaunix.net/u1/44388/showart_383339.html
--linux下面的运行级别
http://blog.chinaunix.net/u1/55468/showart_467004.html 没怎么搞清楚
--
date +"%Y-%m-%d %H:%M:%S" 格式化输出时间
date -d '2 day ago' +%F 2010-12-06
shell中的格式
yesterday_resin_format=`date -d '2 day ago' +%F`
ls *.${yesterday_resin_format}
--
du -m/h 文件路劲 查看文件大小以M为单位
du -h --max-depth=1 定义显示的目录层次
--sort排序
http://linux.chinaunix.net/techdoc/system/2008/09/21/1033339.shtml
sort -t ' ' -k1,1r -k2,2nr [文件] 先按照1到1列,再按照2到2列排序按数字倒序排序
-t 分隔符
-k 第几列 到 第几列
-n 按数字排序
-r 倒序
--查看操作系统版本
cat /proc/version
--查看机器配置?
file /bin/ls 查看
--标准输入,输出流
http://www.cnblogs.com/caolisong/archive/2007/04/25/726896.html
Linux每一个进程启动,都会打开三个文件:
标准输入(0),标准输出(1),标准出错处理(2)
系统自定义了三个文件指针
stdin, stdout, stderr
指向
终端输入,终端输出,标准出错输出
所以可以指定,三个指针的指向指定这三个文件的内容的输出路劲
grep 'newhosue' newhouse.xml > /dev/null 2>&1
从右往左执行
1. 2>&1 把标准错误重定向到标准输出
2. 在把grep到标准输出的信息重定向到 /dev/null
--HUP信号和后台运行作业
原因: 在使用ssh连接的时候,相当于开启一个终端的进程
所有在这个终端下面运行的命令,都是终端下面的一
个子进程,如果网络出现故障,终端失去连接这个时
候终端会给服务器发发出一个HUP信号,终止终端进程
下面的所有子进程,如果运行的脚本还没有运行完的话
这个时候就会终端,网页中有几种方法可以避免这种情
况
http://os.51cto.com/art/200912/172706.htm HUP信号概述
http://www.xxlinux.com/linux/article/unix/tigao/2007-10-30/11340.html linux中的各种信号
--如何关掉linux的滴滴声音
资料:
http://www.cpcwedu.com/Linux/jishuyuzixun/jishuziliao/200604/05-8523.html
setterm -bfreq 10
--mail命令
mail -s "subject" -c "$mailCc" "$mailTo" 内容( < 内容文件)
--切换到root用户
sudo vi ./tmp
:sh 就可以切换到root用户了
问题:这么做的原理是什么?
--diff
http://en.wikipedia.org/wiki/Diff 介绍
http://citeseerx.ist.psu.edu/viewdoc/summary?doi=10.1.1.4.6927 algorithms(算法)
--文件系统
--输入输出(echo, read, cat)
http://bbs.chinaunix.net/viewthread.php?tid=444209 概述
echo
http://blog.chinaunix.net/u1/41712/showart_2262654.html
中要是转义字符生效如 "\n, \t"等, 要加 -e 参数
read
http://blog.chinaunix.net/u4/121711/showart_2410671.html
read -d eof -a name
以eof最为结束标志,把输入读入到name这个数组中
问题:
当你输入e的时候,输入自动退出了,怎么把'e'
这个字符读入到数组中呢?
关于文件描述符(fd)的解释
http://blog.csdn.net/doomhuntercj/archive/2007/04/11/1560102.aspx 文件描述符的解释和配置(未看)
系统一开启,默认的打开三个文件stdin, stdout, stderr并赋了三个文件描
述符号0,1,2
exec 3<file 打开一个文件并将文件描述符赋值为3
--exec
http://dev.firnow.com/course/6_system/linux/Linuxjs/20071027/80454.html exec概述
--四则运算
http://wangxiaoyu.blog.51cto.com/922065/197658 linux四则运算
echo "scale=2; (10+(2*3))/4+2.5+3/2" | bc
--expr
查看man expr
# Test the reg match 错误
result=`expr peizhi051287 : '[a-z|A-Z]+[0-9]*'`
echo "result = $result"
# Test the substr function of the expr
substr=`expr substr yuanpeizhigaolin 5 6`
echo "substr = $substr"
# Test the index function of the expr
index=`expr index yuanpeizhi zh`
echo "index = $index"
# Test the length function of the expr
length=`expr length yuanpeizhi`
echo "length = $length"
ARG1=3
ARG2=4
# Test the logical and arithmetic calculus return number
result=`expr $ARG1 + $ARG2`
echo "result = $result"
result=$(expr $ARG1 | $ARG2) 错误
echo "result = $result"
问题:
. 正则表达式的问题 正则表达式匹配不支持 "^" "\w" 好像只支持*?
. 逻辑运算的问题
--lsof<list open file>
概述: 这个命令可以列出所有被打开的文件,同时可以监控端口上运行的程序
可以列出某个用户打开的文件,以及某个文件夹下打开的文件和某个进
程打开的文件(如果要查看某个进程的状况最好还是用ps)
资料:
http://tech.ccidnet.com/art/305/20070829/1194715_1.html 概述
--------------------------------------------问题-----------------------------------------------
1.DHCP服务启动不了
2.NAT方式连接上不了网
3.FTP连接不上
4.
- ACP虚拟化.rar (79.5 KB)
- 下载次数: 3
- darronschall-FVNC-a8a05ca.zip (176 KB)
- 下载次数: 2
发表评论
-
VPN索引
2011-03-20 21:42 1103背景:新版云计算产品需要提供VPN的功能,因此在此添个标 ... -
smb-cifs-nfs-samba认识
2011-03-14 23:07 3459最近因为工作的关系使用到了NFS,顺带地了解了一下sm ... -
gnome-terminal学习笔记
2011-01-26 22:01 873gnome-terminal 待续... ... ... -
arp攻击方式
2011-01-26 21:55 810电脑遭受Arp攻击,使用Arp命令绑定IP和Mac地址——拓展 ... -
Linux常见异常集
2010-12-12 09:28 641一、 编码问题(一般因 ... -
工作不良表现实录
2010-12-05 22:48 877承接Lamp篇 1、个人工 ... -
Linux内核学习建议
2010-12-02 21:52 1123经典书籍 待到 ... -
Linux常用测试指令
2010-12-02 21:50 958掌握一些常用测试命令无疑能加速我们诊断问题的速度,从而更 ... -
Windows 2003下安装SSH Server
2010-12-01 22:22 3983之前制作Windows镜像时忘记安装SSH Server ... -
Linux常用命令
2010-11-29 22:36 803Linux的命令网上一搜就是一大堆,我在此记录一下自己最 ... -
Rhel下安装httpd+php+mysql+phpmyadmin
2010-11-29 20:39 2964话说这个安装真是把我折磨得够呛,特在此总结整理,希望能够 ... -
常用排序
2010-11-18 16:50 877package sort; import java.ut ... -
Rhel下安装MySql
2010-11-10 18:31 865参考网址: http://wenku.baidu.com ... -
远程登陆vncserver在redhat下详细配置
2010-11-10 18:29 1931+++++++++++参考网址+++++++++++ h ... -
Linux Ready Go
2010-10-31 21:12 944一、 Linux学习路线 1、 目标 了解Linux 的基 ... -
Linux目录结构
2010-10-27 23:18 656LINUX目录结构 /bin B ... -
Linux的一些特别命令
2010-10-27 23:03 948———————————————特别的Linux命令—————— ... -
编程之美阅读笔记
2010-08-23 22:25 557第一章 游戏之乐 1.1 让CPU占用率曲线听你指挥 ...
相关推荐
通过深入学习并实践这些笔记中的内容,读者不仅可以掌握Linux的基本操作,还能对系统管理和维护有深入的理解。此外,持续跟踪Linux社区的动态,了解新版本的特性和改进,也是提升Linux技能的重要途径。这份笔记提供...
《马哥的Linux学习笔记》是一份针对初学者和进阶者精心编撰的Linux教程,旨在帮助读者全面掌握Linux操作系统的核心概念、命令行操作以及系统管理技能。这份笔记以清晰明了的语言和实例解析了Linux系统的各个方面,是...
Linux操作系统作为IT行业的重要组成部分,一直以来都是开发者和系统管理员必须掌握的技能之一。本篇课堂笔记主要从Java全栈开发的角度出发,针对Linux的学习和应用进行了深入讲解。 首先,课堂笔记强调了学习Linux...
《Linux学习笔记》这份资料非常全面且详细,从 Linux 常用命令到 Linux 常用操作,再到网络管理、性能优化,几乎覆盖了 Linux 基础学习的方方面面,非常适合初学者入门!这里只是对于常用命令进行了整理,希望可以...
Linux笔记——vim常用操作及扩展补充[手册] Linux笔记——linux常用命令集合 Linux笔记——命令:awk Linux笔记——命令:sed Linux笔记——命令:grep Linux笔记——命令:find Linux笔记——命令:Sort,uniq,join,...
【linux学习笔记--17】POSIX IPC——消息队列.doc 【linux学习笔记--18】POSIX IPC——信号量.doc 【linux学习笔记--19】POSIX IPC——共享内存.doc ...【linux学习笔记-6】文件IO操作--读写、重定向等.
以上就是“Linux笔记笔记笔记笔记”所涵盖的主要知识点,这些内容覆盖了Linux系统的基本操作、网络编程、脚本编写、版本控制等多个方面,对于提升Linux技能和解决实际问题大有裨益。学习并熟练掌握这些知识,能够...
1. **Linux基础知识**:笔记可能从Linux的历史、发展和核心概念开始,讲解操作系统的基本原理,如进程管理、内存管理、文件系统等。 2. **命令行操作**:Linux的强大在于其命令行工具,笔记可能会详细介绍各种常用...
### Linux操作系统笔记知识点详解 #### 一、Vim/Vi 文本编辑器 - **简介**: Vim 是 Vi 的改进版,两者都是 Linux 中非常强大的文本编辑器。它们可以帮助用户高效地编写、修改文本文件。 - **工作模式**: - **命令...
### Linux学习笔记—01 Linux操作基础 #### 1. Linux 基础命令与用法 在Linux操作系统中,掌握一系列的基础命令是非常重要的。这些命令可以帮助用户进行各种日常操作,比如文件管理、目录切换、文件查看等。下面将...
本文档主要记录了 Linux 操作系统的学习笔记,涵盖了 Basic 的编程、VI 编辑器的使用、GCC 编译器的应用、GDB 调试工具的使用等方面的知识点。 一、编程基础 * 了解 C 语言的基本语法,例如变量声明、数据类型、...
这份“Linux牛人笔记”正是为了帮助对Linux操作系统和嵌入式技术感兴趣的爱好者提供深入学习的资源。笔记涵盖了Linux内核、编程代码以及系统管理等多个方面的内容,适合各个层次的学习者,无论你是初学者还是资深...
Linux学习笔记PDF文档.pdf是一个详尽的资源,旨在帮助初学者和有经验的用户深入理解Linux操作系统。Linux作为开源的类Unix系统,以其稳定、安全和可定制性在全球范围内广泛应用于服务器、桌面环境以及嵌入式设备。这...
【linux学习笔记-3】文件操作(stat,chmod,umask) 【linux学习笔记-4】进程扇和进程链 【linux学习笔记-5】编写自己的ls命令 【linux学习笔记-6】文件IO操作--读写、重定向等 【linux学习笔记-7】用户标识UID与有效...
嵌入式Linux是一种将Linux操作系统应用到嵌入式设备中的技术,它在现代电子设备,如智能手机、智能家居、工业控制系统等中广泛应用。本入门笔记旨在为初学者提供一个清晰的学习路径,逐步掌握嵌入式Linux的基本知识...
这份"Linux基础笔记总结"是初学者和进阶者了解Linux系统操作的宝贵资源。笔记涵盖了Linux的基础知识,包括命令行界面下的常用命令,系统配置,以及通过FTP进行文件传输等方面。 一、Linux常用命令详解 1. **ls**:...
总的来说,这份“Linux学习笔记-很不错适合linux入门者”涵盖了Linux基础的方方面面,无论是对操作系统有兴趣的个人,还是准备从事系统管理员、运维工程师、开发人员等职业的学习者,都能从中受益匪浅。通过系统学习...