标签：统计   editor   多点   开头   cti   mis   特殊   目录名   water   

处理文本的工具sed

Stream EDitor, 行编辑器

sed是一种流编辑器，它一次处理一行内容。处理时，把当前处理的行存储在临时缓冲区中，称为“模式空间”（pattern space），接着用sed命令处理缓冲区中的内容，处理完成后，把缓冲区的内容送往屏幕。然后读入下行，执行下一个循环。如果没有使诸如‘D’的特殊命令，那会在两个循环之间清空模式空间，但不会清空保留空间。这样不断重复，直到文件末尾。文件内容并没有改变，除非你使用重定向存储输出。

功能：主要用来自动编辑一个或多个文件,简化对文件的反复操作,编写转换程序等

sed工具

用法：

sed [option]... ‘script‘ inputfile...

常用选项：

-n 不输出模式空间内容到屏幕，即不自动打印

-e 多点编辑

-f /PATH/SCRIPT_FILE 从指定文件中读取编辑脚本

-r 支持使用扩展正则表达式

-i.bak 备份文件并原处编辑

script:
‘地址命令

地址定界：

(1) 不给地址：对全文进行处理

(2) 单地址：
“#: 指定的行，$：最后一行

/pattern/：被此处模式所能够匹配到的每一行

(3) 地址范围：

“#,#”

“#,+#“

/pat1/,/pat2/

“#,/pat1/”

(4) ~：步进

1~2 奇数行

2~2 偶数行

编辑命令：

d 删除模式空间匹配的行，并立即启用下一轮循环

p 打印当前模式空间内容，追加到默认输出之后

a []text 在指定行后面追加文本，支持使用\n实现多行追加

i []text 在行前面插入文本

c []text 替换行为单行或多行文本

w /path/file 保存模式匹配的行至指定文件

r /path/file 读取指定文件的文本至模式空间中匹配到的行后

= 为模式空间中的行打印行号

! 模式空间中匹配行取反处理

s/// 查找替换,支持使用其它分隔符，s@@@，s###

替换标记：

g 行内全局替换

p 显示替换成功的行

w /PATH/FILE 将替换成功的行保存至文件中

二、实验

1、删除centos7系统/etc/grub2.cfg文件中所有以空白开头的行行首的空白字符

sed -nr "s/^[[:space:]]//p" /etc/grub2.cfg 
-r  支持扩展正则表达式
s///  替换

2、删除/etc/fstab文件中所有以#开头，后面至少跟一个空白字符的行的行首的#和空白字符

sed -r ‘/^#[[:space:]]+/d‘ /etc/fstab

3、在centos6系统/root/install.log每一行行首增加#号

sed ‘s/^/#/‘ /root/install.log

4、在/etc/fstab文件中不以#开头的行的行首增加#号

sed ‘s@^[^#]@#&@‘ /etc/fstab
s//&/  后项引用

5、处理/etc/fstab路径,使用sed命令取出其目录名和基名

echo "/etc/sysconfig/network-scripts/"|sed -r ‘s@(^/.*/)([^/]+/?)@\2@‘取基名 echo "/etc/sysconfig/network-scripts/"|sed -r ‘s@(^/.*/)([^/]+/?)@\1@‘取目录名 
s/()()/\1/ 后项引用 
s/()()/\2/

6、利用sed 取出ifconfig命令中本机的IPv4地址(不同版本名称不同，写路径时注意.)

ifconfig|sed -n ‘2p‘|sed ‘s/^.*r://‘ |sed ‘s/ .*//‘ 
ifconfig|sed -n ‘2p‘|sed ‘s/^[[:space:]].*r://‘|sed ‘s/[[:space:]].*//‘ 
ifconfig|sed -n ‘2p‘|sed -e ‘s/^[[:space:]].*r://‘ -e ‘s/[[:space:]].*//‘ 
ifconfig|sed -n -e ‘2s/^[[:space:]].*r://‘ -e ‘2s/[[:space:]].*//p‘

ifconfig ens33|sed -n ‘2p‘|sed -r ‘s@^[[:space:]].*t[[:space:]]@@‘ 取broadcast地址 
ifconfig ens33|sed -n ‘2p‘|sed -r ‘s@^[[:space:]].*inet[[:space:]]@@‘|sed -r ‘s@[[:space:]].*@@‘ 
ifconfig ens33|sed -n ‘2p‘|sed -r -e ‘s@^[[:space:]].*inet[[:space:]]@@‘ -e ‘s@[[:space:]].*@@‘ 
ifconfig|sed -n ‘2p‘|sed -r ‘s@.*inet[[:space:]](.*)[[:space:]]net.*@\1@‘

7、统计centos安装光盘中Package目录下的所有rpm文件的以.分隔倒数第二个字段的重复次数(不同版本路径不同，写路径时注意.)

ls /misc/cd/Packages/|grep "rpm$"|sed -r ‘s@.*\.(.*)\.rpm@\1@‘|sort|uniq -c 
ls /misc/cd/Packages/|grep "rpm$"|sed -e ‘s@.rpm$@@‘ -e ‘s@.*\.@@‘|sort|uniq -c 
ls /misc/cd/Packages/|rev|cut -d. -f2|sort -nr|rev|uniq -c|sort -nr|head -n3

8、统计/etc/init.d/functions文件中每个单词的出现次数，并排序（用grep和sed两种方法分别实现）

cat /etc/init.d/functions|tr -c ‘[:alpha:]‘ ‘\n‘|tr -s ‘\n‘|sort|uniq -c|sort -nr

grep -Eo "\<[[:alpha:]_]+[[:alnum:]]+\>" /etc/init.d/functions|sort|uniq -c|sort -n 

sed -nre ‘s/[^[:alnum:]]+/\n/g‘ -e ‘s/[0-9]/\n/gp‘ /etc/init.d/functions|sort|uniq -c|sort -n 

9、将文本文件的n和n+1行合并为一行，n为奇数行

nl /etc/passwd|sed -n ‘N;s/\n//p‘

END

sed简单应用

标签：统计   editor   多点   开头   cti   mis   特殊   目录名   water   

原文地址：http://blog.51cto.com/yy1109lll/2299489