标签:
剑客起源于唐代传奇的中国武侠小说中,他们所使用的兵器剑
的地位是至高无上的,一直也是兵器中的王者,符合了剑
在中国古代社会的地位。今天给大家详细的总结一下linux
系统下的利刃兵器:awk
、sed
、grep
三剑客介绍(grep、sed、awk)
是一种强大的文本搜索工具,它能使用正则表达式搜索文本,并把匹配的行打印出来
# grep 常用选项 -c #只输出匹配行的计数 -i #不区分大小写 -h #查询多文件时不显示文件名 -l #查询多文件时只输出包含匹配字符的文件名 -n #显示匹配行及行号 -s #不显示不存在或无匹配文本的错误信息 -v #显示不包含匹配文本的所有行 -E #支持扩展的正则表达式 -P #调用perl语法正则
对文本的处理很强大,增、删、改、查样样能做
# sed 常用选项 -r #在脚本中使用扩展正则表达式 -n #不打印所有行到标准输出 -i #直接修改文件
可以理解为一门编程语言,可以自定义变量,有条件语句,有循环,有数组,有正则,有函数
# awk 常用变量 $n #当前记录的第n个字段,字段间由 FS分隔 $0 #完整的输入记录 FNR #同NR,但相对于当前文件 FS #字段分隔符(默认是任何空格) NF #当前记录中的字段数 NR #当前记录数 OFS #输出字段分隔符(默认值是一个空格) ORS #输出记录分隔符(默认值是一个换行符) # awk 常用字符串函数 sub #匹配记录中最大、最靠左边的子字符串的正则表达式,并用替换字符串替换这些字符串 gsub #整个文档中进行匹配 index #返回子字符串第一次被匹配的位置 substr #返回从位置1开始的子字符串,如果指定长度超过实际长度,就返回整个字符串 split #可按给定的分隔符把字符串分割为一个数组,默认按当前FS值进行分割 length #返回记录的字符数 toupper #可用于字符串大小间的转换,该功能只在gawk中有效 tolower #可用于字符串大小间的转换,该功能只在gawk中有效 # awk 常用函数 srand(x) #x是rand()函数的种子 int(x) #取整 rand() #产生一个大于等于0而小于1的随机数
案例使用(有很多种方法,今天我们这里只说三剑客的使用方法)
1.快速取出本机IP?
# grep ifconfig eth0|grep -Po ‘(?<=dr:)\S+‘ # sed ifconfig eth0|sed -rn ‘s#.*r:(.*) B.*#\1#gp‘ # awk ifconfig eth0|awk -F ‘[ :]+‘ ‘NR==2{print $4}‘
2.原始数据格式替换成新数据格式(grep自己无法实现该功能了)
原始数据:
17/Apr/2015:09:29:24 +0800
17/Apr/2015:09:30:26 +0800
17/Apr/2015:09:31:56 +0800
18/Apr/2015:09:34:12 +0800
18/Apr/2015:09:35:23 +0800
19/Apr/2015:09:23:34 +0800
19/Apr/2015:09:22:21 +0800
20/Apr/2015:09:45:22 +0800
期望结果:
2015-04-17 09:29:24+0800
2015-04-17 09:30:26+0800
2015-04-17 09:31:56+0800
2015-04-18 09:34:12+0800
2015-04-18 09:35:23+0800
2015-04-19 09:23:34+0800
2015-04-19 09:22:21+0800
2015-04-20 09:45:22+0800
# sed
sed -rn ‘s#Apr#04#g;s#^(.*)/(.*)/(....):(.*) (.*)#\3-\2-\1 \4\5#p;‘ test.log sed -rn ‘s#^(.{2})/(.{3})/(.{4}):(.{8}) (.{4})#\3-04-\1 \4\5#p;‘ test.log
# awk
awk -F ‘[/: ]+‘ ‘{sub(/Apr/,"04");printf("%s-%s-%s %s:%s:%s%s\n",$3,$2,$1,$4,$5,$6,$7)}‘ test.log awk ‘{sub(/Apr/,"04");split($0,array,"[/: ]") ;printf("%s-%s-%s %s:%s:%s%s\n",array[3],array[2],array[1],array[4],array[5],array[6],array[7])}‘ test.log
标签:
原文地址:http://my.oschina.net/u/2325281/blog/508059