标签：duyuheng linux shall脚本 正则表达式 grep sed
一、 正则表达式：
正则表达式（或称Regular Expression，简称RE）就是由普通字符（例如字符 a 到 z）以及特殊字符（称为元字符）组成的文字模式。
该模式描述在查找文字主体时待匹配的一个或多个字符串。
正则表达式作为一个模板，将某个字符模式与所搜索的字符串进行匹配。简单的说，正则表示式就是处理字符串的方法，它是以行为单位来进行字符串的处理行为， 正则表示式通过一些特殊符号的辅助，可以让使用者轻易的达到搜寻/删除/取代某特定字符串的处理程序。vim、grep、find、awk、sed等命令都支持正则表达式。
1.常用正则表达式：
1) . 代表任意单个字符;
例如：检索test.txt文本中匹配s字符的。
2) ^ 代表行的开始；
3) $ 代表行的结束；
例如；检索test.txt文本中以.结束的。（\.表示把特殊字符.转为普通字符）
4）[...]表示匹配括号中的字符之一
例如：检索test.txt文本中匹配小写字母a到z之间的。
注意：
[abc]表示匹配单个字符a或b或c
[123]表示匹配单个字符1或2或3
[A-Z]表示匹配大写字母A-Z之间一个
[^a]表示取反，匹配除去小写字母a的。
5）* 表示前导字符出现0次或任意多次；
例如：检索test.txt文本中出现0次或多次T的。
6) \? 表示前导字符出现0或1次；
例如：检索test.txt文本中出现0或1次e的。
7）\+ 表示前导字符出现1次或多次。
例如:检索test.txt文本中出现1或多次nn的。
8）\{n,m\} 表示前导字符出现n至m次；
n/m为整数，并且m>n；
其他形式：
\{n\}连续的n个前导字符；
\{n,\}连续的至少n个前导字符；
例如：检索test.txt文本中出现2至4个n的。
9） \ 表示转义其后的单个特殊字符，使其成为普通字符；
例如：检索test.txt文本中含有.的。
10） | 表示或；
例如：检索test.txt文本中含有a或b的。
11） [] 或 （）：将部分内容合成一个单位组；
例如：检索test.txt文件中含有Tae或The的。
二、grep命令的用法
grep （global search regular expression(RE) and print out the line,全面搜索正则表达式并把行打印出来）是一种强大的文本搜索工具，它能使用正则表达式搜索文本，并把匹配的行打印出来.
1）-A 数字：列出符合行之外，并且列出后几行；
例如：列出test.txt文本中Tom行与后俩行。
2）-B 数字：列出符合行之外，并且列出前几行；
例如：列出test.txt文本中Tom行与前俩行。
3）-C 数字（如不加数字，默认为2）：列出符合行之外，并且列出前后几行；
例如：列出test.txt文本中Tom行与前后俩行。
4）-c ： --count（若再加上-v参数则显示不符合的总行数）：不显示符合的行，只显示符合的总行数；
例如：列出test.txt文本中含有Tom的行数；
列出test.txt文本中不含有Tom的行数。
5）-i ：忽略大小写
例如：列出test.txt文本中含有tom（大小写）的行。
6）-n ：再匹配的行前面打印行号
例如：列出test.txt文本中含有tom（大小写）的行，并且打印出行号。
7）-v ：反检索，显示不匹配的行；
例如：列出test.txt文本中不含有tom的行。
8）精确匹配：再抽取的字符串后加上 \>
例如：精确列出test.txt文本中含有30的行。
8）-s :不显示不存在或不匹配文本的错误信息；（如文件不存在）
例如：bb.txt文件不存在，检索时候提示搜索不到的错误信息，
如果不要错误信息提示，则加上-s。
三、sed命令的用法
sed是一种在线编辑器，它一次处理一行内容。处理时，把当前处理的行存储在临时缓冲区中，称为“模式空间”（pattern space），接着用sed命令处理缓冲区中的内容，处理完成后，把缓冲区的内容送往屏幕。接着处理下一行，这样不断重复，直到文件末尾。文件内容并没有改变，除非你使用重定向存储输出。
sed的基本命令：
1）s ：替换
例如：把test.txt中The替换成aa，输出到bb.txt文件中。
sed 替换命令:
/../../分隔符（可以用其他符合代替）
The 搜索的字符串
aa 替换的字符串
<test.txt> 搜索的文件
bb.txt 输出到的文件
2) & ：表示匹配的字符串
注意：
sed 默认只替换搜索字符串的第一次出现 , 利用 /g 可以替换搜索字符串所有
如果需要对同一文件或行作多次修改，可以使用 "-e" 选项
例如：给test.txt中The替换成加一个（），输出到cc.txt文件中。
3) d :删除行
例如：将passwd内容显示并打印行号，同时删除2到5行。
注意：
nl命令在linux系统中用来计算文件中行号。nl 可以将输出的文件内容自动的加上行号。
4）增加行：a（在指定的行后新增）i（在指定的行前新增）
例如：将test.txt内容显示并打印行号，同时在第二行后新增hello。
例如：将test.txt内容显示并打印行号，同时在第二行前新增hello。
例如：如果要同时新增多行，则每行之间要用反斜杠\来进行的添加。
5）c ：取代行
例如：将test.txt内容显示并打印行号，同时取代2到5行间内容为BBBBBBB。
6）p : 打印
例如：仅列出test.txt文本中的第5到7行内容。
7）-i：sed 的-i选项可以直接修改文件中的内容
例如：将test.tst文本中的第二行修改为kkkk
8）扩展
调用sed的方式：
在命令行键入命令
将sed命令插入脚本文件，然后调用sed
将sed命令插入脚本文件，并使sed脚本可执行。
使用sed命令行的格式：
sed [选项] sed命令 输入文件。
记住在命令行使用sed命令时，实际命令要加单引号。
sed也允许加双引号。
使用sed脚本文件格式:
sed [选项] -f sed脚本文件 输入文件
要使用第一行具有sed命令解释器的sed脚本文件的格式：
sed脚本文件 [选项] 输入文件
例如：使用sed脚本将jjjjj添加到test.txt文本中的第三行，将lllll添加到test.txt文本中的第四行。
给sed脚本权限，运行脚本
本文出自 “duyuheng” 博客，请务必保留此出处http://duyuheng.blog.51cto.com/12879147/1941783
标签：duyuheng linux shall脚本 正则表达式 grep sed
原文地址：http://duyuheng.blog.51cto.com/12879147/1941783
