linux 文本处理

2.删除空行 

cat file | tr -s "\n" > new_file

 

gsub   全局替换

sub     替换第一次

gensub   指定替换第几次

他们都是用来正则处理文本的

 

awk的sub函数用法：

1.sub函数匹配指定域/记录中最大、最靠左边的子字符串的正则表达式，并用替换字符串替换这些字符串。

如果没有指定目标字符串就默认使用整个记录。替换只发生在第一次匹配的时候。格式如下：
sub (regular expression, substitution string):
sub (regular expression, substitution string, target string)
实例：
$ awk ‘{ sub(/test/, "mytest"); print }‘ testfile
$ awk ‘{ sub(/test/, "mytest", $1); print }‘ testfile
      第一个例子在整个记录中匹配，替换只发生在第一次匹配发生的时候。
      第二个例子在整个记录的第一个域中进行匹配，替换只发生在第一次匹配发生的时候。
如要在整个文件中进行匹配需要用到gsub

2.gsub函数作用如sub，但它在整个文档中进行匹配。格式如下：

                  gsub (regular expression, substitution string)
                  gsub (regular expression, substitution string, target string)
实例：
$ awk ‘{ gsub(/test/, "mytest"); print }‘ testfile
$ awk ‘{ gsub(/test/, "mytest", $1); print }‘ testfile
      第一个例子在整个文档中匹配test，匹配的都被替换成mytest。
      第二个例子在整个文档的第一个域中匹配，所有匹配的都被替换成mytest。

 

sub和gsub返回的都是替换次数

 

3.gensub则更强大，可以指定替换的第几次，函数返回值是替换的结果

gensub(/-/,"",1,$4)
/-/:替换源
"":替换目标
1:替换第几次，"g","G"表示全局替换
$4:替换第几个字段

替换目标还可以使用分组