if we want to filter with sed pattern and just
print the filtered lines without any further editing , we can do it like thisls
-a1 ~ | sed -ne "/^\./p...
分类:
其他好文 时间:
2014-05-28 22:58:56
阅读次数:
294
用途sed, 流编辑, 可以用来分析standard input, 还可以将数据进行取代, 删除,
新增, 取特定行.用法sed -nefr action选项与参数: -n: 在一般sed用法中, 所有来自stdin的数据一般都会被列出到屏幕上,
但如果加上-n参数, 则只有经过sed特殊处理的那....
分类:
系统相关 时间:
2014-05-28 18:27:46
阅读次数:
320
awk/gawk1,内置变量FILENAME:输入文件名称FNR:当前数据文件中的数据行数NF:数据文件中的字段总数NR:已处理的输入数据行数目FS:输入数据段分隔符RS:输入数据行分隔符OFS:输出数据段分隔符ORS:输出数据行分隔符$0一行数据,$1——$n各个字段的数据。1)可以根据模式进行匹...
分类:
其他好文 时间:
2014-05-26 15:38:46
阅读次数:
254
看到过的最好的一个讲解sed & awk的PPT
http://www.cs.nyu.edu/~mohri/unix08/lect5.pdf 现在制作一个自己的版本的ls sed_ls_fmt s/^d/dir
/1s/^-/file /1s/\([rwxs-]\{3\}\)\([rwxs-]\{3...
分类:
其他好文 时间:
2014-05-26 09:59:23
阅读次数:
298
-------------------------------------------------------------------------SED单行脚本快速参考(Unix
流编辑器) 2005年12月29日英文标题:USEFUL ONE-LINE ...
分类:
其他好文 时间:
2014-05-26 06:51:54
阅读次数:
205
Sed学习笔记作者:Jims of肥肥世家Copyright ? 2004,2005, 本文遵从GNU
的自由文档许可证(Free Document
License)的条款,欢迎转载、修改、散布。发布时间:2004年09月20日最近更新:2005年12月22日,增加小技巧章节。Table of Co...
分类:
其他好文 时间:
2014-05-24 12:06:47
阅读次数:
353
简介awk是一个强大的文本分析工具,相对于grep的查找,sed的编辑,awk在其对数据分析并生成报告时,显得尤为强大。简单来说awk就是把文件逐行的读入,以空格为默认分隔符将每行切片,切开的部分再进行各种分析处理。awk有3个不同版本:
awk、nawk和gawk,未作特别说明,一般指gawk,g...
分类:
系统相关 时间:
2014-05-23 05:24:57
阅读次数:
435
我们知道awk可以进行类似于cut之类的操作,ru...
分类:
其他好文 时间:
2014-05-23 01:17:28
阅读次数:
280
你是否曾经有过要计算一个非常大的数据(几百GB)的需求?或在里面搜索,或其它操作——一些无法并行的操作。数据专家们,我是在对你们说。你可能有一个4核或更多核的CPU,但我们合适的工具,例如
grep, bzip2, wc, awk, sed等等,都是单线程的,只能使用一个CPU内核。借用卡通人物Ca...
分类:
系统相关 时间:
2014-05-21 23:53:33
阅读次数:
618
好久不写,一方面是工作原因,有些东西没发直接发,另外的也是习惯给丢了,内因所致。今天是个好日子,走起!btw,实际上这种格式化输出应该不只限于某一种需求,差不多是通用的。需求:--基本的:当前Hive查询结果存在数据与表头无法对其的情况,不便于监控人员直接查看,或者导出到excel中,需要提供一个脚...
分类:
其他好文 时间:
2014-05-21 23:00:39
阅读次数:
527