使用Nginx的网站可能会遇到访问流量异常、被友情检测、程序出现Bug等各种突然情况,这时大家的反应想必都是第一时间分析日志,然后发现日志有几十GB之多,又需要按照时间、错误类型或者关键字段检索信息时会不会有种醍醐灌顶、菊花一紧的错觉。文中介绍的方法不管是GoAccess还是sed/awk虽然可以解决一时的问题但未必能够治本,也许`ELK(Logstash+ElasticSearch+Kibana)`对我们大多数人来...
分类:
数据库 时间:
2015-07-17 00:28:10
阅读次数:
1331
一、概述在Linux环境,有多种实现自动化的脚本语言,如Shell、Python、Perl、Tcl等。Shell语言因与Shell外壳结合紧密,是最常见的实现自动化的脚本语言。同时,在Linux环境中存在大量功能单一的小工具——通常它们在指定输入后,立即就可获得输出,例如echo、cat等字符串/文本打印工具,又或者是如sed、awk等最常用的字符串编辑工具。通过编写Shell脚本,我们可以反复利...
分类:
系统相关 时间:
2015-07-13 20:42:58
阅读次数:
178
sed -i '/cd ${LDIR_DEST}\/webextend\/pc && ln -s \/hard\/www_winclient\/bboxpc.exe ./a\ \tcd ${LDIR_DEST}\/webextend\/pc && ln -s \/hard\/www_winclient\/'$i' .'
#参考别人后自己改的,主要是加了个变量
sed -i '4i dfsdfd...
分类:
系统相关 时间:
2015-07-13 18:36:31
阅读次数:
123
编码的两种方式 echo '手机' | tr -d '\n' | xxd -plain | sed 's/\(..\)/%\1/g' echo '手机' |tr -d '\n' |od -An -tx1|tr ' ' % 解码 url="要解码的URL地址" printf $(echo -n $ur...
分类:
Web程序 时间:
2015-07-13 18:11:59
阅读次数:
193
1.awk简介awk 是一个强大的文本分析工具。sed 常常用于一整个行的处理,而 awk 则倾向于以空格和tab键为默认分隔符将每行切片成一个个域(也就是一列)来处理。awk适用于小型的数据处理.awk有3个不同版本: awk、nawk和gawk,未作特别说明,一般指gawk,gawk 是 awk 的 GNU 版本。...
分类:
系统相关 时间:
2015-07-10 22:23:58
阅读次数:
394
#!/bin/bash
#Author:JuChangfei
#BLOG:http://changfei.blog.51cto.com
if[`whoami`!="root"];then
echo"pleaseuseroot!"
exit1
fi
#Commoninstallationpackage
yum-yinstallsysstatiptrafcurlcurl-develntpwgetlsofstracelrzszcmakesetuptool
#setrunlevelto3
sed-i‘s/id:..
分类:
系统相关 时间:
2015-07-09 22:49:52
阅读次数:
236
内容目录:find 文件查找grep 文本搜索xargs 命令行参数转换sort 排序uniq 消除重复行用tr进行转换cut 按列切分文本paste 按列拼接文本wc 统计行和字符的工具sed 文本替换利器awk 数据流处理工具迭代文件中的行、单词和字符本文将介绍Linux下使用Shell处理文本...
分类:
系统相关 时间:
2015-07-09 19:15:35
阅读次数:
178
通过使用tr,您可以非常容易地实现sed的许多最基本功能。您可以将tr看作为sed的(极其)简化的变体:它可以用一个字符来替换另一个字符,或者可以完全除去一些字符。您也可以用它来除去重复字符。这就是所有tr所能够做的。tr用来从标准输入中通过替换或删除操作进行字符转换。t..
分类:
系统相关 时间:
2015-07-08 00:50:33
阅读次数:
129
本文为转载,原地址为:http://www.cnblogs.com/ggjucheng/archive/2013/01/13/2856901.html简介sed 是一种在线编辑器,它一次处理一行内容。处理时,把当前处理的行存储在临时缓冲区中,称为“模式空间”(pattern space),接着用se...
分类:
系统相关 时间:
2015-07-07 18:33:35
阅读次数:
184
本文为转载,原地址:http://www.cnblogs.com/dong008259/archive/2011/12/07/2279897.htmlsed是一个很好的文件处理工具,本身是一个管道命令,主要是以行为单位进行处理,可以将数据行进行替换、删除、新增、选取等特定工作,下面先了解一下sed的...
分类:
系统相关 时间:
2015-07-07 16:44:35
阅读次数:
168