码迷,mamicode.com
首页 >  
搜索关键字:awk 以列为域提取文件内容    ( 4639个结果
linux下自动ftp到服务器对比拷贝指定目录下文件
#!/bin/bash process=8 PWD=`pwd` DAT=`date` ftpip="192.168.1.1" user="ftp_username" password="ftp_password" local_dir="/home/" getlist() { ftp-n$ftpip<<EOF|awk‘{print$9}‘|sed‘/^$/d‘>$PWD/list user$user$password cdfile/ dir bye EOF } copy() { if[-f$P..
分类:系统相关   时间:2014-05-27 03:55:34    阅读次数:378
Linux Shell 网络层监控脚本(监控包括:连接数、句柄数及根据监控反馈结果分析)
脚本监控:获取最大句柄数的进程:链接分析:脚本片段: case "$handle" in 2) echo "The handle of the process : " echo " " handle | awk...
分类:系统相关   时间:2014-05-24 03:05:11    阅读次数:420
linux-shell脚本命令之awk
[ awk简介: ] awk可以从一个文本中获取部分内容, 或者对这个文本进行排版, 使它按某种格式输出. [ awk工作流程: ] awk会把文件一行内容去到...
分类:系统相关   时间:2014-05-22 08:06:46    阅读次数:395
awk
AWK程序是由一系列模式--动作对组成的,写做pattern { action }其中pattern表示AWK在数据中查找的内容,而action是在找到匹配内容时所执行的一系列命令。输入行被分成了一些记录:记录默认由换行符分割,因此输入会按照行进行分割。程序使用给定的条件一个个的测试每条记录,并执行...
分类:其他好文   时间:2014-05-22 02:06:54    阅读次数:281
利用多核CPU来加速Linux命令 — awk、sed、bzip2、grep、wc
你是否曾经有过要计算一个非常大的数据(几百GB)的需求?或在里面搜索,或其它操作——一些无法并行的操作。数据专家们,我是在对你们说。你可能有一个4核或更多核的CPU,但我们合适的工具,例如 grep, bzip2, wc, awk, sed等等,都是单线程的,只能使用一个CPU内核。借用卡通人物Ca...
分类:系统相关   时间:2014-05-21 23:53:33    阅读次数:618
使用shell+awk完成Hive查询结果格式化输出
好久不写,一方面是工作原因,有些东西没发直接发,另外的也是习惯给丢了,内因所致。今天是个好日子,走起!btw,实际上这种格式化输出应该不只限于某一种需求,差不多是通用的。需求:--基本的:当前Hive查询结果存在数据与表头无法对其的情况,不便于监控人员直接查看,或者导出到excel中,需要提供一个脚...
分类:其他好文   时间:2014-05-21 23:00:39    阅读次数:527
开始在这里记录在jd的点滴成长~~~
开始在这里记录在jd的点滴成长~~~3月20日入职,距离今天两个月还差5天,不过这段时间完成的东西还真不少,学习了很多的linux命令和Axure产品设计,比如:awk神器、sed、sort、head、tail、find、xargs、grep等等,收获很大~~~其中到今天为止已经完成了一个功能非常强...
分类:其他好文   时间:2014-05-16 01:03:10    阅读次数:314
svn 批量添加没有加入版本控制的文件命令
svn st | awk '{if($1=="?"){print$2}}'|xargs svn add...
分类:其他好文   时间:2014-05-15 19:45:54    阅读次数:362
删除大量小文件
FreeBSD删除文件缓存,在负载方面FreeBSD比CentOS好很多很多。#!/bin/sh if[!-s/tmp/dir.dat];then find/home/www/web/cache-typed>/tmp/dir.dat fi mkdir/var/tmpdir DIRS=`cat/tmp/dir.dat` foriin$DIRS do load=$(top-n1|awk-F‘[.]+‘‘/averages/{print$6}‘) #rsync--delet..
分类:其他好文   时间:2014-05-15 18:51:06    阅读次数:314
网站访问慢,服务器负载高-系列查找问题方法
如果以后出现报警各网站无法ping通,或者服务器负载过高,可通过以下几条途径查找原因:1,查看访问日志,查看是否有访问异常,如有,过滤IP,进行IP封装cataccess.log|awk‘{print$1}’|sort|uniq–c|sort–n>/tmp/ip.txt netstat-ntu|awk‘{print$5}‘|cut-d:-f1|sort|un..
分类:Web程序   时间:2014-05-14 16:32:07    阅读次数:409
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!