在Hive中,需要实现Hive中的函数无法实现的功能时,就可以用Streaming来实现。其原理可以理解成:用HQL语句之外的语言,如Python、Shell来实现这些功能,同时配合HQL语句,以实现特殊的功能。
比如,我有一张不同网站访问的日志表,其中有两个列是url和ref,分别代表当前访问的网址和来源地址,我想要查看用户的来源,即看用户都是从那些网站跳到这些网站上去的,这里有些网站可能域名...
分类:
编程语言 时间:
2014-08-07 23:21:44
阅读次数:
448
我知道的有两种方法, 都是命令后面加路径(nautilus|pcmanfm dir_path)...
分类:
其他好文 时间:
2014-08-07 23:20:35
阅读次数:
296
由于服务器环境及应用层各版本的不同、编码方式的不同因此会有很多种情况会出现乱码问题。
由于Jenkins中的job运行的是独立的一个shell环境,许多的环境变量与服务器中是不一样的,因此在job中执行的命令也就会有所差异。
因此可以在job中执行env命令,同时在服务器中执行env命令查看环境的异同点。
对于Jenkins中乱码问题,首先,确保Jenkins的容器如Glassfish,To...
分类:
其他好文 时间:
2014-08-07 23:17:45
阅读次数:
209
陆陆续续看完了圣经第一章,熟悉了unix的整个编程流程,c语言的用处在这里得到伸张。 从unix的体系结构,原来操作系统包括内核及一些其他软件,我们常常误称为linux内核为操作系统,这俨然成为一种共识。基本熟悉了shell的介绍,主流的是bash(Bourne-again shell),un...
分类:
其他好文 时间:
2014-08-07 22:37:08
阅读次数:
194
break、continue、exit、return一般用于控制循环的的走向首先通过一个脚本说明for((i=1;i<5;i++))doif[$i-eq3]then#break#continue#exitfiecho$idoneechoOK输出的结果break的结果12OKcontinue的结果124OKexit的结果12由此可以说明breakn:n表示跳出循环的层数,如果省略n表..
分类:
系统相关 时间:
2014-08-07 19:20:21
阅读次数:
404
shell 获取前一条命令是否执行成功 if?[?$??-eq?0?];then?
?echo?"success"
fi
分类:
系统相关 时间:
2014-08-07 13:31:00
阅读次数:
252
链接:http://blog.csdn.net/morewindows/article/details/6668714希尔排序的实质就是分组插入排序,该方法又称缩小增量排序,因DL.Shell于1959年提出而得名。该方法的基本思想是:先将整个待排元素序列分割成若干个子序列(由相隔某个“增量”的元素...
分类:
其他好文 时间:
2014-08-07 13:01:50
阅读次数:
302
使用shell api的话删除目录和创建目录都是非常简单的一个函数调用就可以,但是如果是使用为win32里面基本的函数的话,就稍微会复杂点。不过个人感觉shell api里面删除和创建目录的函数也是调用win32里面这些基本的函数。 创建目录, 可以创建多级目录,代码拷过去稍稍修改可用:int...
分类:
其他好文 时间:
2014-08-07 12:57:09
阅读次数:
270
在看过Drools例子之后,认为其太鸡肋。完全可以用bshell脚本来代替,或者用java自带的脚本(java5以上才支持,不过不是太好用)代替。规则文件还要学其新标签,与其配套的接口写那么多,还不如用java直接写了。说是规则频繁变动时才有用,那新添加一条规则岂不更麻烦,个人不推荐。所以不要在这上...
分类:
其他好文 时间:
2014-08-07 12:45:59
阅读次数:
226
1、 先开启xm_cmdshell服务xp_cmdshell 扩展存储过程将命令字符串作为操作系统命令 shell 执行,并以文本行的形式返回所有输出。由于xp_cmdshell 可以执行任何操作系统命令,所以一旦SQL Server管理员帐号(如sa)被攻破,那么攻击者就可以利用xp_cmdshe...
分类:
数据库 时间:
2014-08-07 12:39:49
阅读次数:
332