这几天和同事一起分析的一个线上的java应用。线上查询平台应用，主要原理是用户传入sql，经由查询平台通过jdbc连接hive做查询操作。主要架构：user---->tengine---->java--->haproxy---->hiveserver2线上用户反映查询异常，分析tengine的访问日志，发现部分响应的h..
分类：
编程语言 时间：
2014-09-03 02:40:06
阅读次数：
317
如果你是一个站长，想要提交一个查询，从一亿多条日志中找出从湖南省发出、使用ISP电信、通过百度搜索跳转到达的访问日志。该怎么做？别急，在接收到您的查询条件后，CNZZ可以快速通过SLS（简单日志服务） API获得结果，并将结果展示到官方网站。一眨眼，你想要的就看到了！??CNZZ（www.cnzz....
分类：
其他好文 时间：
2014-09-01 15:22:13
阅读次数：
252
经常查看日志，偶尔会发现一些不怀好意的访问，当然也可能是某些人或者机构来检查网站的安全性吧。
通过日志看看别人是怎么扫描的，采取相应的措施，增加运维安全经验。...
分类：
Web程序 时间：
2014-08-31 11:55:11
阅读次数：
357
nginx里面有很多的爬虫日志，会影响到后期的数据分析，所以一般会去掉。nginx排除配置：location/{
#去掉爬虫Start
if($http_user_agent~*"bot|spider"){
access_logoff;
}
#去掉爬虫end
proxy_passhttp://cdel_jxjy;
......
}如果特别想要爬虫日志，也可以讲爬虫日志放到指定..
分类：
其他好文 时间：
2014-08-15 10:51:29
阅读次数：
299
这个异常报错的原因也许在不同的项目中，也有很多种原因导致出错。在这里我针对我的项目，看了报错的提示，找了大半天。终于找到了。。唉。。虽然简单，但还是写写。 我的项目里实现了URL的重写，URL重写类里面做了一个“网站访问日志”的功能，该功能只不过是记录来网站的URL,并保存数据库中。在这里我用到.....
分类：
移动开发 时间：
2014-08-05 03:03:58
阅读次数：
819
0x01 查看访问日志看是否有文件上传操作(POST方法)，IPREMOVED--[01/Mar/2013:06:16:48-0600]"POST/uploads/monthly_10_2012/view.php HTTP/1.1"20036"-""Mozilla/5.0"IPREMOVED--[0...
分类：
Web程序 时间：
2014-08-03 17:54:45
阅读次数：
283
在server.xml里的<host>标签下加上 <Valve className="org.apache.catalina.valves.AccessLogValve" directory="logs" prefix="localhost_access_log." suffix=".txt" pattern="common" resolveHosts="false"/> 就...
分类：
其他好文 时间：
2014-08-01 00:18:21
阅读次数：
334
摘抄自http://www.ibm.com/developerworks/AWK简介AWK是一种“样式扫描和处理语言”。它允许您创建简短的程序，这些程序读取输入文件、为数据排序、处理数据、对输入执行计算以及生成报表。它的名称取自于它的创始人AlfredAho、PeterWeinberger和BrianKernighan姓氏的首个字母..
分类：
系统相关 时间：
2014-07-31 13:38:57
阅读次数：
349
ngx_log_if是Nginx的一个第三方模块。它在Github上的描述是这样介绍的：ngx_log_if是一个独立的模块,允许您控制不要写的访问日志,类似于Apache的"CustomLog env = XXX"...
分类：
其他好文 时间：
2014-07-24 23:38:03
阅读次数：
198
nginx 配置虚拟目录并且url 重写
server {
#侦听80端口
listen 8090;
#定义使用www.xx.com访问
server_name 127.0.0.1;
#设定本虚拟主机的访问日志
access_log /var/log/nginx/access.log;
...
分类：
Web程序 时间：
2014-07-01 08:47:37
阅读次数：
354
