前言： Nginx日志里面Mobileweb_access.log增长特别大，一天上百兆，将近100W的访问记录，按照我们目前的规模，热点用户才500个左右，就算人人用手机app访问，怎么可能会有这么大的url访问量？以前只是安装使用nginx，还没有抽出时间仔细研究，这回需要彻底的去分析nginx日志了。 1，日志分类主要2种，一种是错误日志，一种是访问日志，这些配置都在/usr...
分类：
其他好文 时间：
2014-10-20 21:27:10
阅读次数：
340
httpd.conf中CustomLog logs/access.log common 改成 CustomLog "|c:/apache/bin/rotatelogs.exe c:/apache/logs/access_%Y_%m_%d.log 86400" common 其中把c:改成你安装apa...
分类：
Web程序 时间：
2014-10-18 22:20:21
阅读次数：
193
apache或nginx都有开关默认日志,一个是正常访问日志,一个是错误的日志，目录在 /www/wdlinux/nginx-1.0.15/logs /www/wdlinux/httpd-2.2.22/logs这两个日志,会记录所有的正常与不正常的访问日志信息。而且是所有服务器上的域名,除非,在站点...
分类：
系统相关 时间：
2014-10-17 23:17:03
阅读次数：
248
环境说明：os版本：rhel5.764位hadoop版本：hadoop-0.20.2hbase版本：hbase-0.90.5pig版本：pig-0.9.2访问日志文件，下载文章中的附件！日志放在本地目录路径为：/home/hadoop/access_log.txt日志格式为：220.181.108.151--[31/Jan/2012:00:02:32+0800]"GET/home.php?mod=space..
分类：
数据库 时间：
2014-10-14 21:26:39
阅读次数：
392
【阿里云产品公测】简单日志服务SLS使用评测 + 教程评测介绍被测产品: 简单日志服务SLS评测环境: 阿里云基础ECS x2(1核, 512M, 1M)操作系统: CentOS 6.5 x64日志环境: Nginx(v1.6.2) HTTP服务器访问日志、服务器系统日志评测人: mr_wid评测时...
分类：
其他好文 时间：
2014-10-11 17:36:35
阅读次数：
427
apache访问日志按周，天，小时轮循设置<VirtualHost*:80>ServerAdminwebmaster@dummy-host.example.comDocumentRoot"/data/www/bbsServerNamewww.test.comServerAliaswww.dummy-host.example.com#CustomLog"|/usr/local/sbin/cronolog/app/logs/access_%Y%m%d_www.log"co..
分类：
Web程序 时间：
2014-10-10 15:11:44
阅读次数：
198
我的主要工作就是api的编写，那么如何测试API响应时间，以及预计高并发服务器压力呢？1 首先统计API每日访问总数，举例为a。 API一般有访问日志，统计访问日志。linux下 用到类似grep wc管道命令统计。2 计算并发数。 这个怎么计算呢？预估一下。这里我们有这么一个原则：80%流量...
通过网站访问日志我们可以看见很多蜘蛛爬行记录。搜索引擎都遵守互联网robots协议，是放置在网站根目录下robots.txt文本文件，在文件中可以设定搜索引擎蜘蛛爬行规则，以及设置搜索引擎蜘蛛Spider抓取内容规则。通过robots.txt来进行限制，首先在网站跟目录下面建立一个robots...
分类：
其他好文 时间：
2014-09-18 16:58:24
阅读次数：
195
近日本人维护的一个客户网站打开非常慢，于是便按照以往的排查步骤进行排查1，登录服务器top命令查看负载ＩＯ情况发现负载有点高并有很多php进程占了很大的资源2，进入mysql服务器查看数据库线程，并没有发现锁表情况。3，打开web访问日志发现有很多百度爬虫访问。导致点了很多..
分类：
Web程序 时间：
2014-09-18 16:51:24
阅读次数：
207
借助tcpdump统计http请求这里所说的统计http请求，是指统计QPS(每秒请求数)，统计前十条被访问最多的url。一般做这样的统计时，我们经常会使用网站访问日志来统计。当我们来到一个陌生的服务器环境，需要立即统计当前前十条被访问最多的url,来初步确定是否存在攻击行为，使用tcpdump则简...
分类：
其他好文 时间：
2014-09-04 14:46:09
阅读次数：
251
