2018/7/29_第1次修改 ccb_warlock elasticsearch（ES）作为ELK的一部分，经常用于日志记录与统计。最近遇到需要迁移日志从旧环境到新环境，试验后发现elasticdump可以实现这个数据同步的部分（可以实现不同版本的ES数据同步）。 elasticdump虽然迁移数 ...
分类：
其他好文 时间：
2018-07-30 01:08:44
阅读次数：
490
nginx服务器日志相关指令主要有两条，一条是log_format，用来设置日志格式，另外一条是access_log，用来指定日志文件的存放路径、格式和缓存大小，一般在nginx的配置文件中日记配置(/usr/local/nginx/conf/nginx.conf)。nginx的log_format有很多可选的参数用于指示服务器的活动状态，默认的是：log_formatmain‘$remote_a
分类：
其他好文 时间：
2018-05-25 14:53:25
阅读次数：
138
一、起因?在使用ELK5.5的时候，如果遇到需要在同一台机器上收集不同类型的日志，比如：同时收集一台机器上的javalog和nginxlog！而又需要分别存储到不同索引的时候，我们会在filebeat的prospectors里面配置document_type类型，然后在logstash里面使用if[type]=="string"来匹配，针对不同的判断做不同的处理。&e
分类：
其他好文 时间：
2018-03-28 16:43:43
阅读次数：
331
需求：因nginx做了防刷机制之后，error.log会出现ip刷服务器，也被nginx挡掉了，并没有具体刷到后端服务器，但error.log多次出现ip，现计划把出现5次以上的ip写入黑名单。nginxlog日志格式：2016/09/0501:11:07[info]1354#0:*11981355139limitingconnectionsbyzone"limit",clie..
分类：
编程语言 时间：
2016-09-06 23:24:46
阅读次数：
377
1.499网上的解释是客户端主动关闭了连接在一个项目上传文件的时候，nginxlog报499，关闭iptables就可以2.从排除故障的方法来说nginx->tomcat，问题就出在这两个上面看nginx的请求是否在日志里面能发现，这次是post请求是499看tomcat的日志，是否有异常3.从网络层，应用层，..
分类：
其他好文 时间：
2016-06-30 11:05:17
阅读次数：
465
前言：来到新公司，领导下发了个需求：每周需要对服务器进行一个巡检，以及分析ngxin趋势，由于公司实际生产环境服务器不是特别多，考虑暂时先用脚本完成该需求。大致思路：收集数据->写入excel制成图表->发邮件一、收集nginx数据主要是对nginxlog进行一个分析，统计数据..
分类：
编程语言 时间：
2016-05-13 17:26:51
阅读次数：
867
[root@nginxlog]#cat/etc/nginx/nginx.confusernginxnginx;worker_processes6;error_log/app/log/nginx_error.logcrit;#pidlogs/nginx.pid;events{useepoll;worker_connections1024;}http{includemime.types;default_typeapplication/octet-stream;sendfileon;#日志格式log_for..
分类：
其他好文 时间：
2016-03-23 11:30:55
阅读次数：
182
server { listen 80; server_name api.colortrip.cn; client_max_body_size 10m; access_log /dev/null; #error_log /dev/null; error_log /home/nginxlog/error...
分类：
其他好文 时间：
2014-10-11 23:15:36
阅读次数：
363
