下载最新的logstash5.4.1打开把之前的配置文件加入进去,启动logstash提示报错了,未使用geoip插件的配置文件正常启动。按照提示发现是maxmind的数据库解析出错,重新至maxmind(http://geolite.maxmind.com/download/geoip/database/GeoLite2-City.tar.gz)下载解析即可。说明下..
分类:
其他好文 时间:
2017-06-09 10:07:56
阅读次数:
328
摘要此篇主要讲Filter插件,已经对nginx日志的各种处理实例接着上篇继续说插件1,Filter插件Grok:正则捕获Date:时间处理Mutate:数据修改Geoip:查询归类JSON:编解码Grok:解析和结构化任何文本。http://grokdebug.herokuapp.com/patterns#匹配规则,注意空格,如果空格不匹..
分类:
其他好文 时间:
2017-05-26 14:30:44
阅读次数:
297
1. 编译nginx时带上geoip模块 2. 下载可以读取GeoIP数据库的工具 上面的操作,将工具安装到了/usr/local/lib目录下,我们需要让其生效。 3. 下载GeoIP数据库 4. 配置nginx,使其能够使用GeoIP库 上面只是简单的使用,更多的知识需要根据实际的情况来自行修改 ...
分类:
其他好文 时间:
2017-05-12 22:07:48
阅读次数:
299
安装指令例如以下所看到的,跟着步骤一步一步运行就可以。使用root权限,假设不是的话,请依据情况加上sudo权限命令。 cd /tmp wget http://geolite.maxmind.com/download/geoip/api/c/GeoIP.tar.gz tar -zxvf GeoIP. ...
分类:
其他好文 时间:
2017-05-07 10:11:02
阅读次数:
178
nginx-t时出现如下错误nginx:[emerg]unknowndirective"geoip_country"in/etc/nginx/nginx.conf:23说明配置文件中调用了geoip相关模块,所以首先保证:nginx-mod-http-geoip或nginx-module-geoip的相关包已经安装完毕;然后在/etc/nginx.conf的配置文件中调用geoip的相关库文件。..
分类:
其他好文 时间:
2017-03-15 10:43:00
阅读次数:
680
基于上一个安装部署的文档后(ELASTIC 5.2部署并收集nginx日志) http://www.cnblogs.com/kerwinC/p/6387073.html 本次带来一些使用的分享。 1、kibana基于geoip数据库绘制地图。 1、postman插件定制mapping并根据mappi ...
分类:
其他好文 时间:
2017-02-16 14:50:28
阅读次数:
295
我的虚拟机中在安装GoAccess的时候,说找不到GeoIP...尴尬。 这里暂时不说GeoIP的事情,我想更新一下我的yum源,因为我系统(Centos 6.5)使用的是默认的源。速度比较慢,这里先换一下源,我采用的是阿里的源。 第一步:备份你的原镜像文件,以免出错后可以恢复。 第二步:下载新的C ...
分类:
其他好文 时间:
2016-12-25 23:29:37
阅读次数:
253
一.简介1.goaccess用于分析apache和nginx日志的强大工具 2.官网:https://goaccess.io 二.安装1.下载goaccess的安装包wget http://tar.goaccess.io/goaccess-1.1.1.tar.gz 2.如果需要启用geoip,则1. ...
分类:
数据库 时间:
2016-12-18 14:44:38
阅读次数:
288
我们通过Logstash收集的Nginx Access log中已经包含了客户端IP的数据(remote_addr),但是只有这个IP还不够,要在Kibana的显示请求来源的地理位置还需要借助GeoIP数据库来实现。GeoIP 是最常见的免费 IP 地址归类查询库,同时也有收费版可以采购。GeoIP ...
分类:
其他好文 时间:
2016-12-17 13:47:31
阅读次数:
356
这里为大家搜集了一些能够返回JSON格式的服务接口。部分需要用JSONP调用。 电商接口 京东获取单个商品价格接口: http://p.3.cn/prices/mgets?skuIds=J_商品ID&type=1 用例 ps:商品ID这么获取:http://item.jd.com/954086.ht ...