前言 有一段log日志，需从日志里面分析，统计IP访问次数排序前10名，查看是否有异常攻击。 日志提取 如下日志，这段日志包含的信息内容较多，我们希望提取ip,访问时间，请求方式，访问路径（不带参数），状态码 可以使用 awk 对日志内容格式化输出，根据空格格式化输入,第一列是ip,也就是 ,其它列 ...
分类：
编程语言 时间：
2020-05-20 18:37:41
阅读次数：
54
所谓“摆渡”，现实中的摆渡就是在一条船从江河这一边到另一边，再从另一边到这一边。数据摆渡的过程也类似。为了防范网络攻击，通过物理隔离的思路，将两台完全不相连的计算机，通过软盘从一台计算机向另一台计算机拷贝数据，有时候大家形象地称为“数据摆渡”。 传统的跨网数据交换方式有光盘摆渡机。光盘摆渡机简单来讲 ...
分类：
其他好文 时间：
2019-08-19 17:38:45
阅读次数：
83
loki 是一个方便的类似prometheus 的log 系统，mtail 是一个方便的日志提取工具， 可以暴露为http 服务——支持导出prometheus metrics 环境准备 docker-compose 文件 version: "3" services: nginx-log: buil ...
分类：
其他好文 时间：
2018-12-14 00:53:29
阅读次数：
642
Web绘图——mxGraph项目实战(精华篇) 声明 本文部分内容所属论文现已发表，请慎重对待。 需求 由于小论文实验需求，需要实现根据用户日志提取出行为序列，然后根据行为序列生成有向图的形式，并且连接相邻动作的弧上标有执行此次相邻动作的频次，每个动作另附有一个数据集，这样有向图加数据集就构成了用户 ...
分类：
Web程序 时间：
2018-12-08 16:15:17
阅读次数：
283
上周开始我网站遭受了一大波CC攻击，到目前为止仍在继续，作为一个建站小白，我感觉压力好大，又有新的问题要挑战了！ 服务器架设在腾讯云，CC攻击很凶猛，带宽瞬间占满，于是在腾讯云后台配置安全组关闭了80端口，流量瞬间下来了。 服务器上装的安全狗也疯狂报警。。 看来真正遇到问题时，安全狗也顶不住啊，在此 ...
分类：
Web程序 时间：
2018-11-22 14:29:54
阅读次数：
249
1.需求：近期在提取linux服务器下的日志文件时总是需要人工去找某个时间段内的日志文件，很是枯燥乏味，于是乎，我就想着用python结合linux指令来写一个日志提取的脚本，于是就有了以下脚本文件： 2.代码：getlogzip.py ...
分类：
编程语言 时间：
2018-11-07 14:13:56
阅读次数：
303
慢查询： https://blog.csdn.net/leshami/article/details/39829605 日志组成： https://blog.csdn.net/leshami/article/details/39801867 日志提取： https://blog.csdn.net/l ...
分类：
数据库 时间：
2018-06-28 12:10:53
阅读次数：
159
# 故障描述 有一个需求是实时分析API接口访问日志，提取token去数据库查询对应的uid，然后收集一些指标存入到hbase中。 当程序执行一会后会被系统杀死 Killed ! # 故障排查 1、CPU平均负载0.06、内存空闲29G 2、查看系统日志 /var/log/messages 提示：k... ...
分类：
其他好文 时间：
2018-01-25 19:16:19
阅读次数：
139
1.在django views.py中使用HttpResponse： views.py首行加上utf-8编码，将默认unicode编码变为utf-8 下面是利用HttpResponse生成csv文件 从数据库中提取的数据中的中文可以用encode()方法编码，如下： 这里再说一下decode和enc ...
分类：
Web程序 时间：
2017-08-06 23:05:39
阅读次数：
270
访问日志，记录了网站访问者的信息。在一些特殊情况，我们可以通过访问日志提取出我们需要的信息。如：网站受攻击时发起源、统计访问用户大数据分布等。一、网站访问日志1、访问日志配置[root@juispan~]#vi/usr/local/apache2.4/conf/extra/httpd-vhosts.conf
<VirtualHost*..
分类：
Web程序 时间：
2017-08-02 10:12:36
阅读次数：
228
