网站的访问日志是一个非常重要的文件，通过分析访问日志，能够挖掘出很多有价值的信息。本文介绍如何利用Python对一个真实网站的访问日志进行分析，文中将综合运用Python文件操作、字符串处理、列表、集合、字典等相关知识点。本文所用的访问日志access_log来自我个人的云服务器，大家可以从文末的附件中下载。1.提取指定日期的日志下面是一条典型的网站访问日志，客户端访问网站中的每个资源都会产生一条
分类：
编程语言 时间：
2020-02-07 20:41:10
阅读次数：
109
安装dns和http服务配置dns服务，启动服务修改apache配置文件，开启服务，关闭防火墙配置客户机dns地址，访问网站日志分析系统的软件包挂载，安装awstat，解压到/opt目录移动文件至/usr/local/awstats进行配置更改httpd配置文件权限配置文件路径更改awstats配置文件重启服务，访问locallocal改为本地域名用工具刷新服务写入周期性计划任务，启动，更改路径再
分类：
Web程序 时间：
2019-10-26 13:44:50
阅读次数：
119
网站日志能给seo带来很多意想不到的数据情况，通过分析这些数据可以使优化变得更为主动。网站日志对蜘蛛和访客的浏览情况的提供了详细数据。通过分析相关参考数据，可以对蜘蛛行为及网站有更清晰的认识，并且能够提供相应优化方案。从不同角度分析可以得出不同结论，比如从蜘蛛行为角度，我们可以看出蜘蛛的浏览行为，包括蜘蛛停留时间长短、抓取量多少、返回码、唯一抓取量和重复抓取率等。这几个数据对于网站优化能提供如下帮
分类：
Web程序 时间：
2018-11-06 12:00:21
阅读次数：
230
简介：Awstats是一个免费非常简洁而且强大有个性的网站日志分析工具功能：它可以统计您站点的如下信息：1：访问量，访问次数，页面浏览量，点击数，数据流量等2：精确到每月、每日、每小时的数据3：访问者国家4：访问者IP5：Robots/Spiders的统计6：访客持续时间7：对不同Filestype的统计信息8：Pages-URL的统计9：访客操作系统浏览器等信息10：其它信息（搜索关键字等等）具
分类：
其他好文 时间：
2018-08-08 18:54:53
阅读次数：
153
前面一篇应该算是比较详细的介绍了spark的基础知识，在了解了一些spark的知识之后相必大家对spark应该不算陌生了吧！如果你之前写过MapReduce，现在对spark也很熟悉的话我想你再也不想用MapReduce去写一个应用程序了，不是说MapReduce有多繁琐(相对而言)，还有运行的效率 ...
分类：
Web程序 时间：
2018-01-07 20:19:04
阅读次数：
225
1：项目技术架构图： 2：流程图解析，整体流程如下： ETL即hive查询的sql; 但是，由于本案例的前提是处理海量数据，因而，流程中各环节所使用的技术则跟传统BI完全不同: 1) 数据采集：定制开发采集程序，或使用开源框架FLUME 2) 数据预处理：定制开发mapreduce程序运行于hado ...
分类：
Web程序 时间：
2017-12-09 23:50:23
阅读次数：
262
网站日志分析项目案例（一）项目介绍：http://www.cnblogs.com/edisonchou/p/4449082.html 网站日志分析项目案例（二）数据清洗：当前页面 网站日志分析项目案例（三）统计分析：http://www.cnblogs.com/edisonchou/p/446434 ...
分类：
Web程序 时间：
2017-11-03 13:11:02
阅读次数：
230
网站日志分析项目案例（一）项目介绍：当前页面 网站日志分析项目案例（二）数据清洗：http://www.cnblogs.com/edisonchou/p/4458219.html 网站日志分析项目案例（三）统计分析：http://www.cnblogs.com/edisonchou/p/446434 ...
分类：
Web程序 时间：
2017-11-03 13:06:48
阅读次数：
261
网站日志分析项目案例（一）项目介绍：http://www.cnblogs.com/edisonchou/p/4449082.html 网站日志分析项目案例（二）数据清洗：http://www.cnblogs.com/edisonchou/p/4458219.html 网站日志分析项目案例（三）统计分 ...
分类：
Web程序 时间：
2017-11-03 12:57:48
阅读次数：
225
http状态码： 200 正常返回； 301 重定向； 304 页面未修改； 404 无法访问； 500 服务器错误； 503 服务器不可用； 日志分析： 1、软件分析 光年日志分析软件； 2、手工分析； 判别真假蜘蛛： 1、tracert 2、nslookup ...
分类：
Web程序 时间：
2017-07-23 15:18:14
阅读次数：
199
