1.取访问前10的ip地址cataccess.log|awk‘{print$1}’|sort|uniq-c|sort-nr|head-10cataccess.log|awk‘{counts[$(11)]+=1};END{for(urlincounts)printcounts[url],url}’2.访问次数最多的文件或页面,比如获取前10cataccess.log|awk‘{print$11}’|sort|uniq-c|sort-nr|head-10..
分类：
Web程序 时间：
2015-09-05 23:55:14
阅读次数：
326
相信大家都知道网站日志是什么东西，可是做SEO的有多少人会去关注分析网站日志呢，又有多少SEOer能看懂网站日志呢？今天就给大家讲解下在网站SEO优化中，怎样利用网站日志的诊断和分析来提高网站关键词的排名。首先我们仙说下网站日志分析的作用，对于一个刚上线的网站，我们能分析出来搜索引擎蜘蛛抓取的情况；...
分类：
Web程序 时间：
2015-08-29 20:04:56
阅读次数：
193
1. 网站日志
常见：CNZZ 百度统计 51.la
个人偏爱：酷统计（http://www.kutongji.com/）
作用：网站流量统计工具
含义：是记录web服务器接收处理请求以及运行时错误等各种原始信息的以（.log）结尾的文件，确切的讲，这就应该是服务器日志。
通过网站日志可以清楚的得知用户(网友、搜索引擎那些蜘蛛程序)在什么IP、什么时间、用什么操作系统、什么浏览器...
分类：
Web程序 时间：
2015-07-28 13:02:35
阅读次数：
169
网站日志分析项目案例（一）项目介绍：http://www.cnblogs.com/edisonchou/p/4449082.html网站日志分析项目案例（二）数据清洗：http://www.cnblogs.com/edisonchou/p/4458219.html网站日志分析项目案例（三）统计分析：...
分类：
Web程序 时间：
2015-04-29 07:05:09
阅读次数：
195
网站日志分析项目案例（一）项目介绍：http://www.cnblogs.com/edisonchou/p/4449082.html网站日志分析项目案例（二）数据清洗：http://www.cnblogs.com/edisonchou/p/4458219.html一、数据情况分析1.1 数据情况回顾...
分类：
Web程序 时间：
2015-04-26 21:11:50
阅读次数：
202
一、项目背景与数据情况1.1 项目来源 本次要实践的数据日志来源于国内某知名的技术学习论坛，该论坛由某培训学校主办，汇聚了众多技术学习者，每天都有人发帖、回帖，如图1所示。图1 项目来源网站-技术学习论坛 本次实践的目的就在于通过对该技术论坛的apache common日志进行分析，计算该论坛的.....
分类：
Web程序 时间：
2015-04-23 01:59:45
阅读次数：
216
如果你是一个站长，可能你也大概知道网站日志文件，也清楚网站原始访问日志文件中每一行记录到底记录了一些什么东西，但是如果叫你直接看这些杂乱的日志，相信你会很抓狂的，所以我们需要找一款专业又好上手的网站日志分析工具来辅助我们日常的原始日志分析工作。
分类：
Web程序 时间：
2015-04-20 18:26:17
阅读次数：
203
0.上传日志文件到linux中，通过flume将文件收集到hdfs中。
执行命令/home/cloud/flume/bin/flume-ng agent -n a4 -c conf -f /home/cloud/flume/conf/a4.conf -Dflume.root.logger=DEBUG,console
1.建立hive表
create external table bb...
分类：
Web程序 时间：
2015-03-28 08:51:36
阅读次数：
156
软件清单：
tomcat7
awstats
步骤：
大致分为：
1 配置tomcat7 TOMCAT_HOME/conf/web.xml使其支持cgi
2 下载并配置awstats
我主要是参考 http://my.oschina.net/fhck/blog/85773和
配置完成的。
配置过程中出现了问题。按照http://www.fkblog.org/blog746
提供的方...
分类：
Web程序 时间：
2015-02-05 20:33:04
阅读次数：
216
HDInsight-Hadoop实战（一）网站日志分析
简介
在此示例中，你将使用分析网站日志文件的 HDInsight 查询来深入了解客户使用网站的方式。借助此分析，你可查看外部网站一天内对该网站的访问频率以及用户体验的网站错误总结。...
分类：
Web程序 时间：
2014-12-15 19:05:46
阅读次数：
508
