最近在学习大数据的离线分析技术，所以在这里通过做一个简单的网站点击流数据分析离线系统来和大家一起梳理一下离线分析系统的架构模型。当然这个架构模型只能是离线分析技术的一个简单的入门级架构，实际生产环境中的大数据离线分析技术还涉及到很多细节的处理和高可用的架构。这篇文章的目的只是带大家入个门，...
分类：
Web程序 时间：
2016-05-31 06:32:23
阅读次数：
621
1：关联分析
2：Apriori算法和FP-growth算法原理
3：使用Apriori算法发现频繁项集
4：使用FP-growth高效发现频繁项集
5：实例：从新闻站点点击流中挖掘新闻报道
以下程序用到的源代码下载地址：GitHub
一：关联分析
1：相关概念
关联分析（association analysis）：从大规模数据集中寻找商品的隐含关系
项集 （itemse...
分类：
编程语言 时间：
2016-05-12 20:32:57
阅读次数：
10759
本文对FP-growth算法进行了简单介绍，并与Apriori算法进行对比，进而用Python对算法进行实现，最后利用FP-growth从新闻网站点击流中进行挖掘。
分类：
编程语言 时间：
2015-10-01 21:49:14
阅读次数：
324
本文要实现一个流程图的绘制，最终的目标是实现流程图的自动绘制，并可进行操作，直接点击流程图上对应的方框就可以让后台跑相应的程序。...
分类：
Web程序 时间：
2015-09-14 22:46:20
阅读次数：
296
浏览器客户端智能自动化：如何取得页面中JavaScript运行时动态生成的URL？
需求
“页面智能拼接”指的是通过启发式查询DOM树，判断出“下一页”链接，取出其href属性。Chromium的官方插件DOM Distiller完成类似的工作，主要目的就是为了将多页点击流程变成单页的Ajax连续阅读体验。
问题是，现在有些网站为了阻止浏览器客户端这么做，将href属性设...
分类：
编程语言 时间：
2015-06-30 15:04:42
阅读次数：
639
斯坦福机器学习公开课---1. 机器学习简单介绍
1.1 介绍
机器学习流行原因---
1) 由人工智能AI发展来的一个领域
2) 是计算机需要开发的一项新的能力，涉及工业和基础学科中的很多内容。
应用学习算法，如设计自主机器人，计算生物学和其他被机器学习影响的领域。
1.2 机器学习应用
1) 数据挖掘
网站点击流数据、电子医疗记录、计算生物...
分类：
其他好文 时间：
2015-02-02 21:38:06
阅读次数：
1210
点击流（ClickStream）是指用户在网站上持续访问的轨迹。众所周知，用户对网站的每次访问包含了一系列的点击动作行为，这些点击行为数据就构成了点击流数据（ClickStreamData），它代表了用户浏览网站的整个流程。目前点击流数据的获取方法有很多，例如通过JS进行事件捕获、发..
分类：
其他好文 时间：
2015-01-14 18:19:11
阅读次数：
201
1、请您在桌面下、点击手菜单键-全局搜索，输入网络助手，点击流量排行，点击批量联网控制，查看该软件下(不能上网的应用)wifi和流量2G/3G下方的选项是否都勾选的。如果没有勾选，请您勾选。2:仍然不行、请您进入系统设置-应用程序-该应用-清除数据，或者卸载该软件，开机后进入应用超市重新下载安装该软...
分类：
微信 时间：
2015-01-05 21:52:00
阅读次数：
277
最近项目组有需求点击流日志需要自己收集，学习了一下flume并且安装成功了。相关信息记录一下。...
分类：
Web程序 时间：
2014-10-15 20:14:11
阅读次数：
227
了解点击流系统和pv/uv的相关计算关于pv的那些事！！·············································&#
分类：
其他好文 时间：
2014-09-10 21:03:01
阅读次数：
171
