eBay已经开源了一种实时大数据分析的平台—— Pulsar,它利用了分布式处理和Complex Event Processing技术,实现了一个低延迟,高可靠的分布式实时分析平台。...
分类:
其他好文 时间:
2015-03-02 14:55:20
阅读次数:
793
当官员落马成为“新常态”,“官员悔过书”也渐渐成为常见文体。以大数据的思维来分析这些文本,竟然发现话语体系已经有了固定模式!理想信念动摇,宗旨观念淡薄;党性锻炼不够,廉政防线不牢;理论学习不够,法律意识不强;个人私欲膨胀,终成金钱奴隶……同质化的高频词汇早已屡见不鲜。而程式化的三段式主题,甚至是所谓...
分类:
其他好文 时间:
2015-03-01 19:42:56
阅读次数:
151
第 1 章数据分析概述 11.1 什么是数据分析 . 21.2 数据分析六步曲 . 21.2.1 明确分析目的和内容 . 21.2.2 数据收集. 31.2.3 数据预处理. 31.2.4 数据分析. 31.2.5 数据展现. 41.2.6 报告撰写. 51.3 数据分析方法简介 . 51.3.1 ...
分类:
其他好文 时间:
2015-03-01 10:21:29
阅读次数:
178
MapReduce是一种可用于数据处理的编程模型,该模型比较简单,但用于编写有用的程序并不简单。Hadoop可以运行由各种语言编写的MapReduce程序。MapReduce程序本质上是并行运行的,因此可以将大规模的数据分析任务交给任何一个拥有足够多机器的运营商。MapReduce的优势在于处理大规模数据集。
MapReduce任务过程被分为两个处理阶段:map阶段和reduce阶段...
分类:
其他好文 时间:
2015-03-01 00:26:33
阅读次数:
239
当当网图书信息:
http://search.dangdang.com/?key=impala
《开源大数据分析引擎Impala实战》目录
第1章 Impala概述、安装与配置................................................................................ 1
1.1 Impala概述..........
分类:
其他好文 时间:
2015-02-28 14:39:19
阅读次数:
156
当当网图书信息:
http://search.dangdang.com/?key=impala
《开源大数据分析引擎Impala实战》前言
写作背景
作为曾经的传统关系型数据库从业者,我们不仅需要了解数据库本身,还需要了解运行数据库的主机,存储数据库数据的仓库,读取数据库数据的中间件以及应用本身的特点。随着硬件的发展以及数据处理的细化,数据库技术从传统的基于磁盘的关系型数据...
分类:
其他好文 时间:
2015-02-28 14:37:29
阅读次数:
145
开篇介绍今天在使用 QV 加载数据的时候会碰到列中的一些状态,信息是通过;或者 / 等符号分隔的,这样不利于做数据分析,因为字符串中的内容本身就是维度。上网搜了一下找到了解决的方法,记录一下。比如第一幅图中 S200,M250,R35 都是 Invoice 的类型,这时都需要取出来作为分析的维度 D...
分类:
其他好文 时间:
2015-02-27 16:29:41
阅读次数:
245
这个系列用于记录工作中利用SSAS和Excel进行数据分析的经验技巧,正片放在了天善(SSAS & Excel BI Tips),番外篇现在打算以博客的形式来分享些小技巧,小到不足以作为独立的课程来讲解,但又是很多BA, BU不熟悉却很有用的技能,献给需要的朋友。此篇说的是Excel的What-If...
分类:
其他好文 时间:
2015-02-26 16:28:35
阅读次数:
470
IDC评述网(idcps.com)02月26日报道:根据WebHosting.info公布的最新数据显示,在2月第3周,国内域名商域名总量十强总体呈下降趋势。其中,降幅最大的是DNSPod,净减16,762个。另外,中国数据退居第9,被爱名网超越。下面,请看相关数据分析。(图1)各域名解析服务商域名总量..
分类:
其他好文 时间:
2015-02-26 11:53:48
阅读次数:
243
这篇日志很简单,因为我对R很不熟悉,总共就写过不超过300行代码。但是可能别的初学者朋友也会遇到类似的问题,所以还是简单总结一下:
R是非常好的统计、机器学习、大数据分析工具(Revolution Analytics这个公司2015年1月刚刚被微软收购),但是其自带的编辑器功能太过于简单了,连代码高亮都没有,偶尔用一下还可以忍受,用多了实在受不了。
这时候就想求助于Sublime Te...
分类:
编程语言 时间:
2015-02-26 01:24:36
阅读次数:
269