近期读的几篇关于Cassandra 大数据分析的几篇文章,记录下:Big Analytics with R, Cassandra, and Hive中文翻译:http://www.csdn.net/article/2012-05-20/2805705Cassandra联姻Spark 大数据分析将迎来...
分类:
其他好文 时间:
2014-12-15 17:00:04
阅读次数:
192
涉及到的知识点:
检查先决条件。
函数重载。
操作符重载。
控制台输入。
私有函数。
隐式转换。
import java.io.BufferedReader;
import java.io.File;
import java.io.FileInputStream;
import java.io.IOException;
import java.io.InputStreamRe...
分类:
其他好文 时间:
2014-12-14 22:50:25
阅读次数:
265
class multitable{
def makeRowSeq(row: Int) =
for(col <- 1 to 10) yield {
val prod = (row * col).toString;//prod=行号*列号
val padding = " " * (4 - prod.length);//添加padding个空格
padding + pr...
分类:
其他好文 时间:
2014-12-14 22:42:44
阅读次数:
211
通过一个实验来看Spark 中 map 与 flatMap 的区别。...
分类:
其他好文 时间:
2014-12-14 21:22:16
阅读次数:
282
http://www.chinahadoop.cn/page/developer什么是大数据开发师?围绕大数据系平台系统级的研发人员, 熟练Hadoop、Spark、Storm等主流大数据平台的核心框架。深入掌握如何编写MapReduce的作业及作业流的管理完成对数据的计算,并能够使用Hadoop提...
分类:
其他好文 时间:
2014-12-14 19:54:40
阅读次数:
280
7. actor
http://www.scala-lang.org/docu/files/actors-api/actors_api_guide.html#
Scala中处理并发,有很多选择:
l actor消息模型,类似Erlang,首选,Lift和akka也实现了自己的actor模型。
l Thread、Runnable
l java.uti...
分类:
其他好文 时间:
2014-12-14 15:53:24
阅读次数:
283
大数据Scala编程.问题集(02)by高焕堂洞庭国际智能硬件检测基地&中云大数据中心(IDC)首席架构师微博:@高焕堂_台北Q-02:Scala语言的trait具有什么设计涵意?Answer:大家都知道接口(Interface)的概念,也知道一个类(Class)或一个模块(Module)能实现多个接口。就像一个房间可..
分类:
其他好文 时间:
2014-12-14 10:48:23
阅读次数:
201
你肯定见过在控制台用字符打印图形的程序,这一章就从定义一个图形元素开始。我们的图形元素都是一些字符组成的矩形abstractclassElement{
defcontents:Array[String]
defheight:Int=contents.length
defwidth:Int=if(height==0)0elsecontents(0).length
}上面定义的三个方法都..
分类:
其他好文 时间:
2014-12-14 07:11:30
阅读次数:
299
先来看一下一张技术的全景图,其中涉及内存计算的技术标成红色。 1)事务处理:主要分为Cache(Memcached, Redis, GemFire)、RDBMS、NewSQL(以VoltDB为首的)三部分,缓存和NewSQL数据库是关注的重点。2)流式处理:Storm本身只是计算的框架,而Spark-Streaming才实现了内存计算式的流处理。3)分析阶段的对比:Ø 通用处理:MapReduc...
分类:
其他好文 时间:
2014-12-13 15:11:40
阅读次数:
484
一、MapReduce已死,Spark称霸? 由于Hadoop的MapReduce高延迟的死穴,导致Hadoop无力处理很多对时间有要求的场景,人们对其批评越来越多,Hadoop无力改变现在而导致正在死亡。正如任何领域一样,死亡是一个过程,...
分类:
其他好文 时间:
2014-12-12 23:41:39
阅读次数:
563