码迷,mamicode.com
首页 >  
搜索关键字:scala spark    ( 10387个结果
Big Analytice with Cassandra
近期读的几篇关于Cassandra 大数据分析的几篇文章,记录下:Big Analytics with R, Cassandra, and Hive中文翻译:http://www.csdn.net/article/2012-05-20/2805705Cassandra联姻Spark 大数据分析将迎来...
分类:其他好文   时间:2014-12-15 17:00:04    阅读次数:192
scala-第六章-Rational
涉及到的知识点: 检查先决条件。 函数重载。 操作符重载。 控制台输入。 私有函数。 隐式转换。 import java.io.BufferedReader; import java.io.File; import java.io.FileInputStream; import java.io.IOException; import java.io.InputStreamRe...
分类:其他好文   时间:2014-12-14 22:50:25    阅读次数:265
scala-第七章-打印9*9乘法口诀表
class multitable{ def makeRowSeq(row: Int) = for(col <- 1 to 10) yield { val prod = (row * col).toString;//prod=行号*列号 val padding = " " * (4 - prod.length);//添加padding个空格 padding + pr...
分类:其他好文   时间:2014-12-14 22:42:44    阅读次数:211
Spark 中 map 与 flatMap 的区别
通过一个实验来看Spark 中 map 与 flatMap 的区别。...
分类:其他好文   时间:2014-12-14 21:22:16    阅读次数:282
大数据学习之路
http://www.chinahadoop.cn/page/developer什么是大数据开发师?围绕大数据系平台系统级的研发人员, 熟练Hadoop、Spark、Storm等主流大数据平台的核心框架。深入掌握如何编写MapReduce的作业及作业流的管理完成对数据的计算,并能够使用Hadoop提...
分类:其他好文   时间:2014-12-14 19:54:40    阅读次数:280
Scala学习笔记7 (actor)
7.   actor http://www.scala-lang.org/docu/files/actors-api/actors_api_guide.html#   Scala中处理并发,有很多选择: l  actor消息模型,类似Erlang,首选,Lift和akka也实现了自己的actor模型。 l  Thread、Runnable l  java.uti...
分类:其他好文   时间:2014-12-14 15:53:24    阅读次数:283
大数据Scala编程.问题集(02)
大数据Scala编程.问题集(02)by高焕堂洞庭国际智能硬件检测基地&中云大数据中心(IDC)首席架构师微博:@高焕堂_台北Q-02:Scala语言的trait具有什么设计涵意?Answer:大家都知道接口(Interface)的概念,也知道一个类(Class)或一个模块(Module)能实现多个接口。就像一个房间可..
分类:其他好文   时间:2014-12-14 10:48:23    阅读次数:201
Programming in Scala (Second Edition) 读书笔记10
你肯定见过在控制台用字符打印图形的程序,这一章就从定义一个图形元素开始。我们的图形元素都是一些字符组成的矩形abstractclassElement{ defcontents:Array[String] defheight:Int=contents.length defwidth:Int=if(height==0)0elsecontents(0).length }上面定义的三个方法都..
分类:其他好文   时间:2014-12-14 07:11:30    阅读次数:299
内存计算技术资料整理
先来看一下一张技术的全景图,其中涉及内存计算的技术标成红色。 1)事务处理:主要分为Cache(Memcached, Redis, GemFire)、RDBMS、NewSQL(以VoltDB为首的)三部分,缓存和NewSQL数据库是关注的重点。2)流式处理:Storm本身只是计算的框架,而Spark-Streaming才实现了内存计算式的流处理。3)分析阶段的对比:Ø  通用处理:MapReduc...
分类:其他好文   时间:2014-12-13 15:11:40    阅读次数:484
【Spark亚太研究院系列丛书】Spark实战高手之路-第3章Spark架构设计与编程模型第1节()
一、MapReduce已死,Spark称霸? 由于Hadoop的MapReduce高延迟的死穴,导致Hadoop无力处理很多对时间有要求的场景,人们对其批评越来越多,Hadoop无力改变现在而导致正在死亡。正如任何领域一样,死亡是一个过程,...
分类:其他好文   时间:2014-12-12 23:41:39    阅读次数:563
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!