汇集了spark所支持的Transformation和Action...
分类：
其他好文 时间：
2014-11-09 15:15:51
阅读次数：
149
欢迎关注我的新博客地址：http://cuipengfei.me/blog/2014/10/31/spark-fold-aggregate-why-not-foldleft/大家都知道Scala标准库的List有一个用来做聚合操作的foldLeft方法。比如我定义一个公司类：1case class ...
欢迎关注我的新博客地址：http://cuipengfei.me/blog/2014/10/31/spark-fold-aggregate-why-not-foldleft/
大家都知道Scala标准库的List有一个用来做聚合操作的foldLeft方法。
比如我定义一个公司类：
1
case class Company(name:String, ...
/**Spark SQL源代码分析系列文章*/ 自从去年Spark Submit 2013 Michael Armbrust分享了他的Catalyst，到至今1年多了,Spark SQL的贡献者从几人到了几十人，并且发展速度异常迅猛，究其原因，个人觉得有下面2点： 1、整合：将SQL类型的查...
分类：
数据库 时间：
2014-11-09 09:51:02
阅读次数：
375
1，Scala学习
官方网网站；
http://www.scala-lang.org/
http://www.scala-lang.org/download/
可伸缩的语言是一种多范式的编程语言，一种类似java的编程，设计初衷是要集成面向对象编程和函数式编程的各种特性。
Scala是在JVM上运行。
Scala有几项关键特性表明了它的面向对象的本质。例如，Scala中...
分类：
其他好文 时间：
2014-11-07 20:48:46
阅读次数：
238
注：列表是不可变的，不能通过赋值改变列表的元素 列表具有递归结构，数组是连续的 scala里的列表类型是协变的？ -->scala中的逆变与协变
分类：
其他好文 时间：
2014-11-07 18:42:49
阅读次数：
103
mvn install:install-file -DgroupId=com.asiainfo -DartifactId=spark-assembly -Dversion=1.2.0 -Dpackaging=jar -Dfile=/home/spark/software/source/compile...
分类：
其他好文 时间：
2014-11-07 16:50:59
阅读次数：
166
Tigase是一个基于Java开发的XMPP服务器，类似于Openfire，可用于搭建一个即时通讯（Instant Messaging，简称IM）的平台。1、准备在安装Tigase之前，首先需要准备Java环境以及数据库（本文使用MySQL）。Tigase下载：https://projects.tigase.org/projects/tigase-server/files下载：tigase-ser...
分类：
系统相关 时间：
2014-11-07 14:54:36
阅读次数：
394
模式在变量定义中 在定义val或者var的时候，可以使用模式替代简单的标识符，如可以使用模式拆分元组，并把每个值分配给变量val myTuple = (123,"abc")var (num,str) = myTuple 如此，num=123,str="abc" 如果知道正在使用的样本类的精确结...
分类：
其他好文 时间：
2014-11-06 23:24:22
阅读次数：
249
现在web开发的趋势是前后端分离。前端采用某些js框架，后端采用某些语言提供restful API，两者以json格式进行数据交互。如果后端采用node.js，则前后端可以使用同一种语言，共享某些可重用的Js代码，并共享构建工具。但很多时候我们可能采用别的语言，如ruby/java/scala等，此...
分类：
Web程序 时间：
2014-11-06 19:22:02
阅读次数：
337
