码迷,mamicode.com
首页 > 其他好文 > 详细

Spark学习(一)

时间:2020-01-14 23:47:05      阅读:92      评论:0      收藏:0      [点我收藏+]

标签:lambda   数据库   lam   min   cpu   font   完全   sql   tar   

技术图片

 

 

Spark SQL:数据库

Spark Streaming:流计算框架

GraphX:图计算框架

技术图片

 

 

 使用语言开发:

技术图片

 

 

 技术图片

 

 

 技术图片

 

 

 技术图片

 

 

 技术图片

 

 

 SCALA语言学习(与Java完全兼容)

编程范式:

1,命令式语言:C,C++,Java...基于冯.诺依曼体系结构

2,函数式语言:充分利用多核CPU多线程并发能力 基于λ演算,并发性能非常好

 技术图片

 

 (并发度降低)

技术图片

 

 每个值都是一个对象

安装Scala:(版本对应)http://dblab.xmu.edu.cn/blog/929-2/

技术图片

 

 运行Scala程序:

进入scala,:load scala程序文件(当没有定义对象时)

技术图片

 技术图片

 

当定义对象时:

 技术图片

Spark学习(一)

标签:lambda   数据库   lam   min   cpu   font   完全   sql   tar   

原文地址:https://www.cnblogs.com/lq13035130506/p/12194565.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!