错误1.错误: 找不到或无法加载主类 idea、scala代码 idea 导入的scala工程，编写代码后报该错误。 原因：\src\main\scala 包路径下没有将scala这个包设置成Sources root 解决：设置scala的文件夹属性 错误2. ERROR scheduler.Liv ...
分类：
其他好文 时间：
2019-12-11 19:34:16
阅读次数：
193
官网：https://www.scala-lang.org/ Scala概述 Scala（发音为/?skɑ?l?, ?ske?l?/）是一门多范式的编程语言，设计初衷是要集成面向对象编程和函数式编程的各种特性。 Scala运行于Java平台（Java虚拟机），并兼容现有的Java程序，Scala的编... ...
分类：
其他好文 时间：
2019-11-25 18:07:13
阅读次数：
60
[TOC]一、scala概述1.1简介?scala是一种多范式的编程语言，其设计的初衷是要集成面向对象编程和函数式编程的各种特性。Scala运行于Java平台（Java虚拟机），并兼容现有的Java程序。它也能运行于CLDC配置的JavaME中。目前还有另一.NET平台的实现，不过该版本更新有些滞后。Scala的编译模型（独立编译，动态类加载）与Java和C#一样，所以Scala代码可以调用Jav
分类：
其他好文 时间：
2019-11-10 21:10:46
阅读次数：
121
scala的wordcount实例 package com.wondersgroup.myscala import scala.actors.{Actor, Future} import scala.collection.mutable.ListBuffer import scala.io.Sour ...
分类：
其他好文 时间：
2019-11-09 19:56:33
阅读次数：
99
安装scala 上传安装包 解压 配置scala相关的环境变量 验证scala安装是否成功 把scala分发给node2 node3 node4 分别给node2 node3 node4配置scala的环境变量，并使其生效 spark安装包下载地址：https://archive.apache.or ...
分类：
其他好文 时间：
2019-11-09 19:51:52
阅读次数：
84
1、scala的主构造器和辅助构造器，scale可以有多个辅助的构造器，但是只能有一个主构造器 package com.itstar.scala.test/** * 定义学生类并且使用了主构造器 * Scala里面只有一个主构造器，可以有多个辅助构造器 * @param stuName * @par ...
分类：
其他好文 时间：
2019-11-09 00:39:37
阅读次数：
95
1、scala的嵌套类也成为内部类 package com.itstar.scala.testimport scala.collection.mutable.ArrayBufferclass Student2 { private var stuName:String = "Tom" private ...
分类：
其他好文 时间：
2019-11-09 00:08:05
阅读次数：
108
一个job对应一个action操作，action执行会有先后顺序； 每个job执行会先构建一个DAG路径，一个job会含有多个stage，主要逻辑在DAGScheduler。 spark提交job的源码见（SparkContext.scala的runJob方法）： DAGScheduler--job ...
分类：
其他好文 时间：
2019-10-27 17:08:08
阅读次数：
115
Scala 比 Java 更面向对象一点，是 Scala 的类不允许静态(static)成员。对此类使用场景，Scala 提供了 单例对象(object)。单例对象的定义看上去跟类定义很像，只不过 class 关键字被换成了 object 关键字。 在事例中单例对象名叫 ChecksumAccumu ...
分类：
其他好文 时间：
2019-10-24 21:24:36
阅读次数：
102
写wiki感觉不太好，直接写个人博客。其中掺杂了太多个人理解，不保证正确性。但是感觉网上的都是官样文章，而且都是抄来抄去，真真叫没意思。新手村推荐一个极好的博客，最好是一边看能够一遍动手验证，看看scala的函数是怎样转化成不同的stage和task的，看看spark-sql是怎么划分的，理解比较深... ...
分类：
其他好文 时间：
2019-10-11 23:12:37
阅读次数：
110
