码迷,mamicode.com
首页 >  
搜索关键字:scala spark    ( 10387个结果
Scala程序集 N皇后问题
N皇后问题是由8皇后问题推广而来的八皇后问题是一个以国际象棋为背景的问题:如何能够在8×8的国际象棋棋盘上放置八个皇后,使得任何一个皇后都无法直接吃掉其他的皇后?为了达到此目的,任两个皇后都不能处于同一条横行、纵行或斜线上。八皇后问题共有92个解,上图便是其中3个..
分类:其他好文   时间:2015-01-01 18:39:44    阅读次数:262
Scala学习笔记(一)
.类型参数化数组 val arrayString = Array[String](2); arrayString (0)=”Hello”; arrayString (1)=”World”; for (i val a = ‘\101’ a: Char = A 十六进制以前缀’\u’加四位十六进制数字表...
分类:其他好文   时间:2015-01-01 01:22:46    阅读次数:339
Scala中的Implicit(隐式转换,隐式参数,隐式类)
文章来自:http://www.cnblogs.com/hark0623/p/4196452.html 转发请注明代码如下:/** * 隐式转换 隐式参数 隐式类 *///隐式转换class Implicit(a: A) { def Test: Unit = { println("Im...
分类:其他好文   时间:2014-12-31 21:21:55    阅读次数:208
Scala中的match(模式匹配)
文章来自:http://www.cnblogs.com/hark0623/p/4196261.html 转载请注明代码如下:/** * 模式匹配 */case class Class1(param1: String, param2: String)case class Class2(param1: ...
分类:其他好文   时间:2014-12-31 20:05:04    阅读次数:182
scala编程第19章学习笔记(1)——类型参数化
queues函数式队列,信息隐藏,变化型注解
分类:其他好文   时间:2014-12-31 18:23:15    阅读次数:193
Spark与Hadoop MapReduce的对比分析
Spark与Hadoop MapReduce均为开源集群计算系统,但是两者适用的场景并不相同。其中,Spark基于内存计算实现,可以以内存速度进行计算,优化工作负载迭代过程,加快数据分析处理速度;Hadoop MapReduce以批处理方式处理数据,每次启动任务后,需要等待较长时间才能获得结果。在机器学习和数据库查询等数据计算过程中,Spark的处理素的可以达到Hadoop MapReduce...
分类:其他好文   时间:2014-12-31 16:26:30    阅读次数:136
大数据应用领域
聚类模型属于飞溅读式挖掘模型,以用户属性、行为、消费等特征数据为输入,将用户自动聚类为若干类,通常用来挖掘潜在目标客户群体,也可以用在大数据营销工具、CRM工具和防欺诈解决方案上。      分类预测模型分析学习历史数据经验,预测分析未来数据发展方向。模型输出是离散数据或类别的称为分类模型,模型输出是数值类型数据的模型称为数值预测模型。分类模型根据训练数据集的类别号属性,学习现有分类数据的分类规...
分类:其他好文   时间:2014-12-31 16:22:19    阅读次数:161
Scala中的Apply
/** * Created by Administrator on 2014-12-31. */class ApplyTest { def apply() = "Apply customer" def test(): Unit = { println("test") }}object A...
分类:移动开发   时间:2014-12-31 07:37:11    阅读次数:162
2015年计划
2015年其实才真正算的上是我的大数据元年,我需要在这一年中为自己的职业发展打好地基,所以需要做到但不限于:1、熟练使用mr,yarn,spark(spark sql,spark streaming,ml....),hive,mahout,hbase进行开发,并熟悉调优,及其中的执行原理。2、阅读f...
分类:其他好文   时间:2014-12-31 07:35:26    阅读次数:219
Spark on Yarn ”爬坑“集锦(spark1.2)
一、概述Ha,已经有两个月没有更新blog了。由于近排公司需要引入Spark相关技术,我也是作为技术攻关人员之一,在这段时间使用Spark遇到了挺多问题,跌的坑也比较多,这篇blog主要总结一下这段时间使用Spark遇到的一些问题。二、遇到的"坑"和爬坑思路1、SparkSqlonyarn-client模..
分类:其他好文   时间:2014-12-31 06:34:20    阅读次数:1157
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!