好程序员大数据学习路线分享scala单列和伴生对象scala单例objectSingletonDemo{defmain(args:Array[String]):Unit={vals=SessionFactoryprintln(s.getSession)println(s.getSession.size)//.size得到几个session对象}}objectSessionFactory{print
分类:
其他好文 时间:
2019-08-22 09:25:14
阅读次数:
83
好程序员大数据学习路线分享高阶函数,我们通常将可以做为参数传递到方法中的表达式叫做函数高阶函数包含:作为值的函数、匿名函数、闭包、柯里化等等。定义函数时格式:val变量名=(输入参数类型和个数)=>函数实现和返回值类型和个数“=”表示将函数赋给一个变量“=>”左面表示输入参数名称、类型和个数,右边表示函数的实现和返回值类型和参数个数作为值的函数定义函数scala>valfun
分类:
其他好文 时间:
2019-08-22 09:24:23
阅读次数:
90
首先我们可以看看大数据岗位的能力要求 一 大数据工程师岗位要求 公司A: 公司B: 二 在面试岗位前,我们必然要经历岗位考核,而考核的内容主要以数据结构和算法为主。 基础算法学习网站如下: https://leetcode.com https://visualgo.net/en 三. 接下来是技能要 ...
分类:
其他好文 时间:
2019-08-16 00:33:18
阅读次数:
155
放假之前,老师给我们推荐了大数据学习的教程:http://dblab.xmu.edu.cn/post/5663/ 初步了解:Hadoop的所要求系统环境适用于Windows,Linux,Mac系统,而我选择使用Linux系统,电脑是Windows系统,在电脑的F盘单独存放有关大数据的所有资料:VMw ...
分类:
其他好文 时间:
2019-08-14 17:17:19
阅读次数:
170
一、boolean类型 1.说明: (1)在java语言中,boolean类型只有两个值:true、false,没有其他的值。在C语言中,是有0代表false和1代表true的 (2)在底层存储的时候boolean类型占用1个字节,因为实际存储的时候false底层是0,true是1 (3)布尔类型在 ...
分类:
编程语言 时间:
2019-08-13 00:29:39
阅读次数:
82
好程序员大数据学习路线hive内部函数,持续为大家更新了大数据学习路线,希望对正在学习大数据的小伙伴有所帮助。1、取随机数函数:rand()语法:rand(),rand(intseed)返回值:double说明:返回一个0到1范围内的随机数。如果指定seed,则会得到一个稳定的随机数序列selectrand();selectrand(10);2、分割字符串函数:split(str,splitor)
分类:
其他好文 时间:
2019-08-13 00:04:35
阅读次数:
125
一、补码简介 1.计算机中的符号数有三种表示方式,即为:原码、反码、补码。三种表示方法均有符号位和数值位,符号位都是0表示正数,符号位都是1表示负数。 2.计算机中的数字的存储方式:在计算机系统中,数值一律用补码来表示和存储,原因在于:使用补码可以将符号位和数值域统一处理,同时,加法和减法可以统一处 ...
分类:
编程语言 时间:
2019-08-10 19:02:01
阅读次数:
115
大数据平台是为了满足企业对于数据的各种要求而产生的。大数据平台:是指以处理海量数据存储、计算及不间断流数据实时计算等场景为主的一套基础设施。典型的包括Hadoop系列、Spark、Storm、Flink以及Flume/Kafka等集群。既可以采用开源平台,也可以采用华为、星环等商业级解决方案,既可以部署在私有云上,也可以部署在公有云上。大数据平台的功能:1、容纳海量数据利用计算机群集的存储和计算能
分类:
其他好文 时间:
2019-08-08 16:04:32
阅读次数:
108
好程序员大数据学习路线分享hive的运行方式,hive的属性设置:1、在cli端设置(只针对当前的session)3、在java代码中设置(当前连接)2、在配置文件中设置(所有session有效)设置属性的优先级依次降低。cli端只能设置非hive启动需要的属性。(log属性,元数据连接属性)查找所有属性:hive>set;查看当前属性的值:通常是hadoophive>set-v;
分类:
其他好文 时间:
2019-08-07 17:28:26
阅读次数:
100
好程序员大数据学习路线之hive表的查询 1.join查询 1、永远是小结果集驱动大结果集(小表驱动大表,小表放在左表)。2、尽量不要使用join,但是join是难以避免的。 leftjoin、leftouterjoin、leftsemijoin(左半开连接,只显示左表信息) hive在0.8版本以后开始支持leftjoin leftjoin和leftouterjoin效果差不多
分类:
其他好文 时间:
2019-08-05 17:29:51
阅读次数:
111