码迷,mamicode.com
首页 > 系统相关 > 详细

spark学习——spark shell学习

时间:2020-02-10 19:42:49      阅读:94      评论:0      收藏:0      [点我收藏+]

标签:l命令   直接   ado   mamicode   info   关于   使用   mic   相关   

 今天按照实验三进行了相关的操作,实验三之前的是关于hadoop 以及hdfs的相关命令的使用,也包括Hadoop以及spark的安装,我之前就已经完成了相关环境的配置,所以我今天直接做了实验三中的spark shell命令的一部分,今天编程的部分因为之前理解了scala的一些编程方法所以今天进行的很顺利,唯一的问题就是对spark shell打包时候的相关语句不是很熟悉,,但是还是经过自己的理解完成了相关的shell命令的编程。

  shell界面代码。

技术图片

 

 打包代码(第一次运行时间有点长)

  技术图片

 

之前的Hadoop的安装我是按照教程一步一步安装的,没有什么突发状况。

spark学习——spark shell学习

标签:l命令   直接   ado   mamicode   info   关于   使用   mic   相关   

原文地址:https://www.cnblogs.com/huan-ch/p/12292304.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!