一、概述 shell脚本的交互最常用的方式是使用菜单,通常是echo打印菜单出来。 由于服务别名都写在/etc/hosts中 192.168.155.172 test-1 192.168.155.173 test-2 192.168.155.174 test-3 192.168.155.140 te ...
分类:
系统相关 时间:
2020-04-07 18:37:49
阅读次数:
85
一、Java9新特性:交互式编程工具JShell Shell 是脚本程序的含义,在很多的编程语言里面为了方便使用者进行代码的开发,都会提供有 Shell 交互式编程环境。在 Java9 以前的 Java 编程过程中有时只是为了打印一些文字或字符以验证,而从JAVA9开始提供有JShell命令,可以将 ...
分类:
编程语言 时间:
2020-03-06 19:12:00
阅读次数:
67
实验 4 RDD 编程初级实践 一、实验目的 (1)熟悉 Spark 的 RDD 基本操作及键值对操作; (2)熟悉使用 RDD 编程解决实际具体问题的方法。 二、实验平台 操作系统:Ubuntu16.04 Spark 版本:2.1.0 三、实验内容和要求 1.spark-shell 交互式编程 下 ...
分类:
其他好文 时间:
2020-02-13 23:01:30
阅读次数:
143
1.spark-shell交互式编程 (1) 该系总共有多少学生 scala> val lines = sc.textFile("file:///usr/local/spark/sparklab/Data01.txt") lines: org.apache.spark.rdd.RDD[String] ...
分类:
其他好文 时间:
2020-02-07 22:19:06
阅读次数:
182
spark-shell 交互式编程 数据格式如下所示: Tom,DataBase,80 Tom,Algorithm,50 Tom,DataStructure,60 Jim,DataBase,90 Jim,Algorithm,60 Jim,DataStructure,80 请根据给定的实验数据,在 s ...
分类:
其他好文 时间:
2020-02-07 18:33:27
阅读次数:
72
1.该系总共有多少学生 val lines = sc.textFile("file:///usr/local/spark/sparksqldata/Data01.txt") val par = lines.map(row=>row.split(",")(0)) val distinct_par = ...
分类:
系统相关 时间:
2020-02-06 22:44:07
阅读次数:
106
今天你完成实验四前两个实验。但是!!!在跟eclipse的scala插件做斗争的时候,把hadoop的插件给搞没了,按着林子雨老师的教程走了一遍还是不行,不知不觉又搞了一下午,还是没解决。明天把实验四完成,做一些实验五,希望明天可以把eclipse的问题解决。 1.spark-shell 交互式编程 ...
分类:
其他好文 时间:
2020-02-03 22:31:42
阅读次数:
159
今天完成了实验四,对于spark-shell交互式编程更加了解和RDD以及对于编写独立应用程序sbt的打包编程去重也有了了解 之前安装完sbt后对于后面的打包需要下载一些文件一直失败,后来我把 在网上查询解决方案,找了很久终于 教程里spark-core 换成了spark-sql 然后就下载成功了 ...
分类:
其他好文 时间:
2020-02-03 13:55:53
阅读次数:
72
一、实验目的 (1)熟悉 Spark 的 RDD 基本操作及键值对操作; (2)熟悉使用 RDD 编程解决实际具体问题的方法。 二、实验平台 操作系统:Ubuntu16.04 Spark 版本:2.1.0 三、实验内容和要求 1.spark-shell 交互式编程 请到本教程官网的“下载专区”的“数 ...
分类:
其他好文 时间:
2020-01-25 15:37:40
阅读次数:
356
今天看视频讲的几个系统配置文件看得一脸懵逼,然后我看了些博客,觉得这还是留到系统的启动再详细了解吧,大概说说shell的交互式和登录式来引出profile和bashrc。 简单说交互式就是给你命令提示符让你可以随时输命令,像使用xshell这种远程工具连接上的,还有带图形界面的系统提供的伪终端ter ...
分类:
其他好文 时间:
2019-12-22 00:29:23
阅读次数:
92