一、实验目的 （1）通过实验掌握 Spark SQL 的基本编程方法； （2）熟悉 RDD 到 DataFrame 的转化方法； （3）熟悉利用 Spark SQL 管理来自不同数据源的数据。 二、实验平台 操作系统： Ubuntu16.04 Spark 版本：2.1.0 数据库：MySQL 三、实 ...
分类：
其他好文 时间：
2020-01-27 00:20:01
阅读次数：
277
无论有无编程基础，无论大人小孩，学习编程语言，建议首选Python。初次接触Python，或者想快速应用Python完成一些任务，建议学习《父与子的编程之旅第2版》电子书和《教孩子学编程Python语言版》电子书。 对于孩子们来说，纯粹的数学计算并不是那么的有趣；而能够做出一个看得到的东西，则是一件 ...
分类：
编程语言 时间：
2020-01-25 00:54:17
阅读次数：
165
厦门大学林子雨，赖永炫，陶继平 编著 《Spark 编程基础（Scala 版）》 教材配套 机房上机实验指南 实验 1 Linux 系统的安装和常用命令 （版本号：2018 年 7 月 19 日版本） （题目） 主讲教师：林子雨 厦门大学数据库实验室 二零一八年七月目录 目录 一、实验目的..... ...
分类：
系统相关 时间：
2020-01-23 09:45:51
阅读次数：
181
一、异常捕获关键字介绍 try:监测有可能出现异常的代码 except：捕获异常，对异常进行处理 else：没有发生异常的处理方式 finallay：不管代码有没有异常都执行 语法： try: # try下面放有可能会出现异常的代码excrpt: # except下面放捕获到异常之后处理的代码els ...
分类：
编程语言 时间：
2020-01-18 19:47:04
阅读次数：
84
一、os模块：python内置的模块之一，它的作用是用来和操作系统进行交互的1）os.path.dirname：获取给定文件路径所在的目录路径（即获取父级路径）2）os.path.join:用来进行路径拼接的3）os.path.abspath:获取绝对路径，获取当前操作系统下的绝对路径 import ...
分类：
编程语言 时间：
2020-01-18 19:39:38
阅读次数：
86
一、模块 1）定义 模块：模块是一个Python文件，以.py结尾，包含了Python对象定义和Python函数包：Python中的包就是一个包含一个__init__.py文件的目录（文件夹） 2）模块的作用 a.模块让你能够有逻辑地组织你的Python代码段 b.把相关功能的代码写到一个模块里面能 ...
分类：
编程语言 时间：
2020-01-18 19:30:44
阅读次数：
93
一、打开文件 open函数： 1）常见参数：第一个，要打开文件或者文件的路径；第二个参数，文件打开的模式，第三个参数，encoding，用来指定文件打开的编码格式（注意，使用rb模式时就不要使用了） 2）常见文件打开的模式： ①r：只读模式，读取普通文件 ②rb：只读模式，是以二进制的编码格式去打开 ...
分类：
编程语言 时间：
2020-01-18 18:06:15
阅读次数：
125
今天主要完成了Scala的配置并学习了Scala的编程基础实践 首先在Scala中，主函数的定义是 def main(args: Array[String]) 这点与java是不同的，java中是静态方法，而Scala中则必须使用对象方法 Scala中变量的定义和使用： Scala中的变量分为两种v ...
分类：
其他好文 时间：
2020-01-15 22:52:39
阅读次数：
81
shell编程是实现linix、UNIX系统管理及自动化运维必备的重要工具，可以把繁琐重复的命令写到shell脚本中执行，节约时间，有效的提高运维人员的工作效率，减少不必要的重复时间 ...
分类：
系统相关 时间：
2020-01-13 19:52:10
阅读次数：
96
1.1编程基础之输入输出(10题) 超级玛丽游戏 #include<iostream> using namespace std; int main() { cout<<" ********"<<endl; cout<<" ************"<<endl; cout<<" ####....#. ...
分类：
其他好文 时间：
2020-01-13 12:58:11
阅读次数：
107
