1.1 实验环境本教程实验环境:ubuntu16.04 64位 。1.2 docker 安装可以参考菜鸟教程安转完成后启动docker1sudo service docker start运行docker默认的hello-world程序1sudo docker run hello-world运行界面如... ...
分类：
其他好文 时间：
2020-01-29 12:36:10
阅读次数：
82
+ 之前写过一个在mac上安装的教程，这次在ubuntu上安装一次，记录一下 安装过程 + 从官网 "下载" ，这里选择的是python 3.7版本 + 当时用ubuntu里面firefox浏览器自带的下载器下载了5个小时结果失败了，后来用自己的下载器，不到半小时就下载好了。。。要是有同样问题的可以 ...
分类：
系统相关 时间：
2020-01-29 10:34:57
阅读次数：
81
想要在Linux服务器上部署一个qq机器人玩，需要Docker才能运行 开始安装 由于apt官方库里的docker版本可能比较旧，所以先卸载可能存在的旧版本： sudo apt-get remove docker docker-engine docker-ce docker.io 更新apt包索引： ...
分类：
系统相关 时间：
2020-01-28 20:55:47
阅读次数：
95
1.搭建编译环境 sudo apt-get install build-essential2.安装依赖库sudo apt-get install cmake git libgtk2.0-dev pkg-config libavcodec-dev libavformat-dev libswscale- ...
分类：
系统相关 时间：
2020-01-28 19:13:01
阅读次数：
80
0.配置依赖环境，如果不进行这步可能会出现一些问题 sudo apt-get install zlib1g-dev libbz2-dev libssl-dev libncurses5-dev libsqlite3-dev 1.去官网下载Python-3.8.1.tar.xz wget https:/ ...
分类：
编程语言 时间：
2020-01-28 17:10:29
阅读次数：
483
一、实验目的 （1）通过实验学习日志采集工具 Flume 的安装和使用方法； （2）掌握采用 Flume 作为 Spark Streaming 数据源的编程方法。 二、实验平台 操作系统： Ubuntu16.04 Spark 版本：2.1.0 Flume 版本：1.7.0 三、实验内容和要求 1.安 ...
分类：
其他好文 时间：
2020-01-27 23:56:31
阅读次数：
256
host为ubuntu16.04 下载相关工具 $ sudo apt-get install automake bison chrpath flex g++ git gperf \ gawk libexpat1-dev libncurses5-dev libsdl1.2-dev libtool \ ...
分类：
其他好文 时间：
2020-01-27 14:00:38
阅读次数：
96
一、实验目的 （1）通过实验掌握 Spark SQL 的基本编程方法； （2）熟悉 RDD 到 DataFrame 的转化方法； （3）熟悉利用 Spark SQL 管理来自不同数据源的数据。 二、实验平台 操作系统： Ubuntu16.04 Spark 版本：2.1.0 数据库：MySQL 三、实 ...
分类：
其他好文 时间：
2020-01-27 00:20:01
阅读次数：
277
一、实验目的 （1）熟悉 Spark 的 RDD 基本操作及键值对操作； （2）熟悉使用 RDD 编程解决实际具体问题的方法。 二、实验平台 操作系统：Ubuntu16.04 Spark 版本：2.1.0 三、实验内容和要求 1．spark-shell 交互式编程 请到本教程官网的“下载专区”的“数 ...
分类：
其他好文 时间：
2020-01-25 15:37:40
阅读次数：
356
一、实验目的 （1）掌握在 Linux 虚拟机中安装 Hadoop 和 Spark 的方法； （2）熟悉 HDFS 的基本使用方法； （3）掌握使用 Spark 访问本地文件和 HDFS 文件的方法。 二、实验平台 操作系统：Ubuntu16.04； Spark 版本：2.1.0； Hadoop 版 ...
分类：
其他好文 时间：
2020-01-24 17:13:10
阅读次数：
113
