第 1 章 Spark 概述 1.1 什么是 Spark 1.2 Spark 内置模块 Spark Core：实现了 Spark 的基本功能，包含任务调度、内存管理、错误恢复、与存储 系统交互等模块。Spark Core 中还包含了对弹性分布式数据集(Resilient Distributed Da ...
分类：
其他好文 时间：
2019-06-17 17:45:42
阅读次数：
110
如果你对在Python生成随机数与random模块中最常用的几个函数的关系与不懂之处，下面的文章就是对Python生成随机数与random模块中最常用的几个函数的关系，希望你会有所收获，以下就是这篇文章的介绍。 random.random()用于生成 用于生成一个指定范围内的随机符点数，两个参数其中 ...
分类：
编程语言 时间：
2019-06-16 13:32:07
阅读次数：
112
# pcjimport time# print(time.localtime())# print(time.time())# #print(help(time)) #获取time的帮助# #time.sleep(1) #睡几秒# print(time.gmtime(10000000000)) # c... ...
分类：
编程语言 时间：
2019-06-16 13:30:21
阅读次数：
105
模块 一个模块就是一个包含了一组功能的python文件,比如spam.py，模块名为spam，可以通过import spam使用。 模块的4种存在方式 1.使用c编写并链接到python解释器的内置模块 2.使用python编写的。py文件 3.包：一堆py文件集合体 q4.已被编译为共享库或dll ...
分类：
其他好文 时间：
2019-06-14 16:20:54
阅读次数：
100
#以上是函数内置模块 time() ,json(),load() 的应用 图片解释如下图 #以下是函数的命名空间 #以下是爬虫百度页面的具体需要获取的信息 和具体操作 #以下是爬取梨视频的操作 #图一 点击视频可找到对应的链接 #图二 #安装requests库 方法 #安装清华园的访问外网 ...
分类：
编程语言 时间：
2019-06-13 20:14:04
阅读次数：
111
什么是difflib?用来做什么?difflib为python的标准库模块，无需安装。作用时对比文本之间的差异。并且支持输出可读性比较强的HTML文档，与Linux下的diff命令相似。在版本控制方面非常有用。符号理解符号含义‘-‘包含在第一个系列行中，但不包含第二个。‘+‘包含在第二个系列行中，但不包含第一个。‘‘两个系列行一致‘?'
分类：
编程语言 时间：
2019-06-11 09:35:12
阅读次数：
155
HMAC：哈希消息认证码 ( Hash-based Message Authentication Code ) HMAC是密钥相关的哈希算法 使用 HMAC 进行加密的Node实现的一种方法： 注： 1.使用hmac加密是需要密钥的； 2.密钥在crypto的createHmac方法的第二个参数传入 ...
分类：
Web程序 时间：
2019-06-10 13:21:41
阅读次数：
105
AES：高级加密标准 ( Advanced Encryption Standard ) AES是一种对称加密算法：加密需要密钥，且加密密钥和解密密钥相同 下面是AES加密的Node实现： 注： 1.update方法只能对源数据或加密数据的前16位进行加密或解密 2.final方法就是解决上面的缺陷， ...
分类：
Web程序 时间：
2019-06-10 13:20:16
阅读次数：
124
MD5：消息摘要算法(Message-Digest Algorithm) SHA家族：安全散列算法( Secure Hash Algorithm ) 1.首先看一个简单的加密 "use strict"; //引入crypto模块const crypto = require("crypto"); // ...
分类：
Web程序 时间：
2019-06-09 23:47:04
阅读次数：
141
[TOC] 为什么要有模块 面条版代码 》函数版代码 》文件版代码（模块） 》文件夹版（包） 代码会变得更加简洁，清晰，模块化 一个模块里会有多个函数，相当于一个大功能细分成多个小功能 1. 自定义模块 2. 第三方模块，如requests 3. 内置模块，如time 4. 包（文件夹） impor ...
分类：
其他好文 时间：
2019-06-09 22:26:23
阅读次数：
123
