大数据学习路线分享MapReduce全过程解析,移动数据与移动计算 在学习大数据的时候接触了移动数据和移动计算这两种联系紧密而又有很大不同的概念,其中移动计算也叫做本地计算。 在以前的数据处理中时使用的移动数据,其实就是将需要处理的数据传输到存放不同处理数据方式逻辑的各个节点上。这样做的效率很低,特 ...
分类:
其他好文 时间:
2019-08-27 17:29:13
阅读次数:
90
//洗牌函数 shuffle() 接收一个数组 let shuffle = function(pokers){ for(let i=0;i<pokers.length;i++) { let random = parseInt(Math.floor(Math.random()*54));//随机生成5 ...
分类:
其他好文 时间:
2019-08-25 11:40:11
阅读次数:
80
[toc] 大纲 机器环境及SSH预处理 hadoop安装部署 〇、Hadoop下载地址 采用apache官网下载地址进行下载 apache索引目录 "Index of /dist" 此处使用了 hadoop 3.1.2.tar.gz 一、分配机器环境 共3台机器 172.23.7.9 172.23 ...
分类:
其他好文 时间:
2019-08-22 23:41:15
阅读次数:
107
Kia's Calculation Time Limit: 2000/1000 MS (Java/Others) Memory Limit: 32768/32768 K (Java/Others) Problem Description Doctor Ghee is teaching Kia how ...
分类:
其他好文 时间:
2019-08-22 11:02:55
阅读次数:
78
一、什么是Flink? Apache Flink是一个面向分布式数据流处理和批量数据处理的开源计算平台,提供支持流处理和批处理两种类型应用的功能。 二、Flink特点 1、现有的开源计算方案,会把流处理和批处理作为两种不同的应用类型:流处理一般需要支持低延迟、Exactly-Once保证,而批处理一 ...
分类:
其他好文 时间:
2019-08-14 12:51:45
阅读次数:
81
random模块 练习:生成随机验证码 import random def v_code(): code = '' for i in range(5): num=random.randint(0,9) alf=chr(random.randint(65,90)) add=random.choice( ...
分类:
其他好文 时间:
2019-08-10 19:16:08
阅读次数:
72
关于TensorFlow读取数据,官网给出了三种方法: 供给数据(Feeding):在TensorFlow程序运行的每一步,让python代码来供给数据。 从文件读取数据:在TensorFlow图的起始,让一个输入管线从文件中读取数据。 预加载数据:在TensorFlow图中定义常量或变量来保存所有 ...
分类:
其他好文 时间:
2019-07-20 21:21:09
阅读次数:
88
random模块 random主要用于产生随机数 1.randint() 2.random() 3.seed() 4.choice() 5.shuffle() ...
分类:
其他好文 时间:
2019-07-17 18:36:46
阅读次数:
93