1.Yarn基本服务组件Yarn是一种新的Hadoop资源管理器，它是一个通用资源管理系统，可为上层应用提供统一的资源管理和调度，它的引入为集群在利用率、资源统一管理和数据共享等方面带来了巨大好处。ResourceManager(RM)：负责对各NM上的资源进行统一管理和调度。将AM分配空闲的Container运行并监控其运行状态。对AM申请的资源请求分配相应的空闲Container。主要由两个组
分类：
其他好文 时间：
2018-05-29 21:43:54
阅读次数：
185
Hadoop部分大纲 （一）、Hadoop的起源和背景知识 1、什么是大数据？两个例子、大数据的核心问题是什么？ 2、概念：数据仓库（Data warehouse） 3、概念：OLTP和OLAP 4、（最重要的内容）Google的三篇论文 （1）、GFS:Google File System > H ...
分类：
其他好文 时间：
2018-05-29 21:43:46
阅读次数：
204
首先：java的加密解密模块需要更加精细的算法细节指定 java的加密方式 javax.crypto.Cipher，定义的获取方式 有两个重要参数： 1. transformation定义为 transformation有以下几种： 2.provider 可以通过Security.getProvid ...
分类：
编程语言 时间：
2018-05-29 21:43:36
阅读次数：
745
在linux的用户目录下的.ssh文件下，touch config；注意config的权限控制，-rw-r--r--. 配置内容： ...
分类：
其他好文 时间：
2018-05-29 21:43:27
阅读次数：
136
If判断： 一、语法： 代码1 代码2 代码3 例： cls='human' sex='female' age=18 if cls == 'human' and sex == 'female' and age > 16 and age < 22: print('开始表白') print('end.. ...
分类：
其他好文 时间：
2018-05-29 21:43:18
阅读次数：
188
下面罗列一些实际项目中遇到的一些跨域问题。 1.数据格式错误导致请求失败 请求如下： 控制台打印如下： 原因： datatype设置的格式错误，改成json即可。其实datatype是返回的数据格式类型，这个要看后台返回给我们的到底是什么格式，是json ，那就填json。 2.jsonp跨域 一般 ...
分类：
其他好文 时间：
2018-05-29 21:43:08
阅读次数：
214
前言：MapReduce是用于数据处理的一种编程模型，简单但足够强大，专门为并行处理大数据而设计。MapReduce的处理过程分为两个步骤：map和reduce。每个阶段的输入输出都是key-value的形式，key和value的类型可以自行指定。map阶段对切分好的数据进行并行处理，处理结果传输给reduce，由reduce函数完成最后的汇总。到了2.0之后，MapReduce可以理解为是一个j
分类：
其他好文 时间：
2018-05-29 21:42:58
阅读次数：
166
55-懒省事的小明 内存限制:64MB 时间限制:3000ms Special Judge: No accepted:8 submit:62 题目描述: 小明很想吃果子，正好果园果子熟了。在果园里，小明已经将所有的果子打了下来，而且按果子的不同种类分成了不同的堆。小明决定把所有的果子合成一堆。 因为 ...
分类：
其他好文 时间：
2018-05-29 21:42:42
阅读次数：
216
一定义以及相关概念 互联网的产生带来了机器间通讯的需求，而互联通讯的双方需要采用约定的协议，序列化和反序列化属于通讯协议的一部分。通讯协议往往采用分层模型，不同模型每层的功能定义以及颗粒度不同，例如：TCP/IP协议是一个四层协议，而OSI模型却是七层协议模型。在OSI七层协议模型中展现层（Pres ...
分类：
编程语言 时间：
2018-05-29 21:42:33
阅读次数：
234
Koa开发环境搭建 安装Node.js 安装Node很简单，如果你会安装QQ，我相信安装Node你绝对自己能搞定。但是作Koa2的开发，Node.js是有要求的，它要求Node.js版本高于V7.6。因为node.js 7.6版本开始完全支持async/await,不需要再加flag，所以才能完全你 ...
分类：
其他好文 时间：
2018-05-29 21:42:27
阅读次数：
141
字符编码字符串也是一种数据类型，但是，字符串比较特殊的是还有一个编码问题。我们知道，计算机内部，所有信息最终都是一个二进制值。每一个二进制位（bit）有0和1两种状态，因此八个二进制位就可以组合出256种状态，这被称为一个字节（byte）。也就是说，一个字节一共可以用来表示256种不同的状态，每一个状态对应一个符号，就是256个符号，从00000000到11111111。上个世纪60年代，美国制定
分类：
编程语言 时间：
2018-05-29 21:42:19
阅读次数：
244
机器配置 神舟k610d-i7 i7-4710mq ddr3 1600m 4g *2 sata3 硬盘 东芝 q200ex 240g ssd sata2 硬盘 东芝 500g 7200 2.5寸 GT840m 问题描述 安装linux会卡死在安装界面， 并且发现一个小bug，win10 下硬盘顺序和 ...
分类：
其他好文 时间：
2018-05-29 21:42:10
阅读次数：
171
清除浮动详解 清除浮动主要是为了解决由于浮动元素脱离文流导致的元素重叠或者父元素高度坍塌的问题，而这两个问题分别对应了需要清除浮动的两种种情况：清除前面兄弟元素浮动和闭合子元素浮动（解决父元素高度坍塌）。 清除前面兄弟元素浮动 清除前面兄弟元素浮动很简单，只需要在不想受到浮动元素影响的元素上使用 c ...
分类：
其他好文 时间：
2018-05-29 21:42:03
阅读次数：
161
list comprehension Using a list comprehension: [x for x in iterable] to create list instance [expresion for x in iterabel ] 列表推导式的核心在expression. 列表推推导 ...
分类：
编程语言 时间：
2018-05-29 21:13:32
阅读次数：
175
前言 最近在看侯捷的一套课程《C++面向对象开发》，刚看完第一节introduction之后就被疯狂圈粉。感觉侯捷所提及所重视的部分也正是我一知半解的知识盲区，我之前也写过一些C++面向对象的程序，不过正如侯捷所说，我还仅仅停留于Object-based层面，写程序时总是在想如何封装好一个类，而不是 ...
分类：
编程语言 时间：
2018-05-29 21:13:23
阅读次数：
317
对于类似上文代码，VS编译器会报 “an out-of-line definition of a member of a class template cannot have default arguments”错误。 其原因在于：带有默认参数值的模板类成员不能在类外进行定义，修改方式有两种。 第一 ...
分类：
其他好文 时间：
2018-05-29 21:13:10
阅读次数：
239
