一、hadoop 2.x产生背景 1、hadoop 1.x中hdfs和mr在高可用和扩展性等方面存在问题。2、hdfs存在的问题：NN单点故障，难以应用于在线场景；NN压力过大，内存受限，影响系统扩展性。3、mr存在的问题：1.x难以支持除mr之外的计算框架，如spark和storm(mr一般得到结 ...
分类：
其他好文 时间：
2016-11-20 19:19:30
阅读次数：
341
写这篇文章，是因为最近遇到了mapreduce的二次排序问题。以前的理解不完全正确。首先看一下mapreduce的过程 相信这张图熟悉MR的人都应该见过，再来一张图 wordcount也不细说了，hadoop里面的hello,world 之前我的理解是map过来的<k,v>会形成(k,<v1,v2, ...
分类：
其他好文 时间：
2016-11-18 17:56:29
阅读次数：
222
Description 7月17日是Mr.W的生日，ACM-THU为此要制作一个体积为Nπ的M层生日蛋糕，每层都是一个圆柱体。 设从下往上数第i(1 <= i <= M)层蛋糕是半径为Ri, 高度为Hi的圆柱。当i < M时，要求Ri > Ri+1且Hi > Hi+1。 由于要在蛋糕上抹奶油，为尽可 ...
分类：
其他好文 时间：
2016-11-17 01:31:02
阅读次数：
146
微软Hololens的定位是一款MR 设备（Mixed reality）。MR与AR的不同我认为是MR能够将真实环境的场景信息与虚拟对象进行完美的融合，它是基于SLAM（SimultaneousLocalization and Mapping）实时定位和场景建模的技术，使得设备能够识别周围环境，并且 ...
分类：
其他好文 时间：
2016-11-16 20:20:12
阅读次数：
261
题目背景 7月17日是Mr.W的生日，ACM-THU为此要制作一个体积为Nπ的M层 生日蛋糕，每层都是一个圆柱体。 设从下往上数第i(1<=i<=M)层蛋糕是半径为Ri, 高度为Hi的圆柱。当i<M时，要求Ri>Ri+1且Hi>Hi+1。 由于要在蛋糕上抹奶油，为尽可能节约经费，我们希望蛋糕外表面（ ...
分类：
其他好文 时间：
2016-11-12 23:13:03
阅读次数：
357
生日蛋糕 Time Limit: 1000MS Memory Limit: 10000K Total Submissions: 18236 Accepted: 6497 Description 7月17日是Mr.W的生日，ACM-THU为此要制作一个体积为Nπ的M层生日蛋糕，每层都是一个圆柱体。 设 ...
分类：
其他好文 时间：
2016-11-12 23:04:31
阅读次数：
307
生日蛋糕 Time Limit: 1000MS Memory Limit: 10000K Total Submissions: 18230 Accepted: 6491 Description 7月17日是Mr.W的生日，ACM-THU为此要制作一个体积为Nπ的M层生日蛋糕，每层都是一个圆柱体。 设 ...
分类：
其他好文 时间：
2016-11-11 09:52:06
阅读次数：
120
生日蛋糕 Time Limit: 1000MS Memory Limit: 10000K Total Submissions: 18225 Accepted: 6486 Description 7月17日是Mr.W的生日，ACM-THU为此要制作一个体积为Nπ的M层生日蛋糕，每层都是一个圆柱体。 设 ...
分类：
其他好文 时间：
2016-11-09 22:39:03
阅读次数：
154
结构可以看作轻量级的类。从使用方式上讲，结构定义了便可直接使用，而类必须创建该类的对象才可使用。从内存的管理上讲，结构对内存的占用是由应用自动维护的，而类则需要手动创建该类的对象，当我们不再需要时要手动释放。 上面就是结构/类的定义方法，在使用方法上稍有不同。 结构定义之后就可以使用了： mr:My ...
目录： 什么是大数据 Hadoop介绍-HDFS、MR、Hbase 大数据平台应用举例-腾讯 公司的大数据平台架构 “就像望远镜让我们能够感受宇宙，显微镜让我们能够观测微生物一样，大数据正在改变我们的生活以及理解世界的方式……”。 大数据的4V特征-来源 公司的“大数据” 随着公司业务的增长，大量和 ...
分类：
其他好文 时间：
2016-11-06 19:53:35
阅读次数：
218
