第一篇文章还有要修改的地方，现在我的集群已经扩展到5台（虚拟机）有些配置还要改，这一篇记录一下Hadoop HA 和zookeeper的配置，方便自己以后看。 新的HDFS中的NameNode不再是只有一个了，可以有多个（目前只支持2个）。每一个都有相同的职能。 在HDFS(HA...
分类：
其他好文 时间：
2014-09-01 02:43:42
阅读次数：
521
>>> spam, ham = 'yum', 'YUM'>>> spam'yum'>>> ham'YUM'>>> [spam, ham] = ['yum', 'YUM']>>>[spam, ham]['yum', 'YUM']>>> a,b,c,d = 'spam'>>> a's'>>> b&#
分类：
编程语言 时间：
2014-08-29 21:17:10
阅读次数：
312
Item 1: Consider static factory methods instead of constructorsAdvantage:One advantage of static factory methods is that, unlike constructors, they ha...
分类：
编程语言 时间：
2014-08-29 18:12:38
阅读次数：
262
原题戳我Given two words word1 and word2, find the minimum number of steps required to convert word1 to word2. (each operation is counted as 1 step.)You ha...
分类：
其他好文 时间：
2014-08-28 13:04:59
阅读次数：
162
vidir-listening.sh#!/bin/bash#commanddate="/bin/date"ha="/usr/bin/hadoopfs-ls-d"#vary=`$date+%Y`m=`$date+%D|cut-d"/"-f1`d=`$date+%d`h=`$date+%H`dir="/cstreaming/DAT/${y}${m}${d}${h}*"$ha$dir|grep-v-ifound|awk‘{print$6,$7,$8}‘./dir-listening.sh2014-08-2717:0..
分类：
其他好文 时间：
2014-08-27 18:56:00
阅读次数：
188
1.Tachyon简介Tachyon是一个高容错的分布式文件系统，允许文件以内存的速度在集群框架中进行可靠的共享，就像Spark和 MapReduce那样。通过利用信息继承，内存侵入，Tachyon获得了高性能。Tachyon工作集文件缓存在内存中，并且让不同的 Jobs/Queries以及框架都能...
分类：
其他好文 时间：
2014-08-27 18:32:08
阅读次数：
454
在Havana、icehouse版本的生产环境部署中，常常会启用一个外部cron job去监控是否存在down掉的L3，如果存在则将此L3上所有绑定的VRouter重新绑定到其他L3上。...
分类：
其他好文 时间：
2014-08-27 14:43:48
阅读次数：
236
Spark Standalone集群是Master-Slaves架构的集群模式，和大部分的Master-Slaves结构集群一样，存在着Master单点故障的问题。如何解决这个单点故障的问题，Spark提供了两种方案：基于文件系统的单点恢复(Single-Node Recovery with Loc...
分类：
其他好文 时间：
2014-08-26 19:00:56
阅读次数：
567
高可用集群的前提：1、节点需要不停的向其他节点通告自己的心跳信息，以判断节点的健康状态。2、需要使用加密暗号进行沟通，防止任意主机的加入。
3、使用投票机制决定哪个主机为活动主机。一般高可用集群节点为奇数个（至少3个），且当节点过多时，会被划分为多个小的集群，当..
分类：
其他好文 时间：
2014-08-26 17:36:47
阅读次数：
342
原题戳我Given two words word1 and word2, find the minimum number of steps required to convert word1 to word2. (each operation is counted as 1 step.)You ha...
分类：
其他好文 时间：
2014-08-26 00:14:25
阅读次数：
334
