memcached的服务端产品本身功能简洁,简单易用,但是玩法多种多样。但是事实上它是一个“伪分布式”解决方案,它本身并没有实现服务端分布式(服务端的memcached server之间是不能通信的),所谓的分布式都是依靠客户端来实现,而目前市面上提供了客户端分布式实现的开源工具很多,在这里我主要以Spymemcached这个客户端实现为基础讲述一些memcached的原理和应用。...
分类:
系统相关 时间:
2014-11-05 17:24:01
阅读次数:
328
前面虽然配置了集群模式的Zookeeper,但是为了方面学建议在伪分布式模式的Zookeeper学习Zookeeper的shell命令。一、Zookeeper的四字命令 Zookeeper支持某些特定的四字命令字母与其的交互。他们大多数是查询命令,用来获取Zookeeper服务的当前状态及相关...
分类:
其他好文 时间:
2014-11-03 11:27:25
阅读次数:
314
本文是根据Hadoop官网安装教程写的Hadoop YARN在单机伪分布式环境下的安装报告,仅供参考。
1. 安装环境如下:
操作系统:Ubuntu14.04
Hadoop版本:hadoop-2.5.0
Java版本:openjdk-1.7.0_55...
分类:
其他好文 时间:
2014-10-29 19:20:57
阅读次数:
286
TheFirstPigProgram环境: Hadoop-1.1.2 pig-0.11.1 linux系统为CentOS6.4 jdk1.6在伪分布式下模式下运行启动:pig或pig–xmapreduce启动后会看到这样的界面就表示启动成功了我们来运行一个例子输入数据st...
分类:
其他好文 时间:
2014-10-26 14:16:29
阅读次数:
237
本文将详细介绍CentOS7下安装Hadoop2.2过程,并运行Hadoop自带的WordCount单词计数程序。...
分类:
其他好文 时间:
2014-10-25 15:54:47
阅读次数:
378
搭建为伪分布式Hadoop环境
1、宿主机(Windows)与客户机(安装在虚拟机中的Linux)网络连接。
a) Host-only 宿主机与客户机单独组网;
好处:网络隔离;
坏处:虚拟机和其他服务器之间不能通讯;
b) Bridge 桥接 宿主机与客户机在同一个局域网中。
好处:窦在同一个局域网,可以互相访问;
坏处:不完全。
2、Hadoop的为分布式安装步骤
a) 设置...
分类:
其他好文 时间:
2014-10-20 23:25:50
阅读次数:
230
Hadoop的运行模式有以下三种:
独立模式(standalone或local mode):无需任何守护进程(daemon),所有程序都在单个JVM上执行。主要用在开发阶段。默认属性就是为本模式所设,所以不需要额外的配置。
伪分布式模式(pseudo-distributed model):Hadoop守护进程运行在本地机器上,模拟一个小规模的集群。
全分布模式(full distributed model):Hadoop守护进程运...
分类:
其他好文 时间:
2014-10-13 12:15:19
阅读次数:
252
1.core-site.xml在中插入 fs.default.name hdfs://localhost:9000 dfs.replication 1 ...
分类:
其他好文 时间:
2014-10-12 13:51:37
阅读次数:
190
前言: 毕业两年了,之前的工作一直没有接触过大数据的东西,对hadoop等比较陌生,所以最近开始学习了。对于我这样第一次学的人,过程还是充满了很多疑惑和不解的,不过我采取的策略是还是先让环境跑起来,然后在能用的基础上在多想想为什么。 通过这三个礼拜(基本上就是周六周日,其他时间都在加班啊T ...
分类:
其他好文 时间:
2014-10-09 13:05:13
阅读次数:
292