初级篇:(单机模式)
假设配置:(Dual core 2.0GHz,4GB ram,SSD)
基础框架:apache(PHP)
+ Mysql / IIS + MSSQL
(最基础框架,处理一般访问请求)
进阶1:替换Apache为Nginx,并在数据库前加上cache层【数据库的速度是最大的瓶颈】
Nginx(PHP) + Memcache + Mysql
(此时已经...
分类:
其他好文 时间:
2015-01-12 16:31:37
阅读次数:
207
单机模式是Hadoop的默认模式。当首次解压Hadoop的源码包时,Hadoop无法了解硬件安装环境,便保守地选择了最小配置。在这种默认模式下所有3个XML文件均为空。当配置文件为空时,Hadoop会完全运行在本地。因为不需要与其他节点交互,单机模式就不使用HDFS,也不加载任何Hadoop的守护进程。该模式主要用于开发调试MapReduce程序的应用逻辑。
1.配置hadoop_home/et...
分类:
其他好文 时间:
2015-01-04 11:25:01
阅读次数:
206
第一部分 TCP _IP基础知识现在的计算机网络经过了迅猛的发展,有原来的单机模式变为了现在的广域网和局域网模式,左图实例为局域网,右图示例为广域网、计算机之间数据的传递是以"包"的形式进行的。人们在邮寄包裹的时候,通常会填写一个寄件单贴到包裹上再交给邮局。单子上肯定要填写寄件人和收件人的详细地址,...
分类:
其他好文 时间:
2015-01-02 21:06:05
阅读次数:
297
1. 添加用户及用户组
创建用户hadoop
$ sudo adduser hadoop
需要输入shiyanlou的密码:shiyanlou。并按照提示输入hadoop用户的密码。
2. 添加sudo权限
将hadoop用户添加进sudo用户组
$ sudo usermod -G sudo hadoop
四、安装及配置依赖的软件包
1. 安装openssh-server、ja...
分类:
其他好文 时间:
2014-12-23 21:11:46
阅读次数:
156
二、Hadoop伪分布式模式配置
本实验需要按照上一节单机模式部署后继续进行操作
1. 配置core-site.xml, hdfs-site.xml,mapred-site.xml及yarn-site.xml
1).修改core-site.xml:
$ sudo gvim /usr/local/hadoop/etc/core-site.xml
configurat...
分类:
其他好文 时间:
2014-12-23 21:11:31
阅读次数:
173
本文系统:Centos6.5 x64
一、单机模式安装
二、伪集群模式安装
三、集群模式安装
1、单机模式安装zookeeper
1.1、创建帐号zk
1
2
[root@master ~]# useradd -d /opt/zk zk
[root@master ~]# echo "zk" |passwd...
分类:
其他好文 时间:
2014-11-20 17:00:45
阅读次数:
357
本文系统:Centos6.5x64一、单机模式安装二、伪集群模式安装三、集群模式安装1、单机模式安装zookeeper1.1、创建帐号zk[root@master~]#useradd-d/opt/zkzk
[root@master~]#echo"zk"|passwd--stdinzk1.2、下载、解压、[root@master~]#su-zk
[zk@master~]$pwd
/opt/zk
[zk@master..
分类:
其他好文 时间:
2014-11-19 16:12:35
阅读次数:
261
1:下载安装包(我下载的0.94版本,如果考虑后期与hadoop兼容,需要找合适的版本)http://mirrors.hust.edu.cn/apache/hbase/hbase-0.94.20/hbase-0.94.20.tar.gz安装jdk略2:安装上传至服务器,tar -zxvf解 压即可3...
分类:
其他好文 时间:
2014-11-14 14:13:45
阅读次数:
130
HBase 安装分为:单击模式,伪分布式,完全分布式,在单机模式中,HBase使用本地文件系统而不是HDFS ,所有的服务和zooKeeper都运作在一个JVM中。本文是安装的伪分布式。安装步骤如下 1 环境配置 2 安装说明1 环境配置 1.1 Java JDK 安装,下载JDK,配置环境变...
分类:
系统相关 时间:
2014-11-14 13:49:25
阅读次数:
300