目的：本文描述怎么安装和配置一个单结点的Hadoop，以便搭建能快速简单操作和使用Hadoop的MapReduce和Hadoop的分布式文件系统(HDFS);先决条件：支持的平台GNU/Linux
可用作开发和生产平台. Hadoop 在GNU/Linux clusters with 2000 no...
分类：
其他好文 时间：
2014-07-22 23:14:55
阅读次数：
435
基础配置:Hadoop 2.2.0，Hbase
0.96。四台集群机器，一台master，三台slave。三台slave上分别装gmond；namenode机器上设置datasource。客户端：安装wget：sudo
yum -y install wget安装epel库： a) 下载epel r....
分类：
其他好文 时间：
2014-07-22 23:08:34
阅读次数：
573
1. 下载YCSB 0.1.3：wget
https://github.com/brianfrankcooper/YCSB/archive/0.1.3.tar.gz2. 解压缩：tar zxvf
0.1.3.tar.gz3.安装ant：sudo yum install ant4.把hadoop和hb...
分类：
其他好文 时间：
2014-07-22 23:08:34
阅读次数：
412
在使用ElasticSearch的时候，我们需要与Cluster通信，Java版本的API提供了几种方式来构造Client，进而通过Client操作Cluster。1）使用Node与clustor通信原理：通过在程序中创建一个嵌入es节点（Node），使之成为ElasticSearch集群的一部分，...
分类：
其他好文 时间：
2014-07-22 23:08:14
阅读次数：
315
CentOS 6.4 64位 源码编译hadoop 2.2.0搭建环境:Centos 6.4
64bit1、安装JDK参考这里2、安装mavenmaven官方下载地址，可以选择源码编码安装，这里就直接下载编译好的wget
http://mirror.bit.edu.cn/apache/maven/m...
分类：
其他好文 时间：
2014-05-01 15:17:23
阅读次数：
524
connect resource权限；grant connect,resource to
user;后用户包括的权限:CONNECT角色： --是授予最终用户的典型权利，最基本的ALTER SESSION --修改会话CREATE CLUSTER
--建立聚簇CREATE DATABASE LINK...
分类：
数据库 时间：
2014-05-01 14:58:47
阅读次数：
456
在SQL2012以前，高可用自动切换方案就是SQL群集了，优点就是切换完全自动，缺点也有很多，然后2012出现了alwaysOn特性，在高可用上有了很大的提升，今天这个测试是将2个特性结合在一起做一个高可用的方案。这个方案的优点就是数据上，主数据只有一份，而且不受alwaysOn节点数限制，缺点就是...
分类：
数据库 时间：
2014-04-30 21:43:08
阅读次数：
566
以下主要讲解了Hadoop的文件读写操作流程：读文件 读文件时内部工作机制参看下图：
客户端通过调用FileSystem对象（对应于HDFS文件系统，调用DistributedFileSystem对象）的open()方法来打开文件（也即图中的第一步），DistributedFileSystem通.....
分类：
其他好文 时间：
2014-04-30 13:39:04
阅读次数：
375
本文记录Hadoop 2.x在Linux x64下重新编译的过程。环境：Centos 6.5
x64 &Hadoop 2.2一、安装编译包yum install svnyum install autoconfautomake libtool
cmakeyum install ncurses-deve...
分类：
其他好文 时间：
2014-04-29 19:19:52
阅读次数：
451
使用公钥登录OpenSSH2013年10月24日16:47 生成密钥对
我所知道的，有三种生成密钥对的工具，分别为GNU/Linux下的ssh-keygen命令、puttygen、SSH Secure Shell。
使用ssh-keygen生成密钥对 [root@ld365 ~]# ssh-keyg...
分类：
其他好文 时间：
2014-04-29 10:11:47
阅读次数：
615
