摘要：Hadoop之HDFS文件操作常有两种方式，命令行方式和JavaAPI方式。本文介绍如何利用这两种方式对HDFS文件进行操作。...
分类：
其他好文 时间：
2014-06-20 13:33:46
阅读次数：
151
下午
开启ssh服务：service sshd status
rsa:金融界的加密算法
exit
第一次exit是从ssh退出，第二次是退出终端
ssh hadoop0：使用ssh连接主机名为hadoop0(换成ip地址也行) 的机器
使用ssh和服务器（Linux）进行连接：ssh是加密的连接，相当于过了一圈，又回到了原点，但是是加密了的。
secure shell==s...
分类：
其他好文 时间：
2014-06-20 12:51:48
阅读次数：
253
1. 简介
参见《Hadoop in Action》P102 以及 《Hadoop实战（第2版）》（陆嘉恒）P69
2. 案例
网上大部分的说明仅仅是按照《Hadoop in Action》中的示例代码给出，这里是Hadoop0.20.2版本，在该版本中已经实现了BloomFilter。
案例文件如下：
custome...
分类：
其他好文 时间：
2014-06-20 11:01:33
阅读次数：
197
link：http://blog.csdn.net/uniquechao/article/details/26449761版本信息：
hadoop 2.3.0 hive 0.11.01. Application Master 无法访问 点击application mater 链接，出现
http ....
分类：
其他好文 时间：
2014-06-11 13:08:02
阅读次数：
385
Hbase简介
Hbase 全称是Hadoop DataBase ，是一种开源的，可伸缩的，高可靠，高性能，面向列的分布式存储系统。
类似于Google的BigTable，其分布式计算采用MapReduce，通过MapReduce完成大块数据加载和全表扫描操作。文件存储系统是HDFS，通过Zookeeper来完成状态管理协同服务。不过BigTable只支持一级索引，而Hbase支持一级和二级索...
分类：
其他好文 时间：
2014-06-08 18:24:32
阅读次数：
563
构建一个list注意要标记不要求值，比如用‘ 或者list> (list "a" "b" "c")
("a" "b" "c")或者> '("a" "b" "c")
("a" "b" "c")
查找在一个全是string的list中用正则表达式查找查找第一个匹配到的元素：> (set 'l '("WARNING: org.apache.hadoop.metrics.jvm.EventCounter...
分类：
其他好文 时间：
2014-06-08 16:23:41
阅读次数：
243
下载了Hadoop预编译好的二进制包，hadoop-2.2.0.tar.gz，启动起来后，总是出现这种警告：
WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform... using builtin-java classes where applicable
原因是apache官...
分类：
其他好文 时间：
2014-06-08 09:47:47
阅读次数：
292
系统版本：master:Ubuntu 14.04 salve1:Ubuntu
14.04hadoop: hadoop
2.2.01、系统配置以及安装SSH无密码登陆环境（master&slaves）：修改本机(master)和子节点(slaveN)机器名：打开/etc/hostname文件sudo
...
分类：
其他好文 时间：
2014-06-08 07:32:54
阅读次数：
310
关于hadoop1.X的安装，其实和0.x的基本没有多大的差别。...
分类：
其他好文 时间：
2014-06-07 14:57:07
阅读次数：
195
写在前面一：本文将Hive与HBase整合在一起，使Hive可以读取HBase中的数据，让Hadoop生态系统中最为常用的两大框架互相结合，相得益彰。写在前面二：使用软件说明：约定所有软件的存放目录：/home/yujianxin一、Hive整合HBase原理Hive与HBase整合的实现是利用两者本身对外的API接口互相进行通信，相互通信主要是依靠hive-hbase-handler-0.9.0...
分类：
其他好文 时间：
2014-06-07 13:33:43
阅读次数：
274
