Hive是一种构建在Hadoop上的数据仓库，Hive把SQL查询转换为一系列在Hadoop集群中运行的MapReduce作业，是MapReduce更高层次的抽象，不用编写具体的MapReduce方法。Hive将数据组织为表，这就使得HDFS上的数据有了结构，元数据即表的模式，都存储在名为meta....
分类：
其他好文 时间：
2014-05-23 05:54:55
阅读次数：
1771
不管在erlang的shell下还是脚本里，启动参数都是非常有用的，抽空儿整理下erlang的常用启动参数：+A size
异步线程池的线程数，范围为0~1024，默认为10+PNumber|legacy 最大进程数，范围为1024-134217727，默认为262144+K
true | fa.....
分类：
其他好文 时间：
2014-05-23 03:14:03
阅读次数：
629
hadoop
中对java的基本类型进行了writeable的封装，并且所有这些writeable都是继承自WritableComparable的，都是可比较的；并且，它们都有对应的get()
和 set()方法，其中对整型(int 和 long)进行编码的时候，有固定长度格式（intWritabl...
分类：
其他好文 时间：
2014-05-23 03:10:15
阅读次数：
207
Hadoop Eclipse 开发工具 主要分为1、根据Hadoop版本生成插件2、安装Hadoop
Eclipse插件3、配置Hadoop目录4、配置Hadoop连接5、新一个MapReduce工程WordCount.javaMapReduce——WordCount问题总结参考：http://bl...
分类：
系统相关 时间：
2014-05-23 02:44:30
阅读次数：
354
Hadoop 运行环境准备运行环境部署结构介绍Linux
CentOS6.5安装（Hadoop环境配置）Linux
常用远程管理工具介绍SSH免密码登录配置Hadoop安装及配置Hadoop验证-WordCount执行Hadoop开发工具准备Hadoop Eclipse
Plugin配置安装及验证H...
分类：
其他好文 时间：
2014-05-23 02:41:15
阅读次数：
211
1. 说明：
在Shell下，我们可以拥有更加色惨斑斓的提示行信息，这可以通过改变bash的$PS1环境变量还设置，如下面就是提示行的一种：
user@host$
root用户的提示是这样的：
user$host#
2. 提示行的转义字符：
Java代码
序列 ...
分类：
系统相关 时间：
2014-05-23 02:31:58
阅读次数：
373
简介
此文档描述了如何配置Hadoop HTTP web控制台，去要求用户认证。
默认地，Hadoop HTTP web控制台(JobTracker, NameNode, TaskTrackers 和 DataNodes)不需要任何认证就允许访问。
与Hadoop RPC相似, Hadoop HTTP web控制台可以被配置为需要使用HTTP SPNEGO协议认证(由FireFo...
分类：
Web程序 时间：
2014-05-22 23:40:12
阅读次数：
347
通过MapReduce程序分析气象数据集，更好的了解计算过程。环境：Hadoop 1.2.1
& Centos 6.5
x641、气象数据集准备下载链接：ftp://ftp3.ncdc.noaa.gov/pub/data完整数据集非常大，可以下载部分数据集作为日常实验数据。2、气象数据上传到HDFS...
分类：
其他好文 时间：
2014-05-22 15:39:14
阅读次数：
361
Hadoop Studio 是一个 map-reduce
结构的集成开发环境，基于NetBeans。你可以利用它来方便快速的创建基于Hadoop的 map-reduce
应用。该工具提供了一个实时的map-reduce任务的工作流视图，可以显示任务之间独立的输入输出和交互，而且该视图在代码修改时会实...
分类：
其他好文 时间：
2014-05-22 15:06:10
阅读次数：
302
shell命令分成内置命令和外部命令。
内置命令(builtin command) 是shell解释程序内建的，有shell直接执行，不需要派生新的进程。有一些内部命令可以用来改变当前的shell环境。
常见的内部命令有：.(点命令)、bg、cd、continue、echo、exec、exit、export、fg、jobs、pwd、read、return、set、shift、t...
分类：
其他好文 时间：
2014-05-21 13:33:24
阅读次数：
213
