说明:我使用的是hadoop-1.2.1,开发环境是OpenSuSE12.3 x64。 Hadoop安装在/usr/lib/hadoop下。并且我的hadoop的相关指令已经加入到了系统的path中。
下面四篇有我解决问题时,所主要参考的文档:
1、http://www.cnblogs.com/lanxuezaipiao/p/3648853.html 该博客指出64位的li...
分类:
编程语言 时间:
2015-05-20 18:38:04
阅读次数:
319
1、《从0到1:开启商业与未来的秘密》 彼得·蒂尔、布莱克·马斯特斯2、《疯狂Java实战演义》 李刚3、《习惯的力量》 查尔斯·杜希格4、《Hadoop技术内幕》 董西成5、《解忧杂货店》 东野圭吾6、《自控力》 凯利·麦格尼格尔7、《Hadoop实战(第二版)》 陆嘉恒8、《从零开始学炒股》 杨...
分类:
其他好文 时间:
2015-05-17 23:14:59
阅读次数:
131
一、安装Hadoop:1.1.安装并配置好javavi /etc/profile添加内容:#Set Java Environment export JAVA_HOME="/usr/java/jdk1.7.0_75'' export CLASSPATH=".:$JAVA_HOME/lib:$CLASS...
分类:
其他好文 时间:
2015-05-13 21:37:52
阅读次数:
101
《Hadoop 实战》中的“通过脚本使用Streaming”其中的一个示例:使用脚本来均匀采样一个按行组织的数据文件,在Ubuntu终端输入如下命令:结果如下:修改命令:输出文件如下:
分类:
其他好文 时间:
2015-03-17 17:35:35
阅读次数:
132
第一个Hadoop下的Wordcount程序这次的源码是用的Hadoop实战的源码首先将源码拷贝进Linux下的工作目录下,在/home/hadoop/workspace下。导入两个测试文件echo "Hello World Bye World" file01echo "Hello Hadoop B...
分类:
其他好文 时间:
2015-01-22 17:28:16
阅读次数:
164
Cloudera Hadoop 4 实战课程(Hadoop 2.0、集群界面化管理、电商在线查询+日志离线分析)适合人群:中级课时数量:42课时用到技术:CDH4,Cloudera Manager,Hive,HBase,Sqoop涉及项目:电商业日志流量分析项目咨询qq:1840215592Clou...
分类:
其他好文 时间:
2015-01-13 14:03:03
阅读次数:
151
环境:centos6.4X64192.168.2.20Master192.168.2.21Hadoop1192.168.2.22Hadoop2准备工作:1、安装基本开发工具:(所有服务器)yumgroupinstall"DevelopmentTools"-y2、设置IP和hostname映射关系(所有服务器)vi/etc/hosts修改内容如下192.168.2.20Master192.168.2.21Hadoop11..
分类:
其他好文 时间:
2015-01-09 01:48:11
阅读次数:
275
HDInsight-Hadoop实战(一)网站日志分析
简介
在此示例中,你将使用分析网站日志文件的 HDInsight 查询来深入了解客户使用网站的方式。借助此分析,你可查看外部网站一天内对该网站的访问频率以及用户体验的网站错误总结。...
分类:
Web程序 时间:
2014-12-15 19:05:46
阅读次数:
508
HDInsight-Hadoop实战(二)传感器数据分析
简介
现在很多个人和商业设备含有从物理世界中收集信息的传感器。例如,大多数电话拥有 GPS,健身设备可跟踪你走的步数,恒温控制器可监控建筑的温度。
在此教程中,你将了解如何将 HDInsight 用于处理暖气、通风和空气调节 (HVAC) 系统产生的历史数据,以识别不能有效维持设定温度的系统。你将了解如何:...
分类:
其他好文 时间:
2014-12-15 19:04:53
阅读次数:
376
如何将一个反向引用索引的程序的Reducer输出的类型改为IntWritable public static class Reduce extends MapReduceBase ?????? implements Reducer<Text, Text, Text, IntWritable> { ?????? public...
分类:
其他好文 时间:
2014-12-09 14:09:38
阅读次数:
259