偶遇大数据学习路线,赶上一次科技革命不容易,追求下,要有所作为!一、Hadoop入门,了解什么是Hadoop1、Hadoop产生背景2、Hadoop在大数据、云计算中的位置和关系3、国内外Hadoop应用案例介绍4、国内Hadoop的就业情况分析及课程大纲介绍5、分布式系统概述6、Hadoop生态圈...
分类:
其他好文 时间:
2015-04-06 11:25:56
阅读次数:
127
1.hadoop是什么? 一个适合大数据的分布式存储和计算平台. 是一个平台,分布式的存储和分布式的计算,在平台之上跑的一般都是大数据.抽象的层面理解hadoop就是一个分布式的平台.2.什么是分布式的存储系统? 数据实际被分散存储,但是对于开发人员而言感觉不到.3.什么是分布式计...
分类:
其他好文 时间:
2015-03-17 23:25:55
阅读次数:
264
Ubuntu系统 (我用到版本号是140.4)ubuntu系统是一个以桌面应用为主的Linux操作系统,Ubuntu基于Debian发行版和GNOME桌面环境。Ubuntu的目标在于为一般用户提供一个最新的、同时又相当稳定的主要由自由软件构建而成的操作系统,它可免费使用,并带有社团及专业的支持应。作...
分类:
系统相关 时间:
2015-03-12 11:10:30
阅读次数:
185
ubuntu安装(这里我就不一一捉图了,只引用一个网址, 相信大家能力)ubuntu安装参考教程: http://jingyan.baidu.com/article/14bd256e0ca52ebb6d26129c.html注意下面几点:1、设置虚拟机的IP, 点击虚拟机的右下角网络连接图标, 选择...
分类:
系统相关 时间:
2015-03-12 11:08:33
阅读次数:
142
【简介】由于hadoop是安装在linux系统,因此需要在linux系统使用eclipse开发java。现在很多公司都要求有在linux上开发java的经验,因此这也是一个练手的绝好机会。学习hadoop不仅仅是学习了hadoop,我相信等hadoop入门,linux也入门了,shell也入门了,linux上开发java也会了,..
分类:
编程语言 时间:
2015-02-27 01:34:53
阅读次数:
360
http://hadoop.apache.org/docs/r1.2.1/api/index.html适当的利用null在map中可以实现对文件的简单处理,如排序,和分集合输出等。需要关心的内容一个节点面对的是一个Map任务,一个Map任务面对的是一个split文件,一个map方法面对的是一个spl...
分类:
其他好文 时间:
2015-01-30 21:02:24
阅读次数:
231
转载请注明出处:http://blog.csdn.net/tang9140/article/details/42869531
最近学习了下hadoop的安装。下面详细说明下步骤
一、环境
我的是在Linux环境下进行安装的。对于想在windows系统上学习的同学,可以采用虚拟机方式或通过cygwin模拟linux环境方式进行学习。
现在有三台服务器,分配如下:
10.0.1....
分类:
其他好文 时间:
2015-01-19 11:00:24
阅读次数:
219
紧接着《Hadoop入门学习笔记---part3》中的继续了解如何用java在程序中操作HDFS。 众所周知,对文件的操作无非是创建,查看,下载,删除。下面我们就开始应用java程序进行操作,前提是按照《Hadoop入门学习笔记---part2》中的已经在虚拟机中搭建好了Hadoop伪分布环...
分类:
其他好文 时间:
2015-01-04 22:43:07
阅读次数:
270
2015年元旦,好好学习,天天向上。良好的开端是成功的一半,任何学习都不能中断,只有坚持才会出结果。继续学习Hadoop。冰冻三尺,非一日之寒! 经过Hadoop的伪分布集群环境的搭建,基本对Hadoop有了一个基础的了解。但是还是有一些理论性的东西需要重复理解,这样才能彻底的记住它们。个人认为重....
分类:
其他好文 时间:
2015-01-01 19:48:18
阅读次数:
228
**********************3A*************************
简介运算 helloworld
1. 验证 hadoop 安装正常
2. bin/hadoop jar hadoopexamples-1.1.2.jar wordcount in out
3. bin/hadoop dfs -ls ...
分类:
其他好文 时间:
2014-12-30 17:11:17
阅读次数:
180