码迷,mamicode.com
首页 >  
搜索关键字:hadoop伪分布式    ( 147个结果
【转】MapReduce程序的工作过程
原文链接 http://www.cnblogs.com/shengshengwang/p/4852927.html 还记得2.5年前就搭建好了Hadoop伪分布式集群,安装好Eclipse后运行成功了WordCount.java,然后学习Hadoop的步伐就变得很慢了,相信有很多小伙伴和我一样。自己...
分类:其他好文   时间:2015-10-03 13:12:57    阅读次数:214
MapReduce程序的工作过程
还记得2.5年前就搭建好了Hadoop伪分布式集群,安装好Eclipse后运行成功了WordCount.java,然后学习Hadoop的步伐就变得很慢了,相信有很多小伙伴和我一样。自己对MR程序(特指Hadoop 1.x版本)的工作过程一直都不是很清楚,现在重点总结一下,为MR编程打好基础。由于M....
分类:其他好文   时间:2015-10-03 00:57:22    阅读次数:269
ubuntu从头开始搭建hadoop伪分布式环境
13年学习过一段时间的hadoop,但是工作中用到的地方比较少,有些生疏,加上现在hadoop版本也已经比较新了,所以空闲时间想继续学习一下,找到这篇文章,从头开始搭建一个hadoop环境,转过来备忘 Hadoop developer...
分类:系统相关   时间:2015-09-20 17:52:54    阅读次数:324
hadoop伪分布式环境配置
配置hadoop2.7.1伪分布式 需要配置五个文件第一个: vim hadoop-env.sh export JAVA_HOME=/usr/java/jdk1.7.0_80第二个: vim core-site.xml fs.defaultFS hdfs://majiabin01:9000 ...
分类:其他好文   时间:2015-09-19 13:47:48    阅读次数:141
在Ubutun 14.04 Desktop LTS上部署Hadoop 2.7.1(伪分布式)
1、安装Ubutun 14.04 Desktop LTS下载ISO文件,ubuntu-14.04.1-desktop-amd64.iso。在Virtualbox或者VmWare中新建虚拟机,将ISO文件设置为启动光盘。一路下一步,在需要输入用户的地方,输入用户名hduser,直到系统安装完成。重启虚...
分类:其他好文   时间:2015-09-09 16:22:54    阅读次数:253
hadoop二 ---- hadoop伪分布式服务的搭建
ApacheHadoop是一款支持数据密集型分布式应用并以Apache2.0许可协议发布的开源软件框架。它支持在商品硬件构建的大型集群上运行的应用程序。Hadoop是根据Google公司发表的MapReduce和Google档案系统的论文自行实作而成。Hadoop框架透明地为应用提供可靠性和数据移动。它实现了..
分类:其他好文   时间:2015-08-27 19:22:39    阅读次数:197
hadoop三----基于hadoop伪分布式整合hive和hbase
hadoop的生态圈:ETL数据的抽娶转换、加载1)安装hive1.解压#tarzvxfhive-0.13.0.tar.gz-C/usr/local#cd/usr/local#ln-sv/usr/local/hive-0.12.0/usr/local/hive2.替换jar包,保持hbase0.98与hadoop1.2一致#cd/usr/hive/lib#rm-rfhbase-0.94*#find/usr/hbase/lib-name"hbase*.ja..
分类:其他好文   时间:2015-08-27 19:18:59    阅读次数:415
hadoop伪分布式安装
hadoop的伪分布安装:一台实体机或虚拟机的安装。1.1 设置ip地址 执行命令 service network restart 验证: ifconfig1.2 关闭防火墙 执行命令 service iptables stop 验证: service iptables statu...
分类:其他好文   时间:2015-08-15 11:42:42    阅读次数:103
搭建Hadoop的伪分布环境
搭建伪分布环境 上传hadoop2.7.0编译后的包并解压到/zzy目录下 mkdir /zzy 解压 tar -zxvf hadoop.2.7.0.tar.gz -C /zzy 配置hadoop 注意:hadoop2.x的配置文件$HADOOP_HOME/etc/hadoop 伪分布式需要修改5个...
分类:其他好文   时间:2015-08-04 18:55:39    阅读次数:156
hadoop2.7+Spark1.4环境搭建
一、hadoop伪分布式搭建 ????其实官网有比较详实的说明,英语好的可以直接看官网,地址 ????1、安装JDK1.7 ????????这个省略,官网显示1.6可以,但是我用openjdk1.6出了异常,JDK1.6没试,直接用...
分类:其他好文   时间:2015-07-14 18:27:22    阅读次数:172
147条   上一页 1 ... 10 11 12 13 14 15 下一页
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!