1、软件环境 RHEL6 jdk-8u45hadoop-2.8.1.tar.gz sshxx.xx.xx.xx ip地址 hadoop1xx.xx.xx.xx ip地址 hadoop2xx.xx.xx.xx ip地址 hadoop3xx.xx.xx.xx ip地址 hadoop4xx.xx.xx.xx ip地址 hadoop5本次部署只涉及伪分布式部署只是要主机hadoop1 ? 2.伪分布式
分类：
其他好文 时间：
2018-05-16 10:55:21
阅读次数：
129
1、软件环境RHEL6jdk-8u45hadoop-2.8.1.tar.gzsshxx.xx.xx.xxip地址hadoop1xx.xx.xx.xxip地址hadoop2xx.xx.xx.xxip地址hadoop3xx.xx.xx.xxip地址hadoop4xx.xx.xx.xxip地址hadoop5本次部署只涉及伪分布式部署只是要主机hadoop12.伪分布式部署伪分布式部署文档参考官方网站ha
分类：
其他好文 时间：
2018-05-15 18:30:51
阅读次数：
145
------------------------------软件版本-------------------------------------- RHEL6.8 hadoop2.8.1 apache-maven-3.3.9? ? ?findbugs-1.3.9 protobuf-2.5.0.tar.gz jdk-8u45 ------------------------------软件版本--
分类：
其他好文 时间：
2018-05-15 17:34:10
阅读次数：
161
运行在单节点的YARN您可以通过设置几个参数，另外运行ResourceManager的守护进程和NodeManager守护进程以伪分布式模式在YARN上运行MapReducejob。以下是运行步骤。（1）配置etc/hadoop/mapred-site.xml:<configuration><property><name>mapreduce.framework.
分类：
Web程序 时间：
2018-05-10 15:47:10
阅读次数：
199
（一）、HDFS shell操作 1.2查看文件系统的根目录 1.3.将刚刚创建的文件拷贝到文件系统的根目录下： 1.4.查看文件内容： 1.5创建目录 1.6递归创建目录 1.7查看递归目录 1.8复制文件 1.9从系统中拿出文件 2.0删除文件 2.1删除目录 以上就是最为常用的一些操作命令了， ...
分类：
其他好文 时间：
2018-05-09 19:41:10
阅读次数：
204
一、HDFS伪分布式环境搭建 Hadoop的三种运行模式（启动模式） -格式化文件系统 -格式化文件系统 HDFS公开了文件系统名称空间，允许用户将数据存储在文件中，就好比我们平时使用操作系统中的文件系统一样，用户无需关心底层是如何存储数据的。而在底层，一个文件会被分成一个或多个数据块，这些数据库块 ...
分类：
其他好文 时间：
2018-05-09 19:25:57
阅读次数：
203
当前，Memcached、Redis这类分布式kv缓存已经非常普遍。从本篇开始，本系列将分析分布式缓存相关的原理、使用策略和最佳实践。 我们知道Memcached的分布式其实是一种“伪分布式”，也就是它的服务器结点之间其实是相互无关联的，之间没有网络拓扑关系，由客户端来决定一个key是存放到哪台机器 ...
分类：
其他好文 时间：
2018-05-08 14:23:54
阅读次数：
148
1.安装zookeeper 到/usr/local 2.cd /usr/local/zookeeper 3.cd conf 4.vim zoo.cfg 在最下面添加如下内容 5.cd ../dataDir 6.vim myid 内容 为 1 7. cp zookeeper zookeeper02 复 ...
分类：
其他好文 时间：
2018-05-07 00:48:10
阅读次数：
210
系统为CentOS 6.9，Hadoop版本2.8.3，虚拟机VMware Workstation 主要介绍Linux虚拟机安装、环境配置和Hadoop本地模式的安装。伪分布式和Windows下的安装将另作补充。 网络上关于Hadoop安装的教程非常多，这里主要是归纳出安装过程的简要步骤和可能碰到的 ...
分类：
系统相关 时间：
2018-04-28 10:56:11
阅读次数：
240
