今天接到了KPMG的电话面试。 首先是英文自我介绍，很easy，简单略过。 接下来是技术面。问了一些技术问题。 1. hadoop有没有搭过环境？（我回答搭过）讲下搭建过程？ 答：先是配置网络，关闭防火墙等等，然后下载hadoop安装包，解压，配置core-site.xml，hdfs-site.xm ...
分类：
其他好文 时间：
2019-01-08 21:03:55
阅读次数：
314
一：hadoop安装 /etc/profile hadoop-env.sh core-site.xml hdfs-site.xml mapred-site.xml yarn-site.xml 启动命令： 监控端口： 二：zookeeper安装 conf/zoo.cfg 启动和停止 进入bin目录，启 ...
分类：
其他好文 时间：
2018-12-20 20:35:54
阅读次数：
250
注：图片如果损坏，点击文章链接：https://www.toutiao.com/i6627365258090512909/ 安装好虚拟机（3个节点） YUM源已安装好、系统版本CentOS6.5、java版本是1.7，三个节点，其中一个节点完成Hadoop安装后，启动之前克隆两台节点，并完成hado ...
分类：
其他好文 时间：
2018-12-07 12:04:08
阅读次数：
208
准备工作： 1.设置HADOOP_HOME，指向hadoop安装目录，否则报这个错： 2.在window下，需要把hadoop/bin那个目录替换下，在网上搜一个对应版本的 3.如果还报org.apache.hadoop.io.nativeio.NativeIO$Windows.access0错，把 ...
分类：
其他好文 时间：
2018-12-02 18:31:08
阅读次数：
177
1 wget http://mirrors.tuna.tsinghua.edu.cn/apache/hadoop/common/hadoop-2.8.5/hadoop-2.8.5.tar.gz ...
分类：
其他好文 时间：
2018-11-19 12:36:21
阅读次数：
200
1.Hadoop安装步骤将Hadoop文件拷贝到/usr/local目录下并解压Tar-zxvfhadoop-3.0.0.tar.gz将解压后文件重命名hadoopmvhadoop-3.0.0.tar.gzhadoop1.1、配置hostip映射关系vim/etc/host172.26.19.40hmaster172.26.19.41hslave1172.26.19.42hslave2172.26
分类：
其他好文 时间：
2018-11-16 20:45:28
阅读次数：
202
Hadoop单机的安装 Hadoop的安装包括以下几个步骤： 安装jdk 安装hadoop 安装jdk 保存后退出，执行 执行 ，如果有结果，则说明jdk配置成功。 安装hadoop 第一步：配置免密登陆 到此为止，免密登陆配置完成。可以尝试一下是否配置成功： 如果不需要输入密码，就登陆进去，则说明 ...
分类：
其他好文 时间：
2018-11-14 15:40:32
阅读次数：
124
1.将hadoop安装包解压到windows系统 2.给eclipse配置hadoop插件 3.配置参数 4.将hadoop/conf下的两个相关配置文件(core-site.xml和mapred-site.xml)的ip全部由localhost变为虚拟机ip，如图 参考文章： https://bl ...
以下是本次搭建说使用的服务器 1、分别 在三台服务器上新增用户、组 2、分别 在三台服务器上执行如下操作 3、分别 在三台服务器上执行如下操作 4、分别 在三台服务器上执行如下操作 5、设置SSH免密码远程登录，环境设置：修改sshd的配置文件 重启sshd服务 本机生成公钥和私钥本机切换成需要免密 ...
分类：
其他好文 时间：
2018-11-13 17:19:36
阅读次数：
482
1.环境准备 安装Hadoop 2.7.2 安装scala 2.11.8 安装jdk 1.8.0_171 准备安装包:spark 2.2.2 bin hadoop2.7.tgz,并解压至hadoop用户目录. 2.修改配置文件 .bash_profile spark env.sh(从spark en ...
分类：
其他好文 时间：
2018-11-06 19:36:59
阅读次数：
158
