1.用自己的图，描述HDFS体系结构、工作原理与流程。 2.伪分布式安装Hadoop （1）创建hadoop用户 （2）更新apt （3）安装SSH ，配置无密码SSH登录 （4）安装JAVA环境 （5）安装 Hadoop 2.7.1 （6）Hadoop伪分布式配置 （7）运行Hadoop伪分布式实 ...
分类：
其他好文 时间：
2020-10-18 09:54:43
阅读次数：
16
架构图： MHA至少需要三台主机 1、环境要求： 一、配置所有数据节点主机之间可以互相以ssh密钥对方式认证登陆 二、配置manager56主机 无密码ssh登录 所有数据节点主机 配置管理主机56 （主） master51 | | _________________________________ ...
分类：
其他好文 时间：
2019-06-25 16:38:31
阅读次数：
116
环境：Centos 6.9，Hadoop 2.7.1,JDK 1.8.0_161,Maven 3.3.9 前言： 1、配置一台master服务器，两台或多台slave服务器。 2、master可以无密码ssh登陆slave 3、解压安装Hadoop，配置hadoop的core-site.xml、hd ...
分类：
其他好文 时间：
2018-05-04 11:47:17
阅读次数：
172
需求：有3个主机192.168.0.191、192.168.0.192、192.168.0.193，需要实现无密码ssh互联访问 我使用的是root用户进行操作的： 1、每个节点分别检查是否安装openssh （每个节点都做）：如果没有安装ssh，则需要先安装，执行命令： 2、每个节点分别生成公钥和 ...
分类：
系统相关 时间：
2018-02-24 20:43:53
阅读次数：
228
root: 创建各工具的各个账号，创/修密码 安装所有用户需要的语言包 管理各工具软件包，并对用户赋予权限 不同用户不同基础目录、临时目录及不同权限 无密码ssh 在开发和测试环境可以用一个帐号全部管理，省去很多麻烦。 hadoop配置 Hadoop权威指南 v3版：只需要Master到Slave单 ...
分类：
其他好文 时间：
2017-09-22 22:28:35
阅读次数：
158
大概就是说：我使用ssh-keygen在当前家目录创建了一个公钥，通ssh-copy-id -i 把公钥发送过。输入指定对方的用户名密码，然后我就可以登录到你了。互相无密码ssh登录的操作步骤一样！ 1. 2.如果不是默认的22端口，加-p选项 3. ...
分类：
系统相关 时间：
2017-09-05 16:49:54
阅读次数：
178
1、复制SSH密钥到目标主机，开启无密码SSH登录 如果还没有密钥，请使用ssh-keygen命令生成。 2、从某主机的80端口开启到本地主机2001端口的隧道 现在你可以直接在浏览器中输入http://localhost:2001访问这个网站。 3、将你的麦克风输出到远程计算机的扬声器 这样来自你 ...
分类：
其他好文 时间：
2017-06-25 18:37:32
阅读次数：
191
使用场景：1、MySQL数据库的管理员账号只允许本地登录2、应用程序连接账号只允许程序部署服务器所属IP地址连接实现方法：客户端工具通过无密码SSH密钥对连接到MySQL数据库所在服务器，再通过数据库相应的账号在服务器本地登录。1、安装ssh相关程序包yum-yinstallopenssh-client..
分类：
数据库 时间：
2017-05-10 17:53:30
阅读次数：
3362
总体思路，准备主从服务器，配置主服务器可以无密码SSH登录从服务器，解压安装JDK，解压安装Hadoop，配置hdfs、mapreduce等主从关系。 1、环境，3台CentOS7，64位，Hadoop2.7.3需要64位Linux，CentOS7 Minimal的ISO文件只有600M，操作系统十 ...
分类：
其他好文 时间：
2017-01-16 17:55:45
阅读次数：
248
一. 应用场景 假如你Linux Client是客户端, Server为服务器，用户名为user。现在要配置从Client到Server的无密码SSH登录或者无密码的scp拷贝。 例如客户端Client（10.1.10.125） 要 ssh 或者scp 到服务器Server（10.1.10.129） ...
分类：
系统相关 时间：
2016-12-05 19:45:23
阅读次数：
216
