一、角色分配 NN DN SNN node211: * node212: * * node213: * node214: * 二、基础设施配置 网络：IP、hosts、hostname，根据实际情况修改IP ssh： ssh localhost --> exit --> cd ~/.ssh ssh- ...
分类：
其他好文 时间：
2019-04-30 19:48:38
阅读次数：
154
1、利用你最熟悉的语言实现冒泡排序算法？ 2、解释下python中装饰器的概念？ 3、利用你最熟悉的语言实现socket编程的主要函数部分？ 4、socket编程怎么运用在自动化测试中？（有可能接口测试个人理解，具体还得补全） 5、分布式自动化测试知道怎么做的吗？ 6、你的项目总共有多少自动化用例， ...
分类：
其他好文 时间：
2019-04-10 13:57:07
阅读次数：
1316
用来测试，我在VMware下用Centos7搭起一个三节点的Hadoop完全分布式集群。其中NameNode和DataNode在同一台机器上，如果有条件建议大家把NameNode单独放在一台机器上，因为NameNode是集群的核心承载压力是很大的。hadoop版本：Hadoop-2.7.4； had ...
分类：
其他好文 时间：
2019-03-31 13:35:26
阅读次数：
201
一 完全分布式集群(单点） Hadoop官方地址：http://hadoop.apache.org/ 1 准备3台客户机 1.1防火墙,静态IP,主机名 关闭防火墙，设置静态IP，主机名此处略，参考 Linux之CentOS7.5安装及克隆 1.2 修改host文件 我们希望三个主机之间都能够使用主 ...
分类：
其他好文 时间：
2019-03-25 10:29:29
阅读次数：
165
ubuntu系统下: https://blog.csdn.net/u014636511/article/details/80171002 centos系统下: https://blog.csdn.net/Acecai01/article/details/82696363 ...
分类：
其他好文 时间：
2019-03-18 22:22:26
阅读次数：
129
Spark运行模式 Local 多用于本地测试，如在eclipse，idea中写程序测试等。 Standalone Standalone是Spark自带的一个资源调度框架，它支持完全分布式。 Yarn Hadoop生态圈里面的一个资源调度框架，Spark也是可以基于Yarn来计算的。 Mesos 资 ...
分类：
其他好文 时间：
2019-02-23 01:35:09
阅读次数：
214
Title：区块链应用于物联网：一种应用于物联网的，可扩展访问管理的体系结构 Abstract：物联网正在从它的婴儿期走出去，进入完全的成熟期，并且它正在使自己成为未来互联网的一员。对于部署在全球数十亿的设备的管理能力，是其中一个技术挑战。虽然物联网中已经出现访问管理技术，但是这些技术都基于集中式框 ...
分类：
其他好文 时间：
2019-02-08 23:12:14
阅读次数：
207
第4章 Hadoop运行模式4.1 本地运行模式4.1.1 官方Grep案例4.1.2 官方WordCount案例4.2 伪分布式运行模式4.2.1 启动HDFS并运行MapReduce程序4.2.2 启动YARN并运行MapReduce程序4.2.3 配置历史服务器4.2.4 配置日志的聚集4.2 ...
分类：
其他好文 时间：
2019-02-03 10:26:29
阅读次数：
284
1.单机(非分布式)模式 这种模式在一台单机上运行，没有分布式文件系统，而是直接读写本地操作系统的文件系统。 2.伪分布式运行模式 这种模式也是在一台单机上运行，但用不同的Java进程模仿分布式运行中的各类结点: (NameNode,DataNode,JobTracker,TaskTracker,S ...
分类：
其他好文 时间：
2019-01-27 13:00:41
阅读次数：
191
搭建大数据hadoop环境，遇到很多问题，这里记录一部分，以备以后查看。 【遇到问题】、在安装配置完hadoop以后，需要格式化namenode,输入指令：hadoop namenode -format，报错误信息：hadoop： command not found 网上查阅资料，建议检查hadoo ...
分类：
其他好文 时间：
2019-01-24 11:07:03
阅读次数：
141
