1、Hadoop系统运行于一个由普通商用服务器组成的计算集群上,能提供大规模分布式数据存储资源的同时,也提供了大规模的并行化计算资源。 2、Hadoop生态系统 3、MapReduce并行计算框架 MapReduce并行计算框架是一个并行化程序执行系统。它提供了一个包含Map和Reduce两个阶段的 ...
分类:
其他好文 时间:
2018-05-16 00:46:15
阅读次数:
375
负载均衡 负载均衡是部署有相同应用的服务器组成的一个集群,每次用户请求都可以发送到集群中任意一台服务器上去处理,任何一台服务器处理结果都是相同的。 负载均衡服务器是一个HTTP请求分发装置,能感知或配置集群的服务器数量,及时发现集群中上线、下线的服务器,并将请求分发到上线的服务器。 实现负载均衡有5 ...
分类:
其他好文 时间:
2018-05-12 23:07:17
阅读次数:
160
Hadoop系统运行于一个由普通商用服务器组成的计算集群上,该服务器集群在提供大规模分布式数据存储资源的同时,也提供大规模的并行化计算资源。 在大数据处理软件系统上,随着Apache Hadoop系统开源化的发展,在最初包含HDFS、MapReduce、HBase等基本子系统的基础上,至今Hadoo ...
分类:
其他好文 时间:
2018-05-10 19:59:17
阅读次数:
207
为何叫反向: 从原理上来说.代理服务器都是处理来自客户端的请求,并将其转发到目的服务器上,所以代理服务器的工作并没有任何反向的意味,而下面这张图就能说明为何反向代理叫反向 从结构上来看,正向代理和反向代理的左右两边换了一下,原本代理服务器的客户端来自内网.其和代理服务器组成一个LAN,而反向代理之后 ...
分类:
其他好文 时间:
2018-05-10 14:25:50
阅读次数:
190
一、DockerSwarm概念1、集群从主机的层面来看,DockerSwarm管理的是DockerHost集群。所以先来讨论一个重要的概念-集群化(Clustering)。服务器集群由一组网络上相互连接的服务器组成,它们一起协同工作。一个集群和一堆服务器最显著的区别在于:集群能够像单个系统那样工作,同时提供高可用、负载均衡和并行处理。如果我们部署应用和服务时选择的是多个独立的服务器而非集群,资源的
分类:
其他好文 时间:
2018-05-07 16:12:39
阅读次数:
207
第一步:设置服务器组 第二步:设置反向代理后端服务器 ...
分类:
其他好文 时间:
2018-04-22 12:59:39
阅读次数:
160
主从复制包含两个步骤: 在 master 主服务器(组)上的设置,以及在 slave 从属服务器(组)上的设置。 环境: MASTER: 192.168.155.101SLAVE: 192.168.155.102 注意点: 1. 配置主服务器 master需要启用二进制日志。2. 给 master ...
分类:
数据库 时间:
2018-04-19 15:00:48
阅读次数:
174
Hadoop MapReduceV2(Yarn) 框架简介 原 Hadoop MapReduce 框架的问题 对于业界的大数据存储及分布式处理系统来说,Hadoop 是耳熟能详的卓越开源分布式文件存储及处理框架,对于 Hadoop 框架的介绍在此不再累述,读者可参考 Hadoop 官方简介。使用和学 ...
分类:
其他好文 时间:
2018-04-17 11:31:17
阅读次数:
153
搭建负载均衡和服务发现服务的目的 随着网站业务的不断提升,单个服务器的性能越来越难满足客户的业务需求,所以很多情况下,需要使用多服务器实例和负载均衡器来满足业务需要。 Nginx 什么是Nginx Nginx一款高性能的Web服务器,它既可以单独使用,也可以作为负载均衡器与其他Web服务器组合使用。 ...
DNS 是域名系统 (Domain Name System) 的缩写,它是由解析器和域名服务器组成的要知道DNS是什么,需要从域这个概念开始了解 这里的域指并非平时我们所说的地理域之类,而指的是"名称域"——"名称空间"  
分类:
其他好文 时间:
2018-04-13 17:56:02
阅读次数:
156