在介绍HDFS读写流程时,先介绍下Block副本放置策略。 Block副本放置策略 第一个副本:放置在上传文件的DataNode;如果是集群外提交,则随机挑选一台磁盘不太满,CPU不太忙的节点。 第二个副本:放置在与第一个副本不同的机架的节点上。 第三个副本:与第二个副本相同机架的节点。 更多副本: ...
分类:
其他好文 时间:
2019-06-06 09:32:22
阅读次数:
115
因为接入交换机YL基本是千兆或者万兆连接,所以你去机房看基本是水绿色的多模,而不是还有些可能超过了100m或者说达到了多模距离的限制了,所以看到有些机架的配线架上面除了单模配线架之外,还有单模配线架,一是因为距离不够多模了,而是可能涉及到模块是单模或者速率问题吧,因为除了万兆下联外还有40G或者100G之类的了
分类:
其他好文 时间:
2019-06-05 11:28:31
阅读次数:
112
首先来了解一下什么是服务器?服务器,也称伺服器,是提供计算服务的设备。由于服务器需要响应服务请求,并进行处理,因此一般来说服务器应具备承担服务并且保障服务的能力。 服务器的构成包括处理器、硬盘、内存、系统总线等,和通用的计算机架构类似,但是由于需要提供高可用的服务,因此在处理能力、稳定性、可靠性、安 ...
分类:
其他好文 时间:
2019-05-31 13:33:07
阅读次数:
96
1、ClouderaManager包含内部机架感知脚本,但您必须指定群集中主机所在的机架。如果您的群集包含10个以上的主机,Cloudera建议您为每个主机指定机架。HDFS,MapReduce和YARN将自动使用您指定的机架。https://www.cloudera.com/documentation/enterprise/5-13-x/topics/cm_mc_specify_rack.htm
分类:
其他好文 时间:
2019-05-23 23:03:26
阅读次数:
210
VLAN的功能区段化:使用VLAN可将单一的交换架构,一个广播域分隔成多个广播域,相当于分隔出物理上分离的多个单独的网络。即将一个网络进行区段化,减少每个区段的主机数量,提高网络性能。灵活性:VLAN配置、成员的添加、移去和修改都是通过在交换机上进行配置实现的。一般情况下无须更改物理网络与增添新设备 ...
分类:
其他好文 时间:
2019-05-22 09:35:15
阅读次数:
75
使用 hadoop fsck /g6/input/baidu.log -files -blocks -locations -racks 命令,查看某个文件分成几个块,分别在那台机架的哪个机器上
分类:
其他好文 时间:
2019-05-17 12:12:34
阅读次数:
140
Apache SkyWalking? | SkyWalking Teamhttp://skywalking.apache.org/zh/ Application performance monitor tool for distributed systems, especially designed ...
分类:
其他好文 时间:
2019-05-06 01:39:12
阅读次数:
143
我们今天介绍一下在Windowsserver版本中如何转移和占用操作主机。首先我们先来了解一下操作主机的概念:林中的操作主机架构主机:用于控制AD整个林中所有对象和属性的定义;域命名主机:控制林中的域的添加和删除,可以防止林中的域名重复。域中的操作主机,有且只有一个PDC仿真主机(1)负责域内的时间同步;(2)最小化密码变化的复制等待时间;RID主机将相对ID(RID)列分配给域中每个域控制器;基
分类:
其他好文 时间:
2019-04-29 17:33:47
阅读次数:
166
定义: 服务器,也称伺服器,是提供计算服务的设备。由于服务器需要响应服务请求,并进行处理,因此一般来说服务器应具备承担服务并且保障服务的能力。 服务器的构成:包括处理器、硬盘、内存、系统总线等,和通用的计算机架构类似,但是由于需要提供高可靠的服务,因此在处理能力、稳定性、可靠性、安全性、可扩展性、可 ...
分类:
其他好文 时间:
2019-04-27 11:33:35
阅读次数:
160
实现Internet,DNS架构有7台虚拟机,架构如图所示。所有主机基于根DNS都做了key验证,根服务器可以基于PSSH轻量级运维工具对所有主机进行配置。先说说排坑,这些台linux主机都是基于pxe自动安装的,最小化安装,配置基本类似,所有内置了yum本地源和epel源(sohuepel生效中),然后当我在web服务器上安装httpd时,由于网卡无外网地址,会报错,不走本地源,只好禁用epel
分类:
Web程序 时间:
2019-04-23 22:37:43
阅读次数:
272