(1)观察集群配置情况 (2)web界面观察集群运行情况 使用netstat命令查看端口监听 浏览器地址栏输入:http://192.168.56.100:50070 (3)对集群进行集中管理 a) 修改master上的/usr/local/hadoop/etc/hadoop/slaves文件 先使 ...
分类:
其他好文 时间:
2018-08-07 16:48:34
阅读次数:
196
在实际生产环境中,如果对数据库的读和写都在同一个数据库服务器中操作,无论是安全性、高可用性,还是高并发等各个方面都是完全不能满足实际需求的,因此,一般来说都是通过主从复制(Master-Slave)的方式来同步数据,再通过读写分离来提升数据库的并发负载能力这样的方案来进行部署与实施。
分类:
数据库 时间:
2018-08-03 20:19:38
阅读次数:
208
https://blog.csdn.net/Jack__Frost/article/details/72478400?locationNum=13&fps=1 每台redis的服务器的内存都是有限的,而且也不是所有的内存都用来存储信息。而且redis的实现并没有在内存这块做太多的优化,所以实现者为了 ...
分类:
其他好文 时间:
2018-08-01 01:05:40
阅读次数:
246
设置临时生效1.配置从库192.168.4.58:6058>inforeplication//查看主从配置信息#Replicationrole:masterconnected_slaves:0master_replid:784d7d32d7f522703ca763c6a1a4bb0f8c1db591master_replid2:00000000000000000000000000000000
分类:
其他好文 时间:
2018-07-22 17:41:30
阅读次数:
252
1、./start-yarn.sh 后从服务器没有nodemanager 进程,并且这里没有报错 在从服务器上的日志上见: 从服务器查看日志: 查看2.8.4官方文档: https://hadoop.apache.org/docs/r2.8.4/hadoop-mapreduce-client/had ...
分类:
其他好文 时间:
2018-07-15 19:36:43
阅读次数:
591
1 复制概述 Mysql内建的复制功能是构建大型,高性能应用程序的基础。将Mysql的数据分布到多个系统上去,这种分布的机制,是通过将Mysql的某一台主机的数据复制到其它主机(slaves)上,并重新执行一遍来实现的。复制过程中一个服务器充当主服务器,而一个或多个其它服务器充当从服务器。主服务器将 ...
分类:
数据库 时间:
2018-07-09 13:30:24
阅读次数:
199
1.准备工作 1.1 安装spark,并配置spark-env.sh 使用spark-shell前需要安装spark,详情可以参考http://www.cnblogs.com/swordfall/p/7903678.html 如果只用一个节点,可以不用配置slaves文件,spark-env.sh文 ...
分类:
系统相关 时间:
2018-07-06 18:30:32
阅读次数:
172
MySQL主从复制概念Mysql内建的复制功能是构建大型,高性能应用程序的基础。将Mysql的数据分布到多个系统上去,这种分布的机制,是通过将Mysql的某一台主机的数据复制到其它主机(slaves)上,并重新执行一遍来实现的。复制过程中一个服务器充当主服务器,而一个或多个其它服务器充当从服务器。主服务器将更新写入二进制日志文件,并维护文件的一个索引以跟踪日志循环。这些日志可以记录发送到从服务器的
分类:
数据库 时间:
2018-07-06 12:19:57
阅读次数:
217
1、mysqlrplsync工具。 用来检查主从复制的数据一致性的工具。 mysqlrplsync --master=check:pass@192.168.152.157:3310--slaves=check:pass@192.168.152.159:3311,check:pass@192.168. ...
分类:
数据库 时间:
2018-07-03 14:45:41
阅读次数:
213
DataManager启动失败 启动过程中发现一个问题:slave1,slave2,slave3都是只启动了DataNode,而DataManager并没有启动: 这里一个错误原因可以从: slaves各自的nodemanager日志查看。 查看slave1虚拟机的/opt/hadoop-2.9.0 ...
分类:
其他好文 时间:
2018-06-30 17:01:41
阅读次数:
208