在单点或者少数节点故障的情况下,集群还可以正常的提供服务,HDFS高可用机制可以通过配置Active/Standby两个NameNodes节点实现在集群中对NameNode的热备来消除单节点故障问题,如果单个节点出现故障,可通过该方式将NameNode快速切换到另外一个节点上。
分类:
其他好文 时间:
2020-10-29 09:35:04
阅读次数:
15
在《图解Kafka中的基本概念》中已经对副本进行了介绍。我们先回顾下,Kafka中一个分区可以拥有多个副本,副本可分布于多台机器上。而在多个副本中,只会有一个Leader副本与客户端交互,也就是读写数据。其他则作为Follower副本,负责同步Leader的数据,当Leader宕机时,从Follower选举出新的Leader,从而解决分区单点问题。本文将继续深入了解Kafka中副本机制的设计和原理
分类:
其他好文 时间:
2020-10-27 11:55:20
阅读次数:
43
开发小知识之mybatis-plus自动填充与读写分离
分类:
其他好文 时间:
2020-10-27 11:50:50
阅读次数:
25
前面带大家认识了怎么创建用户和组,也学习了如何查看权限,今天就来说一说如何修改文件权限。rwx分别是读、写、执行的意思。三位一组,分成三组,如:rwxr-xrw-,分别对应属主,属组和其他人,但是在我们linux中,是不能直接输入中文的命令进行操作的,那我们该怎么办呢?其实我们的属主这些都有对应的字母表示,属主--u,属组--g,其他人--o,那我们改权限的时候直接使这些字母就好。首先我们先创建一
分类:
系统相关 时间:
2020-10-26 11:31:46
阅读次数:
46
1、使用open内置函数打开一个文件 file:相对路径或者绝对路径 mode:文件的模式。 r 只读 w只写 b:二进制 t:以文本形式打开等等 encoding:编码方式,windows下默认为gbk 例子: 读文件的例子 file=open('./a.txt',encoding='utf8') ...
分类:
编程语言 时间:
2020-10-26 11:21:08
阅读次数:
33
分治思想: 我有一万个元素,查找其中的一个元素,最简单的遍历方法 复杂度为O(4) (遍历四次),如何实现 准备2500个数组 查找x 补充知识:什么是hash & 什么是hashCode https://blog.csdn.net/weixin_38405253/article/details/9 ...
分类:
其他好文 时间:
2020-10-26 11:13:38
阅读次数:
17
1.本地文件系统创建一个文件,输入带姓名学号信息。 2.查看新建文件所在目录 3.查看新建文件内容 4.将此文件上传到HDFS文件系统上的用户目录 5.HDFS上查看相应目录 6.HDFS上查看文件内容 7.HDFS上查看文件大小 8.删除本地1步骤创建的文件 9.将HDFS上的文件下载到本地 10 ...
分类:
其他好文 时间:
2020-10-26 10:51:52
阅读次数:
18
1、本地文件系统创建一个文件,输入带姓名学号信息。 2、查看新建文件所在目录 3、查看新建文件内容 4、将此文件上传到HDFS文件系统上的用户目录 5、HDFS上查看相应目录 6、HDFS上查看文件内容 7、HDFS上查看文件大小 8、删除本地1步骤创建的文件 9、将HDFS上的文件下载到本地 10 ...
分类:
其他好文 时间:
2020-10-26 10:38:19
阅读次数:
21
本地文件系统创建一个文件,输入带姓名学号信息。 查看新建文件所在目录 查看新建文件内容 将此文件上传到HDFS文件系统上的用户目录 HDFS上查看相应目录 HDFS上查看文件内容 HDFS上查看文件大小 删除本地1步骤创建的文件 将HDFS上的文件下载到本地 查看本地文件目录 ...
分类:
其他好文 时间:
2020-10-24 10:30:16
阅读次数:
25