现如今,Kafka已不再是一个单纯的消息队列系统。Kafka是一个分布式的流处理平台,被越来越多的公司使用,Kafka可以被用于高性能的数据管道,流处理分析,数据集成等场景。本文分享总结了几个Kafka常见的面试问题,希望对你有所帮助。主要包括以下内容:Kafka是如何保障数据不丢失的?如何解决Kafka数据丢失问题?Kafka可以保障永久不丢失数据吗?如何保障Kafka中的消息是有序的?如何确定
分类:
其他好文 时间:
2020-09-17 23:41:36
阅读次数:
33
本篇就不对Nacos做基本介绍使用了。 紧接上篇,解决集群下动态刷新规则的问题。 前言 上篇提到两个方案 使用MQ对节点进行广播 使用Nacos 由于工作中深度使用到了Nacos,所以本次利用Nacos特性实现。 Nacos很强大,直接包揽服务注册、配置中心,且更有国人特色。 Nacos支持配置修改 ...
分类:
其他好文 时间:
2020-09-17 23:14:46
阅读次数:
29
ansible运行报错:CryptographyDeprecationWarning,本文旨在解决该问题。
分类:
其他好文 时间:
2020-09-17 22:44:47
阅读次数:
58
k8s资源清单及初识pod资源k8s资源对象工作负载型资源(workload):Pod,ReplicaSet,Deployment,StatefulSet,DaemonSet,Job,Cronjob,...服务发现及负载均衡资源:Service,Ingress,...配置与存储相关资源:存储卷(Volume),CSI(容器存储接口);ConfigMap,Secret,DownwardAPI集群级资
分类:
Web程序 时间:
2020-09-17 22:31:44
阅读次数:
40
实验包括:1.使用EMR创建Hadoop集群2.定义schema,创建示例表。3.通过HiveQL分析数据,并将分析结果保存到S3上4.下载已经分析结果数据。Task1:创建一个S3桶创建一个存储桶比如hadoop202006…Task2:创建EMR集群这里我解释一下Hadoop集群中的一些组件,了解大数据的同学直接忽略就好。ApacheHadoop:在分布式服务器集群上存储海量数据并运行分布式分
分类:
其他好文 时间:
2020-09-17 22:02:51
阅读次数:
37
实验包括:创建一个AmazonRedshift集群通过SQL客户端连接AmazonRedshift加载S3的数据到AmazonRedshift查询AmazonRedshift中的数据监控AmazonRedshift的性能Task1:创建一个AmazonRedshift集群Nodes为2个下拉到Databaseconfiguration中:Databasename:labMasterusername
分类:
其他好文 时间:
2020-09-17 22:02:32
阅读次数:
27
在部署zookeeper的时候,大家有没有想过官方为什么建议部署奇数个节点
分类:
其他好文 时间:
2020-09-17 21:16:23
阅读次数:
55
在线安装第一步:验证环境? 验证端口是否被占用第二步:在中控机上安装tiup组件1、执行如下命令安装 TiUP 工具:curl --proto '=https' --tlsv1.2 -sSf https://tiup-mirrors.pingcap.com/install.sh | sh2、按如下步... ...
分类:
数据库 时间:
2020-09-17 20:53:30
阅读次数:
77
##SpringCloud之Eureka注册中心高可用集群概述 对于微服务这种分布式系统,要充分考虑每个微服务组件的高可用性问题,不能用单点故障。 注册中心本身也是一个服务,如果只有一个节点(服务器),则有可能发生故障而导致无法使用注册和查询服务(单点故障),为保证服务注册中心的高可用,通过服务注册 ...
分类:
编程语言 时间:
2020-09-17 20:34:56
阅读次数:
28
[TOC]kubeadm安装k8s集群kubeadm的实现设计请参考:https://github.com/kubernetes/kubeadm/blob/master/docs/design/design_v1.10.md网络规划节点网络Pod网络service网络192.168.101.0/2410.244.0.0/16(flannel网络默认)10.96.0.0/12部署流程各个master
分类:
Web程序 时间:
2020-09-17 20:33:41
阅读次数:
44